博客水木

前段时间，ThoughtWorks在深圳举办一次社区活动上，有一个演讲主题叫做“Fullstack JavaScript”，是关于用JavaScript进行前端、服务器端，甚至数据库（MongoDB）开发，一个Web应用开发人员，只需要学会一门语言，就可以实现整个应用。 受此启发，我发现Python可以称为大数据全栈式开发语言。因为Python在云基础设施，De...继续阅读

前言 本文介绍了学术界和工业界对于用户隐私保护的努力成果，其中主要讲到了k-anonymity（k-匿名化）,l-diversity（l-多样化）,t-closeness 和 ε-differential privacy（差分隐私），并对它们的优缺点进行了分析。 数据 v.s. 隐私 在大数据的时代，数据成为了科学研究的基石。我们在享受着推荐算法、语音识别、图像识...继续阅读

通过对数据科学领域的几个重要概念间关系的分析，来解释数据科学中遇到的困惑。我们将会看到的，远不是金科玉律的具体概念，难免不同看法; 这只是一种参考意见。 By Matthew Mayo , KDnuggets.本文由 36大数据（dashuju36 ）翻译，译者 Juzen 。 网络上从不缺乏对数据科学术语进行比较和对比的文章。文笔各异的人写...继续阅读

还记得阿里巴巴那个令人澎湃激情的双十一吗？还记得淘宝生动形象地把你的的消费历程一一地展示给你看吗？还记得那些酷炫拽的it报告图表吗？在这个大数据越来越盛行的年代，怎样去表达一些用户的关系，人物的关联，甚至是事情的发展，都让我们有更多的表达方式。其中最简单直接，形象明了的就是用图表说明问题了。 如果在...继续阅读

一、 凡闻科技 凡闻科技专注辅助媒体生产优质内容，颠覆传统采编流程，助力传统媒体转型，致力资讯融媒时代。 凡闻在中国、新加坡、印度三地拥有研发和运营团队，获得国内顶级的文化产业投资基金和大数据云服务基金的多轮注资。 二、 凡闻历程 三、 凡闻荣誉 国家软件企业 浙江省科技型中小型企业 杭州市文化创意产业扶...继续阅读

10月29日，中共中央十八届五中全会顺利闭幕。会议通过了“十三五”计划并出台了一系列重大政策，包括“允许普遍二孩”及“普及高中教育”等。会议强调，实现“十三五”时期发展目标，破解发展难题，厚植发展优势，必须牢固树立并切实贯彻创新、协调、绿色、开放、共享的发展理念。值得注意的是，信息时代的时髦词汇“互联...继续阅读

今日，微信团队公布了除夕夜微信的大数据。昨夜，微信成了春晚的独家互动工具。每当电视屏幕又下角出现“摇一摇”的手势时，全国都在疯狂摇手机的场面相信大家已经深有体会。场面究竟有多热烈，也许我们可以从微信公布的大数据中一探究竟。 1. 很多网友反映除夕夜微信收发出现问题，要不一会儿收不到信息，要不一会儿收到...继续阅读

ZDNet发起的中国大数据认知与应用市场调研，从全局的角度对基于中国不同地域以及不同行业对大数据的认知和关注程度进行了扫描，并从中看到了x86架构作为大数据基础平台的接受度以及发展潜力。本文将在此基础上，结合数据库应用和相关技术对调研报告进行解读，并从中总结几大发现和结论。 一.对大数据分析和存储的需求旺盛...继续阅读

一、概 述 分表是个目前算是比较炒的比较流行的概念，特别是在大负载的情况下，分表是一个良好分散数据库压力的好方法。 首先要了解为什么要分表，分表的好处是什么。我们先来大概了解以下一个数据库执行SQL的过程： 接收到SQL –> 放入SQL执行队列 –> 使用分析器分解SQL –> 按照分析结果进行...继续阅读

新华社北京1月24日 你知道吗？平均每张火车票需要访问“12306”网站近千次才能预订成功。点击进入 了解更多12306大数据 你知道吗？千辛万苦“秒杀”到的火车票竟有43％无人支付流回票池。 你知道吗？很多车次一票难求的时候，不少车次还有大量空座。 新华社“中国网事”记者联合“12306”网站、数托邦创意工作室，走进“...继续阅读