博客水木

一. 概述 在大数据平台建设初期，安全也许并不是被重点关注的一环。大数据平台的定位主要是服务数据开发人员，提高数据开发效率，提供便捷的开发流程，有效支持数仓建设。大数据平台的用户都是公司内部人员。数据本身的安全性已经由公司层面的网络及物理机房的隔离来得到保证。那么数据平台建设过程中，需要考虑哪些安全...继续阅读

【AI世代编者按】近年来，人工智能技术在各行各业中的应用越来越普及，相关专业技术人才也是供不应求，各大公司或是创业公司不惜重金招募AI人才。最近一项统计显示，人工智能相关职位平均年薪达到30万元-60万元，从业时间长的甚至能达到年薪百万。 2017年，人工智能产业正在爆发 今年的两会上，政府工作报告指出要...继续阅读

11月12日，国家邮政局发布数据显示，“双11”当天，主要电商企业全天共产生快递物流订单13.52亿件，同比增长25.12%;全天各邮政、快递企业共处理4.16亿件，同比增长25.68%。 一个巨大的挑战摆在了包括菜鸟网络在内的物流面前，但随着人工智能、大数据的应用越来越广泛，无人化仓储、无人化配送越来越多，供应链越来越扁平...继续阅读

星图数据独家监测直播“双十一”全网销售， 并实时发布数据。 这是星图连续第5年全网独家直播！ 直播数据还不尽兴？ 今天更全面的双11网购大数据分析报告来了， 全网最全、最快、最详尽， 双11大数据报告在此， 拿走不谢！ (横屏阅读更健康)     继续阅读

中国科学院院士张钹对国内外人工智能产业发展现状，提出我国仅靠跟随性的应用深度学习发展人工智能，是无法引领这项技术实现革命性突破的。语音也在里面学，文字也在里面学，图像也在里面学，会不会互相干扰呢？其实不仅不会互相干扰，在一定程度上还略微有帮助。北美已在引领这些发展，如果中国只低头用深度学习去解决应...继续阅读

大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等，汇集了当前IT领域热门流行的IT技术。 1. Java编程技术 Java编程技术是大数据学习的基础...继续阅读

我们对大数据技术的使用也经历了一个发展过程。从最开始的Google在搜索引擎中开始使用大数据技术，到现在无处不在的各种人工智能应用，伴随着大数据技术的发展，大数据应用也从曲高和寡走到了今天的遍地开花。 Google从最开始发表大数据划时代论文的时候，也许自己也没有想到，自己开启了一个大数据的新时代。今天大数据...继续阅读

今年以来，广西投资集团紧密围绕自治区部署，迅速推进数字经济产业布局。5月21日，集团全资子公司“数字广西集团有限公司”（简称“数字广西集团”）成功进行工商登记注册，标志着广西首家地方国有全资数字经济产业平台公司成立；7月20日，“数字广西集团”第一个全资子公司“云上广西大数据有限公司”（简称“云上广西”...继续阅读

问题（来自lunacyfoundme） 我正在重建我们公司内部网，期间遇到一个与大量数据处理报告有关的前一个版本的问题。此前我曾用同步处理程序代码解决过这个问题，只是运行的很慢很慢，这导致我不得不延长最大脚本运行时间10到15分钟。有没有更好的方式来处理PHP站点里的大量数据呢？理想情况下我想在后台运行它，并且跑的越...继续阅读

1.Linux基础和分布式集群技术 学完此阶段可掌握的核心能力：   熟练使用Linux，熟练安装Linux上的软件，了解熟悉负载均衡、高可靠等集群相关概念，搭建互联网高并发、高可靠的服务架构；   学完此阶段可解决的现实问题：   搭建负载均衡、高可靠的服务器集群，可以增大网站的并发访问量，保证服务不间断地...继续阅读