首先是量特别大,现在的数据计算单位,已经从GB到达了TB、PB,甚至是EB了。
绝大多数大数据是非结构性的,种类十分复杂,我们现在的技术手段还没法对此进行处理。
大数据的第三个特点是速度,其数据产生和传送的频率非常快。
从大量的低质量、低价值的数据中获取知识,犹如从大海中捞针,但有待挖掘价值大。
哪些组织或者应用程序掌握了我们的“痕迹”呢?中国联通网络技术研究院首席专家唐雄燕举例说,百度掌握你的隐私,微信知道你的社交圈子,淘宝了解你的购物习惯,移动电信联通三大运营商存有你的 通话记录和上网记录,银联知道你在哪里用了信用卡,定位软件则知道你现在何方……
比如在互联网金融领域降低了不良贷款率,减少了交易成本。谷歌利用大数据预测季节性流感的爆发和传播。AT&T将用户在WiFi网络中的地理位置、网络浏览历史记录以及使用的应用等数据销售给广告客户。当用户距离商家很近时,就有可能收到该商家提供的折扣很大的电子优惠券,等等。
大数据可以有效地实现“智慧医疗”,为全面的个人健康管理进行服务;个人可以方便获取医院的就诊信息、检查数据、医疗影像等,以及个人健康的历史数据;为慢性病患者提供远程数据分析和服务。大数据还可以辅助临床诊断和用药决策;为公共卫生机构提供及时的统计分析;以及为药品研发、治疗方案设计提供数据分析。随着大数据的发展,广大公众的生活也将变得更加便利。
2008年,谷歌的一支研发团队利用在网上收集到的海量个人搜索词汇数据,赶在政府流行病学家之前两星期预测了甲型H1N1流感的暴发。这样的事情在以前是不可想象的,掌握了大数据后,谷歌就做到了。大数据浪潮,让人类在历史上第一次有机会用数据围绕一个东西形成完整的描述。凭借日益增强的数据分析能力,人类得以有效实现对未来的预测。大数据可以帮助人们提升人才评价的整体水平,解决人才评价面向未来的问题。
企业需要两类大数据人才,一是数据平台建设人才;二是数据挖掘应用人才。大数据是因应结合应用来体现其价值……例如推动大数据技术在金融、气象、行政管理等领域的应用,推进基于大数据技术的个人信贷和医疗保健等。【详细】
一是技术相关人才,包括IT、系统、硬件和软件;二是数量相关人才,包括统计、数学、建模、算法;三是业务,就是要有一定的专业领域知识。建立大数据的数据存储本身需要技术能力,但是怎么通过数据去做分析?这就需要数量能力。【详细】
在一个产品设计之前,为企业各项决策提供关键性数据支撑,实现企业数据价值的最大化,更好地实施差异化竞争,帮助企业在竞争中获得先机。
大数据基础设施的设计者、建设者和管理者,他们开发出可根据企业需要进行分析和提供数据的架构。同时,他们的架构还可确保系统能够平稳运行。
擅长处理散乱数据、各类不相干的数据,精通统计学的方法,能够通过监控系统获得原始数据,在统计学的角度上解释数据。
职责是通过分析将数据转化为企业能够使用的信息。他们通过数据找到问题,准确地找到问题产生的原因,为下一步的改进找到关键点。
将数据还原到产品中,为产品所用。他们能够用常人能理解的语言表述出数据所蕴含的信息,根据数据分析结论推动企业内部做出调整。
大数据中的领导者,具备多种交叉科学和商业技能,能够将数据和技术转化为企业的商业价值。