大数据应用技术是未来企业竞争力的关键
来源:转载 时间:2015-04-10 14:04:10
大数据(bigdata)
或称巨量资料,指的是需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。
在维克托·迈尔-舍恩伯格及肯尼斯·库克耶编写的《大数据时代》中大数据指不用随机分析法(抽样调查)这样的捷径,而采用所有数据进行分析处理。大数据的4V特点:Volume(大量)、Velocity(高速)、Variety(多样)、Value(价值)。
计算机数据存储单位
最小的基本单位是bit,按顺序给出所有单位:bit、Byte、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB,
它们按照进率1024(2的十次方)来计算:1Byte=8bit1KB=1,024Bytes1MB=1,024KB1GB=1,024MB1TB=1,024GB1PB=1,024TB1EB=1,024PB1ZB=1,024EB1YB=1,024ZB1BB=1,024YB1NB=1,024BB1DB=1,024NB
专家
大数据渗透生活方方面面
——清华大学计算机系副主任朱文武教授
“互联网能把我们所有的人和设备联系起来,比如说每天百度会产生300PB的数据要处理,脸书有10亿用户。大量的互联网信息产生了非常大的数据需要进行处理。”清华大学数据科学研究院首席科学家、国家973首席科学家、清华大学计算机系副主任朱文武教授说,全世界有40亿的GPS在采集数据,记录什么呢?记录人们的行为,记录人们对信息的喜欢程度、偏爱程度、情绪的体现。
“大数据是继互联网以后,能渗透到生活方方面面的技术,大数据给我们带来变革的同时,使我们的思想方式产生了变化,企业原来关注生产规模和能力,现在更强调企业对于数据资源的分析能力和掌控能力。”朱文武说,大数据的特点是数据量非常大、数据种类非常多、数据的变化很快、数据的真实性和可靠性等,因此会给数据分析带来很多挑战,这就决定着以后对数据分析师、数据科学家的需求会增长得非常快。
数据共享打造智慧城市
——微软亚洲研究院院长刘震
“我认为,对智慧城市来说,基于数据来做决策,这是最关键的一点。从这个角度来讲,城市可以说就是一个大数据,要管理一个城市,特别是在大数据时代,就是把数据有效地利用起来,要利用这个数据,就是看我们怎么来采集这些数据,然后处理这些数据,在各行各业都有,包括空气质量检测、包括食品安全、甚至是旅游景点的管理,这些都是数据采集的来源,提高我们服务的质量。”微软亚洲研究院院长刘震建议,目前,北京、上海等一些城市已经开始做数据开放了,但是开放程度和量还是有限的,特别是很多城市都是要把数据先进行一下整理,然后再有条件地、有选择性地开放,青岛是不是可以更进一步,把更多的数据开放出来,让整个企业界、让学生、让应用开发者来帮助整理,帮助采集,帮助提取。
刘震认为,智慧城市第一代基于各个单独领域和环节做一些解决方案的技术研究和开发,比如说智慧交通,或者是智慧医疗,智慧教育等等。第二代智慧城市则是把这些不同智慧解决方案来一个整合化,比如把智慧交通和智慧医疗或者是智慧教育整合在一起,建立一些新的应用。“比如说上海的踩踏事件,用大数据处理的话就可以避免,大家想象一下,假如有一个智能旅游的应用,这个智能旅游就是看各个景点的人数,另外一个应用就是紧急事故处理,就是根据不同的标准,规定每个楼宇最多有多少人可以进来,或者一个区域人的密度是多少,这些都有硬性指标,到了这个人数就关掉然后再开放新的区域。这种智慧城市的应用就是通过及时的事态感应和跨领域的分析,可以能够建立起来的。”刘震说。
注重客户使用体验感受
——清华大学软件学院党委书记王建民
“我们的企业不仅要感知客户,还要感知用户,客户和用户是不一样的,比如说在工程机械里面,客户是代理商,用户是具体操作人员,原来我们只关注大老板在想什么,关注具体操作人员的成本会很高,现在加了传感器,具体操作人员的感受你也收集回来了。”清华大学软件学院党委书记、清华-青岛数据数学研究院管委会副主任王建民说,小米如何取得成功?其中之一就是让客户参与到设计中来,小米现在是市场直接来源于他的客户。“青岛也部署了好多的机器人企业,在换了人的同时,有什么样的变化呢?主要就是能够采集更多的数据。”王建民说,一个企业成千上万人,大家都在做产品和服务,作为它的载体放进去。原来的制造业中,有很多的工业流程,比如说在四川有一个锅炉企业,上万人,在顶层上面有上百个流程,流程原来也在用,现在大数据时代,这个流程怎么用,就是基于数据决策,所以要把它变成从流程驱动到数据驱动。
移动媒体的数据是核心
——清华大学新闻与传播学院教授、博士生导师沈阳
“我个人对大数据的认知是这样的,首先要有海量的数据,其次要对大数据做一个升华,把它归纳为小数据,在小数据上形成一个相对可读的,能够让决策人员阅读偏向于决策和判断的。而移动媒体的数据又是现在媒体大数据的一个核心。”清华大学新闻与传播学院教授、博士生导师沈阳举例说,当你每天拿着手机跟别人聊天,如果手机里面有一个软件在分析,知道你在聊什么,喜欢什么,软件还知道你的朋友是谁,你每天晚上带着手机在边上睡觉的话,手机如果有一个分析程序,它只需要定位一下,这就是你们家,所以手机也知道你们家在哪儿。如果你带了一个智能手环,手机也可以知道你的身体状况。
“我相信大数据以后在百姓最关注的食品安全以及环保等问题上也会大有所为,例如从田间地头到市民餐桌全程监控,出现问题可以溯源,再例如具体到一个楼座周围的雾霾指数等等。通过数据分析,这些全能做到。”