【CSDN现场报道】2015年12月10-12日,由中国计算机学会(CCF)主办,CCF大数据专家委员会承办,中国科学院计算技术研究所、北京中科天玑科技有限公司与CSDN共同协办,以“数据安全、深度分析、行业应用”为主题的 2015中国大数据技术大会 (Big Data Technology Conference 2015,BDTC 2015)在北京新云南皇冠假日酒店盛大开幕。
美国俄亥俄州立大学计算机科学与工程系主任, Robert M. Critchfield讲席教授张晓东发表大会主席致辞。他表示人类对探索物理和物质世界强大的需求,促使计算机性能迅猛发展,今天的大数据并不是对已有的物理和物质世界中间的延续,而是一个新的更大更猛的数字世界的降临,我们每个人都生活在一个充满数据的时代里面,我们所有的行为贡献了这个数字世界。同时,他认为今天人类所有的行为都被数据所记录,从大数据中间获得新的知识,特别是对人类的消费、社交、思维等进行深入的分析和了解,所以我们的计算机模型也发生了根本的变化。计算机的模型已经变成云计算模型等。
另外,他坦言,大数据时代的到来,全方位的颠覆了IT领域的系统开发和数据处理,通用的数据库技术已经不能满足大数据可扩充、传统的数据库管理的商业模式也不能被日益增长的用户所接受,因此,面对这些新的社会的市场需求,新开发的大数据主流是以低成本的开源软件、云计算模式出现的。最后,他大胆预测,由于大数据的到来,我们对人类自身的了解将会达到一个非常高的前所未有的高度。
美国俄亥俄州立大学计算机科学与工程系主任, Robert M. Critchfield讲席教授张晓东
以下为演讲实录
张晓东:非常高兴来到2015中国大数据技术大会,这个大会起点是在计算所,60人参加的Hadoop沙龙,这个起点非常好,因为当时在美国Hadoop也是刚刚开始来做开发,计算所也做了非常核心技术的贡献。
跟大家分享一下我对今天计算机数据与关系的一点自己的经验,我们看看计算机从诞生的第一天开始起,它就跟数据打交道,但是那时候的数据跟今天是不一样的。计算机做非常复杂、非常快速的运算,得出来的结果,这是计算机最原始的模型。在座的同学非常年轻,我自己经历过,八十年代我在北京读书的时候,当时我们上电工课的时候,绝大多数同学都用计算尺,很多同学可能没听说过计算尺,但是个别同学家里父母出国买了个小计算器,这是计算机的原型,我们当时用计算尺跟计算器做比赛,发现还是不行,这是我第一次体会到计算机的速度。
计算机在第一阶段研发当中做了什么事情,使我们有科技的发展,就是人类对探索物理和物质世界强大的需求,这时候计算机扩大了功能,这时候计算机包括高性能计算机、超级计算机,对代表物理和物质世界做深度的分析和研究,这第一步前要将物理世界、物质世界转化为模拟的数字世界,然后再做分析和计算。这个时候,在过去的几十年里,人类社会有突飞猛进科技的发展,包括天气预报、新兴材料和各种各样的模拟,比如今天的汽车碰撞已经不用汽车往墙上撞,包括核武器的实验等等都是用计算机模拟,包括天气预报我们知道什么时候有雾霾,这都是通过高性能计算。
今天的大数据并不是在已有的物理和物质的世界中间的延续 ,而是一个新的更大更猛的数字世界的降临,这个数字怎么降临的呢?在过去的数字世界和今天的数字世界中有一个过渡段,这个过渡段是互联网,随着互联网、无线上网、物联网等等网络技术的发展,我们每个人都生活在一个充满数据的时代里面,我们通过电话、微博、QQ、微信、网上购物、网上学习、网上查询等等日常工作行为,我们贡献了这个数字世界。
这也是今天大数据的来源,这就是为什么今天我们数据的90%都来自于近两年,有史以来数据总和的90%是过去两年产生的,谁来产生的?我们每一个人都做出了贡献。今天这个数字世界和过去是完全不一样的,过去是我们科学家、工程师来研究的,今天的数字世界是我们每个公民创造的。
这么大的数据,我们要从这些数据中获得新的知识,特别是精确记录和追踪人类自身行为,这是前所未有的,我们今天所有行为都被数据所记录了,我们从大数据中间获得新的知识,特别是对人类的消费、社交、思维等进行深入的分析和了解,所以我们的计算机模型也发生了根本的变化。计算机的模型已经变成云计算模型,变成了数据中心。
大数据的到来,全方位的颠覆了IT领域的系统开发和数据处理,通用的数据库技术已经不能满足大数据可扩充、容错的这种特殊的需求,传统的数据库管理的商业模式也不能被日益增长的这些非赢利的非常多用户所接受,面对这些新的社会的市场需求,新开发的大数据主流是以低成本的开源软件、云计算模式出现的。我现在说一句话,可能大的公司不愿意听,这一趋势必将加速传统商业数据处理市场的萎缩。在大数据时代,数据处理和应用远远超过事物性的处理和模拟,过去我们做的数据处理就是两件事情,现在要做各种各样的分析。
我给大家举个例子,1986年美国挑战号航天飞机在发射 后74秒钟悲剧 性爆炸了,半个小时之后股票市场对4个相关的公司做出了非常负面的反映,但是过了3小时之后股票市场重跌只集中在一家简称“MT”的公司,当天美国总统聘请一个专家委员会,6个月之后委员会发布调查报告,它的结论和股票市场的结论完全相符,MT生产的燃料是导致爆炸的主要原因。这是1986年,跟今天无法相比。
我们可以想象一下,如果在3小时之内股票市场所有交易,和人和人之间像QQ等等,为什么要卖掉股票等所有数据都记录,对这个3小时内大数据进行分析,我们是不是能够在很短时间内得到比专家委员会调查报告更深入、更细致的报告?我觉得是可以的。
上个世纪九十年代,人们大胆的预测:互联网的出现和完备将对工业生产和人类的行为和生活做出颠覆性的变化。20年后的今天,我们看到这个预测已经完全应验了,今天我们可以对大数据时代做类似的预测,10年之后我们在讲台上就可以看看我们的生活发生了多大的变化。但是我觉得最大的一件事情,由于大数据的到来,我们对人类自身的了解将会达到一个非常高的前所未有的高度。
今天大会的主题从系统角度来讲是“内存计算”,从应用的角度是“数据的深度学习”,还有“数据共享”,所以我希望大家能够在这个大会过程中有个很好的学习和交流经验。在这这里预祝大会顺利和圆满成功,谢谢大家!
更多精彩内容,请关注直播专题 2015中国大数据技术大会(BDTC) ,新浪微博 @CSDN云计算 ,订阅 CSDN大数据 微信号。