《大数据时代》简介23

单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,#,乐山师范学院 文学与新闻学院 2012级新闻班,徐瑜梅 李培谦 黄冰冰 张亚庆,胡雪梅 周凯頔 蒋敏 焦倩茹,2015年5月8,日,前瞻性,地,地指出,，,，大数,据,据带来,的,的信息,风,风暴正,在,在变革,我,我们的生活、,工,工作和,思,思维，大数,据,据开启,了,了一次,重,重大的,时,时代转,型,型，并,用,用三个,部,部分讲,述,述了大,数,数据时,代,代的思,维,维变革,、,、商业,变,变革和,管,管理变,革,革。,维克托,.,迈尔,.舍恩伯,格,格,引言,1、大,数,数据,变革公,共,共卫生,2、大数,据,据变革,商,商业,3、大数据,变,变革思,维,维,4、大数据,开,开启时,代,代转型,5、预测是,大,大数据,的,的核心,6、大数据,是,是大挑,战,战,1、大,数,数据,变革公,共,共卫生,2009年的甲型h1n1流感，在短,短,短几周,之,之内迅,速,速传播,。,。互联,网,网巨头,谷,谷歌公,司,司的工,程,程师们,设,设立一,个,个系统,关,关注特,定,定检索,词,词条的,频,频繁使,用,用与流,感,感在时,间,间和空,间,间上的,传,传播之,间,间的联,系,系。软,件,件发现,了,了45条检索,词,词条的,组,组合，,一,一旦将,它,它们用,于,于一个,数,数学模,型,型，他,们,们的预,测,测与官,方,方数据,的,的相关,性,性高达97%。和疾,控,控中心,一,一样，,他,他们由,此,此判断,出,出流感,是,是从哪,里,里传播,出,出来的,，,，而且,他,他们的,判,判断非,常,常及时,。,。这是,当,当今社,会,会所独,有,有的一,种,种新型,能,能力：,以,以一种,前,前所未,有,有的方,式,式，通,过,过对海,量,量数据,进,进行分,析,析，获,得,得有巨,大,大价值,的,的产品,和,和服务,，,，或深,刻,刻的洞,见,见。基,于,于这样,的,的技术,理,理念和,数,数据储,备,备，下,一,一次流,感,感来袭,的,的时候,，,，世界,将,将会拥,有,有一种,更,更好的,预,预测工,具,具，以,预,预防流,感,感的传,播,播。,2、大数,据,据变革,商,商业,购买飞,机,机票就,是,是一个,很,很好的,例,例子。,哈,哈佛大,学,学首届,计,计算机,科,科学专,业,业的毕,业,业生奥伦,埃,埃齐奥,尼,尼在一次,飞,飞机票,价,价不等,的,的打击,下,下开发,一,一个系,统,统，这,个,个系统,用,用来推,测,测当前,网,网页上,的,的机票,价,价格是,否,否合理,。,。这个,系,系统需,要,要分析,所,所有特,定,定航线,机,机票的,销,销售价,格,格并确,定,定票价,与,与提前,购,购买天,数,数的关,系,系。这,个,个预测,系,系统，,它,它帮助,虚,虚拟的,乘,乘客节,省,省了很,多,多钱。,之,之后这,个,个项目,变,变为风,险,险投资,基,基金支,持,持的科,技,技创业,公,公司，,名,名为farecast。如今,，,，farecast已经拥,有,有惊人,的,的约2000亿条飞,行,行数据,记,记录。,3、大数据,变,变革思,维,维,半个世,纪,纪以来,，,，随着,计,计算机,技,技术全,面,面融入,社,社会生,活,活，信,息,息爆炸,已,已经积,累,累到了,一,一个开,始,始引发,变,变革的,程,程度。,它,它不仅,使,使世界,充,充斥着,比,比以往,更,更多的,信,信息，,而,而且其,增,增长速,度,度也在,加,加快。人们不,再,再认为,数,数据是,静,静止和,陈,陈旧的,。,。信息,总,总量的,变,变化还,导,导致了,信,信息形,态,态的变,化,化,量,量变引,发,发了质,变,变。最,先,先经历,信,信息爆,炸,炸的学,科,科，如,天,天文学,和,和基因,学,学，创,造,造出了,“,“大数,据,据”这,个,个概念,。,。如今,，,，这个,概,概念几,乎,乎应用,到,到了所,有,有人类,致,致力于,发,发展的,领,领域中,。,。,4、大数据,开,开启时,代,代转型,2003年，人,类,类第一,次,次破译,人,人体基,因,因密码,的,的时候,，,，辛苦,工,工作了,十,十年才,完,完成了,三,三十亿,对,对碱基,对,对的排,序,序。大,约,约十年,之,之后，,世,世界范,围,围内的,基,基因仪,每,每15分钟就,可,可以完,成,成同样,的,的工作,。,。在金,融,融领域,，,，美国,股,股市每,天,天的成,交,交量高,达,达70亿股。,而,而其中,三,三分之,二,二的交,易,易都是,由,由建立,在,在算法,公,公式上,的,的计算,机,机程序,完,完成的,。,。这些,程,程序运,用,用海量,数,数据来,预,预测利,益,益和降,低,低风险,。,。,5、预测是,大,大数据,的,的核心,大数据,的,的核心,就,就是预,测,测。它,通,通常被,视,视为人,工,工智能,的,的一部,分,分，或,者,者更确,切,切地说,，,，被视,为,为一种,机,机器学,习,习。大,数,数据不,是,是要教,机,机器像,人,人一样,思,思考。,相,相反，,它,它是把,数,数学算,法,法运用,到,到海量,的,的数据,上,上来预,测,测事情,发,发生的,可,可能性,。,。,就像互,联,联网通,过,过给计,算,算机添,加,加通信,功,功能而,改,改变了,世,世界，,大,大数据,也,也将改,变,变我们,生,生活中,最,最重要,的,的方面,，,，因为,它,它为我,们,们的生,活,活创造,了,了前所,未,未有的,可,可量化,的,的维度,。,。大数,据,据已经,成,成为了,新,新发明,和,和新服,务,务的源,泉,泉，而,更,更多的,改,改变正,蓄,蓄势待,发,发。,6、大数据,是,是大挑,战,战,数据化,意,意味着,我,我们把,一,一切都,透,透明化,，,，甚至,包,包括很,多,多我们,以,以前认,为,为和“,信,信息”,根,根本搭,不,不上边,的,的事情,。,。大数,据,据时代,开,开启了,一,一场寻,宝,宝游戏,，,，而人,们,们对于,数,数据的,看,看法以,及,及对于,由,由因果,关,关系向,相,相关关,系,系转化,时,时释放,出,出的潜,在,在价值,的,的态度,，,，正是,主,主宰这,场,场游戏,的,的关键,。,。,内容简,介,介,大数据,时,时代的,思,思维变,革,革,第一部,分,分,第二部,分,分,大数据,时,时代的,商,商业变,革,革,大数据,时,时代的,管,管理变,革,革,第三部,分,分,反思,2,01,主要观,点,点,更多不是随,机,机样本,，,，而是,全,全体数,据,据,更杂不是精,确,确性，,而,而是混,杂,杂性,更好不,是,是因果,关,关系，,而,而是相,关,关关系,数百年,来,来我们,都,都是以,抽,抽样调,查,查的方,式,式作为,统,统计的,基,基础，,而,而在大,数,数据时,代,代，这,种,种状况,会,会发生,重,重大改,变,变。由,于,于这些,年,年存储,技,技术的,发,发展以,及,及互联,网,网在全,世,世界的,普,普及，,既,既有了,存,存储巨,大,大数据,量,量的技,术,术基础,，,，也有,了,了数据,来,来源，,再,再加上,云,云计算,的,的快速,分,分析技,术,术，大,数,数据时,代,代是以,全,全体数,据,据作为,样,样本进,行,行分析,，,，而非,从,从前那,样,样在随,机,机抽取,一,一定样,本,本数量,的,的基础,之,之上进,行,行分析,。,。当数,据,据处理,技,技术得,到,到了较,大,大的发,展,展之后,，,，数据,分,分析就,采,采取了,全,全数据,模,模式，,样,样本=总体，比如淘宝进行用,户,户行为,分,分析时,会,会就一,个,个用户,在,在淘宝,里,里的所,有,有行为,进,进行技,术,术分析,，,，而谷歌对流感,的,的预测,则,则是对,所,所有相,关,关词汇,搜,搜索行,为,为进行技术分,析,析。,更多,数据的,来,来源很,广,广阔，,数,数据的,数,数量很,庞,庞大，,在,在此基,础,础之上,带,带来的,必,必然是,各,各种数,据,据的混,杂,杂，但,混,混杂性,并,并不会,影,影响到,大,大数据,的,的分析,结,结果的,可,可用性,，,，因为,数,数据量,的,的庞大,远,远远抵,消,消了混,杂,杂的错,误,误数据,对,对于分,析,析结果,的,的影响,。,。数据,量,量的显,著,著增大,必,必然会,让,让我们,付,付出一,些,些代价,一,些,些不准,确,确的数,据,据会混,入,入数据,库,库，结,果,果也可,能,能不准,确,确。对,“,“小数,据,据”而,言,言，最,重,重要的,要,要求就,是,是减少,错,错误；,在,在大数,据,据的采,集,集里，,在,在技术,尚,尚未达,到,到完美,无,无缺之,前,前，混,乱,乱是无,可,可避的,。,。虽然,我,我们得,到,到的信,息,息不再,那,那么准,确,确，但,是,是收集,到,到的数,量,量庞大,的,的信息,让,让我们,放,放弃严,格,格精确,的,的选择,变,变的更,为,为划算,。,。,更杂,不是因,果,果关系,，,，而是相关关,系,系。知道“是什么”就够了,，,，没必,要,要知道“为什么”。,更好,尤其对,于,于社会,经,经济的,参,参与者,来,来说，,及,及时的,知,知道相,关,关关系,并,并且拿,出,出合适,的,的策略,比,比搞明,白,白“为什么”更重要,。,。无疑,大,大数据,将,将使许,多,多企业,的,的效率,得,得到质,的,的提升,。,。,淘宝数,据,据有一,个,个视频,内,内容是,各,各个省,份,份的人,购,购物情,况,况的分,析,析统计,，,，比如,在,在见不,到,到大海,的,的新疆,，,，购买,比,比基尼,却,却是最,多,多的，,那,那么淘,宝,宝并不,需,需要知,道,道新疆,人,人为什,么,么喜欢,买,买比基,尼,尼，是,因,因为气,候,候还是,生,生活习,惯,惯并不,重,重要，,重,重要的,是,是淘宝,要,要多为,新,新疆用,户,户推荐,比,比基尼,，,，可以,获,获得更,高,高的转,化,化率。,（推荐,视,视频,淘,淘宝数,据,据盛典你所不,知,知道的,城,城市秘,密,密,大数据,时,时代的,商,商业变,革,革,02,内容数,据,据化、,数,数据价,值,值实现,、,、数据,公,公司类,型,型三部,分,分,大数据,蕴,蕴藏着,巨,巨大的,商,商业价,值,值。根,据,据提供,价,价值的,不,不同来,源,源，大,数,数据价,值,值链包,括,括三大,构,构成部,分,分。包,括,括第一,种,种是基,于,于数据,本,本身的,公,公司。,这,这些公,司,司拥有,大,大量数,据,据或者,至,至少可,以,以收集,到,到大量,数,数据，,却,却不一,定,定有从,数,数据中,提,提取价,值,值或者,用,用数据,催,催生创,新,新思想,的,的技能,。,。第二,种,种是基,于,于技能,的,的公司,。,。它们,通,通常是,咨,咨询公,司,司、技,术,术供应,商,商或者,分,分析公,司,司。它,们,们掌握,了,了专业,技,技能但,并,并不一,定,定拥有,数,数据或,者,者提出,数,数据创,性,性用途,的,的才能,。,。,沃尔玛和Pop,-,-Tarts这两个,零,零售商,就,就是借,助,助天睿,公,公司的,分,分析来,获,获得营,销,销点子,，,，天睿,就,就是一,家,家大数,据,据分析,公,公司。,皮特.华登，Jetpac的联合,创,创始人,，,，就是,通,通过想,法,法获得,价,价值的,一,一个例,子,子，他,通,通过用,户,户分享,到,到网上,的,的旅行,照,照片来,为,为人们,推,推荐下,一,一次旅,行,行目的,地,地。,0,3,大数据,引,引起了,一,一场管,理,理规范,的,的变革,互联网,时,时代，,我,我们的,隐,隐私受,到,到了威,胁,胁，大,数,数据时,代,代一定,是,是有过,之,之而无,不,不及。,