财务大数据基础课件项目一

Click to edit Master title style,Click to edit Master text styles,Second level,Third level,Fourth level,Fifth level,11/7/2009,#,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,项目一 财务大数据认知,项目一 财务大数据认知,目标,了解大数据概念,了解大数据特点,了解大数据发展历程,了解大数据应用场景,了解财会大数据的概念及特点,了解大数据分析过程及分析工具,目标了解大数据概念,任务一 大数据认知,任务一 大数据认知,任务实施,大数据的含义,大数据的发展历程,大数据的特点,我国大数据发展战略,大数据应用场景,大数据思维,任务实施大数据的含义,大数据的含义,大数据,无法用常规数据工具在一定时间内进行采集、处理、存储和计算的数据集合,大数据获取技术,大数据存储和管理技术,大数据分析和挖掘技术,大数据可视化展现技术等,处理模式,需要专门的处理模式才能使其具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产,大数据的定义,大数据的含义大数据无法用常规数据工具在一定时间内进行采集、处,大数据的含义,大数据产生的原因,全球,互联网,约有,40,亿人都是数据源,全球大约有,1000,亿个传感器都是数据源,人类活动的进一步扩展都是数据源,大数据的含义大数据产生的原因全球互联网约有40亿人都是数据源,大数据的含义,身边的大数据,精准广告推荐,专车,精准匹配模型,精准,车险费用,大数据的含义身边的大数据精准广告推荐专车精准匹配模型精准车险,大数据的发展历程,萌芽阶段（,1980,年,-2008,年）,成长阶段（,2009,年,-2012,年）,爆发阶段（,2013,年,-2015,年）,快速发展阶段（,2016,年至今）,大数据的发展历程萌芽阶段（1980年-2008年）成长阶段（,萌芽阶段,（,1980,年,-2008,年）,1980,2007,2008,未来学家托夫勒,第三次浪潮著作,首次提到大数据,“第三次浪潮的华彩乐章”,社交网络激增,大数据概念注入新生机,自然杂志,推出“大数据”封面专栏,萌芽阶段（1980年-2008年）198020072008,肯尼斯库克尔在经济学人上发表了长达,14,页的大数据专题报告数据，无所不在的数据,成长阶段,（,2009,年,-2012,年）,2010,2,月,麦肯锡在大数据：下一个创新、竞争和生产率的前沿研究报告中指出：“大数据时代已经到来”,2011,6,月,工业和信息化部关于印发物联网“十二五”发展规划,海量数据存储、数据挖掘、图像视频智能分析等都是大数据的重要组成部分,12,月,“,十二五”国家战略性新兴产业发展规划,“,加强以网络化操作系统、海量数据处理软件等为代表的基础软件、云计算软件、工业软件、智能终端软件、信息安全软件等关键软件的开发,”,2012,7,月,维克托,迈尔,-,舍恩伯格,大数据时代,国内风靡，推动国内大数据发展,12,月,肯尼斯库克尔在经济学人上发表了长达14页的大数据专题报告,爆发阶段,（,2013,年,-2015,年）,我国大数据元年,大数据成为,国家战略,促进大数据发展行动纲要,发布,英国政府,直接投资,1000,万英镑,建立,“,开放数据研究所,”,澳大利亚政府,发布公共服务大数据战略,美国,发布,政府网站数字化分析仪表盘,爆发阶段（2013年-2015年）我国大数据元年大数据成为,快速发展阶段,（,2016,年至今）,2016,贵州省大数据发展应用促进条例,增加,“,数据科学与大数据技术专业,”,2018,达沃斯论坛把大数据作为重要议题,2019,2018,全球大数据发展分析报告显示，中国大数据技术创新能力有了显著提升,大数据企业成为资本追逐的热点,2020,全球大数据平台市场规模达到了,3745,亿元,预计,2027,年将达到,7874,亿元，年复合增长率为,11.2%,快速发展阶段（2016年至今）2016贵州省大数据发展应用,大数据的特点,大数据的特点,大数据的特点,Volume,海量数据,全球每秒发送,290,万封电子邮件，一分钟读一篇的话，足够一个人昼夜不停的读,5.5,年,采集数据,Twitter,上每天发布,5000,万条消息，假设,10,秒浏览一条消息，足够一个人昼夜不停地浏览,16,年,存储数据,1PB,是多大,？,计算数据,假设一首音乐的大小约为,10M,，,1PB,的存储空间就可以存储约,1,亿首这样的音乐。若听一首音乐需要,4,分钟，那么听完,1PB,存储空间里的音乐约需要,7,158,278,小时，也就是说即使,7,24,小时不间断地听，也需要约,298,261,天才能听完，即需要约,817,年才能听完。,大数据的特点Volume海量数据全球每秒发送290万封电,大数据的特点,Variety,多样化数据类型,数字,文本,图像,音频,视频,地理位置信息,网络日志,结构化数据,关系型数据库中的数据,特点：,有统一的数据结构和规范的数据访问和处理方法,非结构化数据,办公文档,邮件,各类报表,图像,音频,视频信息,特点：不能采用预先定义好的数据模型或没有以一个预先定义的方式来组织,半结构化数据,XML,文件,HTML,文件,特点：介于结构化数据和非结构化数据之间的数据,大数据的特点Variety多样化数据类型数字文本图像音频,大数据的特点,Velocity,大数据的时效性,数据生成速度高,数据处理速度高,大数据的特点Velocity大数据的时效性数据生成速度高,大数据的特点,Value,大数据的价值密度,大数据价值密度相对较低,数据分析结果的商业价值很高,大数据的特点Value大数据的价值密度大数据价值密度相对,我国大数据发展战略,2012,数据已经成为一种新的经济资产类别，就像货币和黄金一样,2014,廖仁斌建议,：,应尽快在国家层面启动大数据发展战略,2015,第一次将大数据写入党的全会决议，正式纳入我国国家发展战略,2017,十九大提出，要推动互联网、大数据、人工智能和实体经济深度融合,2018,中国国际大数据产业博览会,26,日在贵阳开幕,2019,决定,多次提及,互联网、大数据、人工智能等新一代信息技术,我国大数据发展战略2012数据已经成为一种新的经济资产类别，,大数据应用,场景,大数据,+,民生,大数据,+,交通,大数据,+,金融,大数据,+,安全,数据自身安全,大数据应用场景大数据+民生大数据+交通大数据+金融大数据+,大数据,+,民生,贵阳的,“,大数据民生,”,工程,大数据民生,万企,融合,五级,通办,一个,不落,隔空,诊脉,精准,扶贫,大数据+民生贵阳的“大数据民生”工程大数据民生万企五级一个隔,大数据,+,交通,智慧交通,现场人工执法越来越少,交通通行效率越来越高,交通决策越来越科学,用户服务内容越来越精准,交通服务自动化程度越来越高,大数据+交通智慧交通现场人工执法越来越少交通通行效率越来越高,大数据,+,金融,智慧银行,客户画像,精准营销,风险管控,运营优化,大数据+金融智慧银行客户画像精准营销风险管控运营优化,大数据,+,安全,大数据助力公共安全,大数据助力移动互联网安全,大数据+安全大数据助力公共安全大数据助力移动互联网安全,数据自身安全,大数据安全案例,2014,年,2,月,17,日，淘宝爆出重大安全漏洞,2015,年,5,月,，美国国税局宣布其系统遭受攻击,2016,年,9,月,22,日，全球互联网巨头雅虎证实，在,2014,年间至少有,5,亿用户的账户信息被黑客窃取,2017,年,3,月,，公安部破获一起盗卖公民信息的特大案件,2018,年,6,月,，圆通,10,亿条快递数据，,被,以,1,比特币的价格打包出售,2019,年,7,月,，微软的,Window10,操作系统过度搜集用户数据,被警告,2020,年初,，公安部破获了一起特大窃取贩卖公民个人信息案,数据自身安全大数据安全案例2014年2月17日，淘宝爆出重大,数据自身安全,大数据安全防护,数据资产梳理,对公司拥有的数据、数据所处位置及数据敏感级别保持恰当的控制,数据库加密,主动对核心数据加密存储,数据库安全运维,防止运维人员对数据库进行访问和操作时的恶意操作和高危操作,数据脱敏,通过脱敏规则对数据匿名化，实现敏感隐私数据的可靠保护,数据库漏扫,通过授权扫描、非授权扫描、弱口令、渗透攻击等检测方式发现数据库安全隐患,数据自身安全大数据安全防护数据资产梳理,大数据思维,全样思维,大数据时代的思维方式应该从样本思维转向全样思维，从而能够更加全面、立体、系统地认识总体状况,容错思维,当拥有海量即时数据时，绝对的精准不再是追求的主要目标，适当忽略微观层面上的精确度，容许一定程度的错误与混杂，可以在宏观层面拥有更好的知识和洞察力,相关思维,大数据时代，人们可以通过大数据技术挖掘出事物之间隐蔽的相关关系，获得更多的认知与洞见，运用这些认知与洞见就可以帮助人们捕捉现在和预测未来,大数据思维全样思维大数据时代的思维方式应该从样本思维转向全样,任务二 财务大数据认知,任务二 财务大数据认知,任务实施,财务大数据的概念,大数据对财会行业的影响,大数据在财会行业的应用,财务大数据的特点,任务实施财务大数据的概念,财务大数据,财务大数据,非结构化的业务数据、政治法律环境数据、经济环境数据、社会和文化数据及技术类数据等大幅度增多,财务,大数据,数据处理需求要求数据分析人员的反应时间要短，反应速度要快,企业数字资产,辅助企业进行战略决策,海量结构化和非结构化的数据,财务大数据时代的特征,财务大数据财务大数据非结构化的业务数据、政治法律环境数据、经,大数据对财会行业的影响,提高传统财会工作效率、重复性工作将被系统取代,促进传统财会流程重组，财务共享中心是未来趋势,预算管理更精准，财务会计走向决策高度,大数据对财会行业的影响提高传统财会工作效率、重复性工作将被系,大数据在财会行业的应用,数据智能将成为未来企业财务的核心,利用大数据和人工智能提升企业预测和决策,水平,从经济业务中提取到更加多维的数据，从而突破原有的简单辅助核算,将财务数据工作管得更细、更全、更好，让隐藏的数据价值体现出来,实现财务会计向管理会计的转型，充分体现会计职业的价值,大数据在财会行业的应用数据智能将成为未来企业财务的核心利用大,财务大数据的特点,更细致的数据,更多维的数据,更多元的数据,财务大数据的特点更细致的数据更多维的数据更多元的数据,任务三 大数据分析处理工具认知,任务三 大数据分析处理工具认知,任务实施,大数据处理流程,大数据处理工具,任务实施大数据处理流程,大数据处理流程,数据获取,数据预处理,数据分析,数据可视化,数据清洗,数据标准化,企业内部数据,企业,外,部数据,狭义数据分析,数据挖掘,数据跟踪、钻取,、,多维度分析,多数据源、实时数据更新,、,交互式数据展示,数据质量,大数据处理流程数据获取数据预处理数据分析数据可视化数据清洗企,大数据处理工具,Excel,Python,Python,与,Excel,比较,大数据处理工具ExcelPythonPython与Excel,