《财务大数据分析》课件项目三 任务2.pptx

财务大数据分析任课老师：目录项目一 大数据基础项目二数据获取项目三 数据预处理项目四 大数据+财报数据分析项目五 大数据+资金分析项目六大数据+销售分析项目七大数据+费用分析 任务1 数据清洗 任务2 数据集成项目三数据预处理任务1 Python简介及安装【知识精讲】一、数据集成的概念及其方法1.数据集成的概念我们这里主要讲解狭义的数据集成，也就是指将多份数据进行合并成数据集的过程和方法从广义上来说，在企业中，由于开发时间或开发部门的不同，往往有多个异构的、运行在不同的软硬件平台上的信息系统同时运行，这些系统的数据源彼此独立、相互封闭，使得数据难以在系统之间交流、共享和融合，从而形成了“信息孤岛”随着信息化应用的不断深入，企业内部、企业与外部信息交互的需求日益强烈，急切需要对已有的信息进行整合，联通“信息孤岛”，共享信息，这些信息数据整合的一系列方案被称为数据集成2.数据集成的方法数据集成最常见的两种方法是：数据关联与数据合并，前者代表两份数据表做左右联接，后者代表两份数据表做上下联接二、数据关联的方式数据关联的四种方式：数据关联必须有关联条件，一般是指左表的主键或其他唯一约束字段（即没有重复值）与右表的主键或其他唯一约束字段相等（相同），如图所示。

左连接：是以左表为基础，根据两表的关联条件将两表连接起来结果会将左表所有的数据条目列出，而右表只列出与左表关联条件满足的部分左连接全称为左外连接，是外连接的一种，如图3-17所示内连接：只显示满足关联条件的左右两表的数据记录，不符合条件的数据不使用，如图3-18所示右连接：是以右表为基础，根据两表的关联条件将两表连接起来结果会将右表所有的数据条目列出，而左表只列出与右表关联条件满足的部分右连接全称为右外连接，是外连接的一种，如图3-19所示全连接：满足关联条件的左右表数据相连不满足条件的各表数据均保留，无对应数据的表内容为空，如图3-20所示三、数据合并的概念及其应用数据合并：也称为数据追加，是指对多份数据字段基本完全相同的数据进行上下连接如同数据关联，数据合并也需要指定连接条件，不同的是，数据关联一般指定一个字段作为连接条件就可以，而数据合并则涉及多列字段合并，需要指定一张表的每列字段对应另一张表的哪些字段，也就是需要将多个字段作为连接条件，如图3-21所示04需要注意的是，数据合并中如果有唯一性数值的列，那么合并后的数据该列字段将不具有数值唯一性，也就是数据可能存在重复，也不会自动更新不一致的数据。

任务要求】1.超市数据与地区数据关联在之前的数据清洗任务中，我们需要分析客户分布，数据表中只有城市数据，无法从省区、大区的维度进行数据分析，那么这个任务目标我们可以通过将清洗后的数据表与地理区域信息表进行关联，从而得到一份带有更高行政区划维度的数据表之后再进行超市数据与地区数据关联，即在数据清洗任务中进行了客户分布的数据清洗工作，但还欠缺更多行政区划维度数据，使用分析云进行清洗结果数据与行政区域数据表的数据关联任务要求】2.利润表合并先进行背景分析现在有两份数据表，分别是一家母公司AJHXL的财务利润表，还有行业标杆企业金岭矿业的利润表，两家公司的利润表内的数据指标字段基本类似，但不完全相同，现在需要对两份数据进行合并后进行分析为了区分不同企业的数据，两张利润表必须增加一列企业名称字段任务实施】在分析云平台中操作实施小结01数据集成的概念02数据集成的方式03数据集成操作任务任务一数据课后讨论请每位同学查阅资料，就下面四个内容展开讨论：1、数据集成是数据分析的前提吗？2、数据集成的方式都有哪些？任务一数据【项目小结】本项目主要在明确数据清洗、数据集成的意义的基础上，能够运用数据分析工具进行数据清洗和集成。

基于准确的数据（高质量）进行分析，才有可能获得可信的分析结果，基于这些分析结果，才有可能作出正确的决策本项目采用案例实战及实训任务等方式，详细讲述了数据清洗及数据集成的操作步骤课证融通】大数据财务分析1+X证书等级评价标准明确：具备数据清洗理论基础，理解数据清洗的目的；掌握基本数据类型及特征；掌握数据格式转换工作流程和技能；能够发现并识别需要进行格式转换的财务及业务数据，并将数据准确转换成目标格式；掌握数据加工的操作方法；能在大数据财务分析平台上，对财务及业务数据基于不同维度进行分类整理；能够使用数据可视化技术工具完成简单财务分析报告的制作；具备在工作中发现财务与业务数据需求，并运用相关专业工具进行数据准备与清理、建模与分析、可视化呈现的能力。