电子文档交易市场
安卓APP | ios版本
电子文档交易市场
安卓APP | ios版本

数据处理方法

35页
  • 卖家[上传人]:206****923
  • 文档编号:51719273
  • 上传时间:2018-08-16
  • 文档格式:PPT
  • 文档大小:195.50KB
  • / 35 举报 版权申诉 马上下载
  • 文本预览
  • 下载提示
  • 常见问题
    • 1、数 模 讲 座 数据处理方法周德强什么是数据处理? 数据处理是指用简明而严格的方法 把获得的实验数据所代表的事物内在的 规律提炼出来,得出结果的加工过程, 包括数据记录、数据预处理、描绘曲线 ,从带有误差的数据中提取参数(参数 估计),验证和寻找经验规律,外推实 验数据等等。数据处理基本方法 列表法 数据预处理 作图法 逐差法 最小二乘法步骤一:列表法 获得数据后的第一项工作就是记录。列表 法就是把数据按一定规律列入表中。这是在 记录和处理实验数据时最常用的方法,又是 其它数据处理方法的基础。列表法的优点是 对应关系清楚、简捷,有助于发现实验中的 规律。所以在每一个实验中对所测得的数据 首先应考虑列表处理。 例1:上海市区社会商品零售总额和全民所有制职工 工资总额的数据如下表1上海市区社会商品零售总额和全民所有制职工工资总额 (1)列表的基本要求:1表格设计合理,简单明了,重点考虑如何能完整地 记录原始数据及相关量之间的函数关系; 2表的上方应有表头,写明所列表格的名称;3各标题栏目必须标明物理量的名称和单位(用国际符号字母 表示), 名称应尽量用符号表示。4.若为测量函数关系的数据表

      2、,一般把作为自变量的数据列在 上方(按由小到大或由大到小的顺序排列),把作为因变量的数据 对应列在下,便于反映出物理量之间的内在联系; (2)表中数据的录入、保存和调用指令驱动模式m文件模式 通常matlab以指令驱动模式工作,即在 matlab 窗口下当用户输入单行指令时, matlab 立即处理这条指令,并显示结果, 这就是matlab命令行方式。命令行操作时,matlab窗口只允许一次执 行一行上的一个或几个语句。matlab的工作模式1. 数据文件.mat mat文件是matlab以标准二进制格式保存 的数据文件,可将工作空间中有用的数 据变量保存下来。 mat文件的生成和调用是由函数save和 load完成的。软件链接1:matlab文件的类型指令驱动模式1、年份数据以1为增量,用产生向量的方法输入。命令格式: x=a:h:bt=78:872、分别以x和y代表变量职工工资总额和商品零售总额。x=23.8,27.6,31.6,32.4,33.7,34.9,43.2,52.8,63.8,73.4y=41.4,51.8,61.7,67.9,68.7,77.5,95.9,137.4,

      3、155.0,175.03、将变量t、x、y的数据保存在文件data中。save data t x y4、进行统计分析时,调用数据文件data中的数据。load data指令驱动模式的不足在matlab窗口输入数据和命令进行计算时,当 处理复杂问题和大量数据时是不方便的。因此应 编辑m文件。 命令行方式程序可读性差,而且不能存储,对 于复杂的问题,应编写成能存储的程序文件。m文件模式 将matlab语句构成的程序存储成以m为 扩展名的文件,然后再执行该程序文件 ,这种工作模式称为程序文件模式。 2. 程序文件不能在指令窗口下建立,因为 指令窗口只允许一次执行一行上的一个 或几个语句。m文件简介包含matlab语言代码的文件称为m文件 ,其扩展名为m。m文件的语法类似于c语言,但又有其自身特点。 它只是一个简单的ASCII码文本文件,执行程序时 逐行解释运行程序,matlab是解释性的编程语言。m文件有两类:独立的m文件称命令文件可调用m文件称函数文件m文件的类型是普通的文本文件,我们可以使用系统认可的文本文件编辑器来建立m文件。如dos下的edit,windows的记事本和word等(1

      4、) 命令文件简单的m文件命令文件实际上是一串指令的集合,与在命令窗 口逐行执行文件中的所有指令,其结果是一样的 。没有输入输出参数。1、输入矩阵: data=78,79,80,81,82,83,84,85,86,87; 23.8,27.6,31.6,32.4,33.7,34.9,43.2,52.8,63.8,73.4; 41.4,51.8,61.7,67.9,68.7,77.5,95.9,137.4,155.0,175.02、将矩阵data的数据保存在文件data1中:save data1 data3、进行统计分析时,先用命令: load data1 调用数据文件data1中的数据,再用以下命令分别将矩阵 data的第一、二、三行的数据赋给变量t、x、y:t=data(1,:)x=data(2,:)y=data(3,:) 说明:若要调用矩阵data的第j列的数据,可用命令:data(:,j)独立的m文件(2) 函数m文件需要输入变量,返回输出变量 matlab用户可以根据需要编辑自己的m文件,它 们可以像库函数一样方便的调用,从而极大地扩 展了matlab 的能力。 对于某一类特殊问题

      5、,如创建了许多m函数文 件,则可形成新的工具箱。 这种用matlab语言创建定义新的matlab函 数的功能,正体现了matlab语言强大的扩展功 能。函数m文件的格式:function 返回变量=函数名(输入变量)注释说明语句段程序语句段特定规则:1. 函数m文件第一行必须以单词function作为引导词,必须遵循如下形式:function =()2. m文件的文件名必须是 .m。3. 程序中的变量均为局部变量,不保存在工作空间中。其 变量只在函数运行期间有效。1、1. 在matlab命令窗口点击file 菜单new m-file2. edit 用matlab自带的编辑器编制m文件。2、在编辑器中输入(数据)矩阵: data=78,79,80,81,82,83,84,85,86,87; 23.8,27.6,31.6,32.4,33.7,34.9,43.2,52.8,63.8,73.4; 41.4,51.8,61.7,67.9,68.7,77.5,95.9,137.4,155.0,175.0t=data(1,:);x=data(2,:);y=data(3,:)3、将矩阵data的数据保

      6、存在文件data2.m中4、进行统计分析时,先用命令: data2 将文件中的数 据调入工作空间。 注意:所创建的m文件必须纳入matlab搜索路径后,才能在matlab命令窗口运行。可调用m文件(4)函数句柄 函数句柄是matlab6特有的语言结构, 其优点: 方便地实现函数间互相调用 兼容函数加载的所有方式 拓宽子函数包括局部函数的使用范围 提高函数调用的可靠性 减少程序设计中的冗余 提高重复执行的效率 数组、结构数组、细胞型数组结合定义数据函数句柄的调用和操作可通过函数feval进行函数句柄的调用 (1)feval(函数句柄) f_h1=peaks ; feval(f_h1)(2)feval(函数句柄,参数列表) f_h=plot; feval(f_h,0:10,0:10)f_h2=sin; feval(f_h2,0:10) 等价于% x=0:10;y=sin(x)非matlab数据文件的调入 (1)记事本(.txt)文件的调入方法1:先将相关文件中的非数值数据去掉,存为新的txt文件,再用 Load 文件名(要带上扩展名,否则load视为.m文件,产生错误)方法2:直接用Fil

      7、e菜单下的Import data 操作原始文件,包括字符均可 调入(可选)。 (2) excel(.xls)文件的调入方法1:直接用File菜单下的Import data 操作原始文件,若文件中有非 数值数据可先选择将数据粘贴在剪贴板上,再导入。 方法2:xlsread sj3.xls(文件不含有非数值数据)步骤二:数据预处理为什么要预处理数据?1. 与现实世界有关 数据库太大,信息多而杂 数据易受噪声数据、空缺数据和 不一致性数据 的侵扰2.提高数据质量,提高挖掘结果的质量3.使挖掘过程更有效、更容易为什么要预处理数据?4.为保证建模的质量与系统分析的正确结 果,对收集来的原始数据必须进行数据变 换和处理,使其消除量纲和具有可比性。如何预处理数据?一般的预处理方法数据清理、数据集成和变换、数 据归约.数据变换技术为保证建模的质量与系统分析的正确结果,对 收集来的原始数据必须进行数据变换和处理,使 其消除量纲和具有可比性。定义 1 设有序列x = (x(1), x(2), x(n)则称映射f :x y为序列x 到序列y 的数据变换。规范化:将属性数据按比例缩放,使之落入一个小的 特定区

      8、间.9)小数定标规范化:通过移动属性A的小数点位置进行 规范化,计算8)z-score规范化:属性A的值基于A的平均值和标准差规 范化,计算 例1:上海市区社会商品零售总额和全民所有制职工 工资总额的数据如下表1上海市区社会商品零售总额和全民所有制职工工资总额 data=78,79,80,81,82,83,84,85,86,87; 23.8,27.6,31.6,32.4,33.7,34.9,43.2,52.8,63.8,73.4; 41.4,51.8,61.7,67.9,68.7,77.5,95.9,137.4,155.0,175.0data=78 79 80 81 82 83 84 85 86 87; 23.8 27.6 31.6 32.4 33.7 34.9 43.2 52.8 63.8 73.4; 41.4 51.8 61.7 67.9 68.7 77.5 95.9 137.4 155.0 175.0; data1=data; junzhi=mean(data1); junfangcha=std(data1) zuixiao=min(data1) zuida=max(data1)

      9、 %pr = minmax(data); zongh=sum(data1(:,2:3) xiabiao1=find(data(2,:)35) xiabiao2=find(data(2:3,:)35) i,j=find(data(2:3,:)35); i,j1:年份的规范化 公式:n=data(1,:)-zuixiao(1)+1 data=78,79,80,81,82,83,84,85,86,87; 23.8,27.6,31.6,32.4,33.7,34.9,43.2,52.8,63.8,73.4; 41.4,51.8,61.7,67.9,68.7,77.5,95.9,137.4,155.0,175.02:商品零售总额和全民所有制职工 工资总额的数据无量纲化 比如选择公式: z-score规范化:BZhun_data2=(data1(:,2)-junzhi(2)./junfangcha(2);BZhun_data3=(data1(:,3)-junzhi(3)./junfangcha(3);BZhun_data=BZhun_data2 BZhun_data3huislilunP420步骤三:作图法把实验测得值按其对应关系在坐标纸上描绘成曲线,以 此揭示各物理量间的相互关系,这种方法称为作图法。作 图法是研究物理规律最常用的方法之一。用作图法可以找 出物理量之间的函数关系,探索和验证规律,并找出经验 公式;求出某些物理量的数值,按照物理量的变化规律, 进行合理的内插和外推。作图法还具有简单,使函数关系 一目了然的优点。MATLAB绘图.pptplot(n,data(2,:),ro,n,data(3,:),b*)data=78,79,80,81,82,83,84,85,86,87; 23.8,27.6,31.6,32.4,33.7,34.9,43.2,52.8,63.8,73.4; 41.4,51.8,61.7,67.9,68.7,77.5,95.9,137.4,155.0,175.0n=d

      《数据处理方法》由会员206****923分享,可在线阅读,更多相关《数据处理方法》请在金锄头文库上搜索。

      点击阅读更多内容
    最新标签
    发车时刻表 长途客运 入党志愿书填写模板精品 庆祝建党101周年多体裁诗歌朗诵素材汇编10篇唯一微庆祝 智能家居系统本科论文 心得感悟 雁楠中学 20230513224122 2022 公安主题党日 部编版四年级第三单元综合性学习课件 机关事务中心2022年全面依法治区工作总结及来年工作安排 入党积极分子自我推荐 世界水日ppt 关于构建更高水平的全民健身公共服务体系的意见 空气单元分析 哈里德课件 2022年乡村振兴驻村工作计划 空气教材分析 五年级下册科学教材分析 退役军人事务局季度工作总结 集装箱房合同 2021年财务报表 2022年继续教育公需课 2022年公需课 2022年日历每月一张 名词性从句在写作中的应用 局域网技术与局域网组建 施工网格 薪资体系 运维实施方案 硫酸安全技术 柔韧训练 既有居住建筑节能改造技术规程 建筑工地疫情防控 大型工程技术风险 磷酸二氢钾 2022年小学三年级语文下册教学总结例文 少儿美术-小花 2022年环保倡议书模板六篇 2022年监理辞职报告精选 2022年畅想未来记叙文精品 企业信息化建设与管理课程实验指导书范本 草房子读后感-第1篇 小数乘整数教学PPT课件人教版五年级数学上册 2022年教师个人工作计划范本-工作计划 国学小名士经典诵读电视大赛观后感诵读经典传承美德 医疗质量管理制度 2 2022年小学体育教师学期工作总结 2022年家长会心得体会集合15篇
    关于金锄头网 - 版权申诉 - 免责声明 - 诚邀英才 - 联系我们
    手机版 | 川公网安备 51140202000112号 | 经营许可证(蜀ICP备13022795号)
    ©2008-2016 by Sichuan Goldhoe Inc. All Rights Reserved.