温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,汇文网负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。
网站客服:3074922707
2023
数据
报告
心得体会
数据报告心得体会
数据报告心得体会篇1
块绍数据分析/挖掘的图书有很多,这些图书分为很多等级,有的是直接面向应用(business,academyorinterplaybetweenbothtwo),有的是介绍理论背景(个人认为很重要,如果以20/80规那么,这些图书将有助于解决剩余20%的问题,不过你可能要付出80%精力),有的是结合各类计算工具(例如sas,excel,retc)。相信很多人对此都很头疼,到底应该如何选择呢。
现在先谈谈我个人在数据分析的经历,最后我将会做个总结。
大学开设了两门专门讲授数据分析根底知识的课程。概率统计和高等多元数据分析。这两门选用的教材是有中国特色的国货,不仅体系完整而且重点突出,美中缺乏的是前后内在的逻辑性欠缺,即各知识点之间的关联性没有被阐述明白,而且在应用方面缺少系统地训练。当时,我靠着题海战术把这两门课给混过去了,现在看来是纯忽悠而已。(不过,如果当时去应聘数据分析职位肯定有戏,至少笔试可以过关)。
抱着瞻仰中国的最高科研圣地的想法,大学毕业后我奋不顾身的考取了中科院的研究生。不幸的是,虽然顶着号称是高级生物统计学的专业,我再也没有受到专业的训练,一切全凭自己摸索和研究(不过,我认为这样反而挺好,至少咱底子还是不错的,一直敏而好学)。首先,我尽全力搜集一切资料(从大学带过来的习惯),神勇地看了一段时间,某一天我突然顿悟,这样的学习方式是不行的,要以应用为依托才能真正学会。然后呢,好在咱的环境的研究气氛(主要是学生)还是不错滴,我又轰轰烈烈地跳入了paper的海洋,看到无数牛人用到很多牛方法,这些方法又号称解决了很多牛问题,当时那个自卑呀,无法理解这些papers。某一天,我又顿悟到想从papers中找到应用是不行的,你得先找到科学研究的思路才行,打个比方,这些papers其实是上锁的,你要先找到钥匙才成。幸运的是,我得到了笛卡尔先生的指导,尽管他已经仙游多年,他的谈谈方法为后世科研界中的被放羊的孤儿们指条不错的道路(虽然可能不是最好地,thebetterorbestway要到国外去寻找,现在特别佩服毅然出国的童鞋们,你们的智商至少领先俺三年)。好了,在咱不错的底子的作用下,我掌握了科研方法(其实很简单,日后我可能会为谈谈方法专门写篇日志)。可惜,这时留给咱的时间不多了,中科院的硕博连读是5年,这对很多童鞋们绰绰有余的,但是因本人的情商较低,被小人陷害,被耽误了差不多一年。这时,我发挥了虎(东北话)的精神,选择了一个应用方向,终于开始了把数据分析和应用结合的旅程了。具体过程按下不表,我先是把自己掌握的数据分析方法顺次应用了,或者现成的方法不适合,或者不能很好的解决问题,当时相当的迷茫呀,难道是咱的底子出了问题。某一天,我又顿悟了,毛主席早就教育我们要具体问题具体分析,教条主义要不得,我应该从问题的本质入手,从本质找方法,而不是妄想从繁多的方法去套住问题的本质。好了,我辛苦了一段时间,终于解决了问题,不过,我却有些纠结了。对于数据发分析,现在我的观点就是具体问题具体分析,你首先要深入理解被分析的问题(领域),尽力去寻找问题的本质,然后你只需要使用些根本的方法就可以很好的解决问题了,看来20/80法那么的幽灵无处不在呀。于是乎,咱又回到了原点,赶紧去学那些根底知识方法吧,它们是很重要滴。
这里,说了一大堆,我做过总结。首先,你要掌握扎实的根底知识,并且一定要深入理解,在自己的思维里搭建起一桥,它连接着抽象的数据分析方法和现实的应用问题;其次,你要有意识的去训练分析问题的能力;最后,你要不断的积累各方面的知识,记住没有无源之水、无根之木,良好的数据分析能力是建立在丰富的知识储藏上的。
数据报告心得体会篇2
有人说生活像一团乱麻,剪不断理还乱;我说生活像一团乱码,尽管云山雾罩惝恍迷离,最后却总会拨云见日雨过天晴。维克托迈尔舍恩伯格就把这团乱码叫做大数据,在他的这本书里,试图给出的就是拨开云雾见青天的玄机。
这玄机说来也简单,就是放弃千百年来人们孜孜追求的因果关系转而投奔相关关系。说来简单,其实却颠覆了多少代人对真理探求的梦想。我觉得作者是个典型的实用主义者,在美帝国主义万恶的压迫和洗脑下,始终追逐性价比和利益最大化,居然放弃了追求共产主义真理最根本的要求。不像我们在天朝光芒的笼罩下,从小就开始学习和追求纯粹的共产主义唯心科学历史文化知识啦。这或许就是我们永远无法获得诺贝尔奖、永远无法站在科技最前沿的根本原因吧。其实小学时候,我就想过这个问题,相信所有的人都问过类似的问题,例如现在仍然很多人在问,妈的从来没人知道我每天摆摊赚多少钱,你们他妈的那人均收入四五千是怎么算出来的。中国是抽样的代表,因为中国人最喜欢用代表来表现整体,最典型的例子莫过于公布的幸福指数满意指数各种指数永远都高于你的预期,你完全不清楚他是怎么来的,一直到最后汇总成三个代表,真心不清楚它到底能代表了啥。说这么多显得自己是个愤青,其实只是想表达样本=总体这个概念在科技飞速开展的今天,在世界的不同角落,还是会表达出不同的价值,受到不同程度的对待及关注。在大数据观念的冲击下,我们是不是真的需要将平时关注的重点从事物内在的开展规律转移到事物客观的发生情况上。
大数据的出现,必然对诸多领域产生极大的冲击,某些行业在未来十年必将会得到突飞猛进的开展,而其他一些行业那么可能会消失。这是废话,典型的三十年河东三十年河西的道理,就像三十年前的数理化王子们,现在可能蜷缩在某工厂的小壳落里颤颤巍巍的修理机器;就像三十年前职业高中的学生才学财会学银行,如今这帮孙子一个个都开大奔养小三攒的楼房够给自己做墓群的了;当然也不乏像生物这种专业,三十年前人们不知道是干啥的,三十年后人们都知道没事别去干,唯一可惜的是我在这三十年之间的历史长河中却恰恰选了这么一个专业,这也是为什么我现在在这写读后感而没有跟姑娘去玩耍的原因。其实乍一看这个题目,我首先想到的是精益生产的过程控制,比方六西格玛,这其实就是通过对所有数据的分析来预测产品品质的变化,就已经是大数据的具体应用了。
而任何事物都会有偏差,会有错误,也就是说,这全部的数据中,肯定是要出现很多与总体反响出的规律相违背的个体,但是无论如何这也是该事件中一般规律的客观表达的一种形式,要远远好过从选定的样本中剔除异常值然后得到的结论。换句话说,也大大减少了排除异己对表达事物客观规律的影响。就好比是统计局统计中国人民的平均收入一样,这些数怎么这么低啊,这不是给我们国家在国际社会上的形象抹黑么,删掉删掉;这些数怎么这么高啊,这还不引起社会不满国家动乱啊,删掉删掉。所以说,大数据至少对反响客观事实和对客观事实做预测这两个方面是有非常积极地意义的。而这个新兴行业所表达的商机,既在如何利用数据上,又在如何取得数据上。
先说数据的利用,这里面表达的就是作者在通书中强调的对相关关系的挖掘利用。相关关系与因果关系便不再赘述,而能够对相关关系进行挖掘利用的企业其实缺不多,因为可以相信未来的大数据库就像现在的自然资源一样,必将因为对利益的追逐成为稀缺资源,而最终落在个别人或企业或部门的手中。想想无论当你想要做什么事情的时候,都有人已经提前知道并且为你做好了方案,还真是一件甜蜜而又令人不寒而栗的事情。
而对于数据的获取,我觉得必然是未来中小型企业甚至个人发挥极致的创造力的领域。如何在尽可能降低本钱的情况下采集到越多越准确的数据是必然的开展趋势,鉴于这三个维度事实上都无法做到极致,那么对于数据获取方式的争夺肯定将成就更多的英雄人物。
现在回头从说说作者书中的观点中想到的,p87中关于巴斯德的疫苗的事件,描述了一个被疯狗咬伤的小孩,在接种了巴斯德的狂犬疫苗后成功幸存,巴斯德成了英雄的故事。这是个非常有意思的案例,因为小孩被狗咬伤而患病的概率仅为七分之一,也就是说,本领件有85%的概率是小孩根本就不会患病。那么小孩的生命到底是不是巴斯德救的,而这疫苗到底是有效没效,通过这个事件似乎根本就没有方法得到验证。这就好比某人推出个四万亿方案,但实际上国际经济形势就是好转,哪怕你只推出个二百五方案,gdp都会蹭蹭的往上涨,而且又不会带来四万亿导致的严重通胀、产能过剩、房价泡沫等问题。那你说这四万亿到底是救了国还是误了国。回到我自己的工作领域上来,平安工作,我们一直遵循的方向都是寻找因果关系,典型的从工作前的风险评估,到调查事故的taproot或者五个为什么,无一不是逻辑推理得到结果的产物。而事实上,如果能做到信息的丰富采集和汇总的话,找出事物之间的相关性,对提高工作环境的平安系数是极为有利的。这个点留着,看看可不可以在未来继续做进一步研究。
数据报告心得体会篇3
关于软件
分析前期可以使用excel进行数据清洗、数据结构调整、复杂的新变量计算(包括逻辑计算);在后期呈现美观的图表时,它的制图制表功能更是无可取代的利器;但需要说明的是,excel毕竟只是办公软件,它的作用大多局限在对数据本身进行的操作,而非复杂的统计和计量分析,而且,当样本量到达万以上级别时,excel的运行速度有时会让人抓狂。
spss是擅长于处理截面数据的傻瓜统计软件。首先,它是专业的统计软件,对万甚至十万样本量级别的数据集都能应付自如;其次,它是统计软件而非专业的计量软件,因此它的强项在于数据清洗、描述统计、假设检验(t、f、卡方、方差齐性、正态性、信效度等检验)、多元统计分析(因子、聚类、判别、偏相关等)和一些常用的计量分析(初、中级计量教科书里提到的计量分析根本都能实现),对于复杂的、前沿的计量分析无能为力;第三,spss主要用于分析截面数据,在时序和面板数据处理方面功能了了;最后,spss兼容菜单化和编程化操作,是名副其实的傻瓜软件。
stata与eviews都是我偏好的计量软件。前者完全编程化操作,后者兼容菜单化和编程化操作;虽然两款软件都能做简单的描述统计,但是较之spss差了许多;stata与eviews都是计量软件,高级的计量分析能够在这两个软件里得到实现;stata的扩展性较好,我们可以上网找自己需要的命令文件(.ado文件),不断扩展其应用,但eviews就只能等着软件升级了;另外,对于时序数据的处理,eviews较强。
综上,各款软件有自己的强项和弱项,用什么软件取决于数据本身的属性及分析方法。excel适用于处理小样本数据,spss、stata、eviews可以处理较大的样本;excel、spss适合做数据清洗、新变量计算等分析前准备性工作,而stata、eviews在这方面较差;制图制表用excel;对截面数据进行统计分析用spss,简单的计量分析spss、stata、eviews可以实现,高级的计量分析用stata、eviews,时序分析用eviews。
关于因果性
做统计或计量,我认为最难也最头疼的就是进行因果性判断。假设你有a、b两个变量的数据,你怎么知道哪个变量是因(自变量),哪个变量是果(因变量)。
早期,人们通过观察原因和结果之间的外表联系进行因果推论,比方恒常会合、时间顺序。但是,人们渐渐认识到屡次的共同出现和共同缺失可能是因果关系,也可能是由共同的原因或其他因素造成的。从归纳法的角度来说,如果在有a的情形下出现b,没有a的情形下就没有b,那么a很可能是b的原因,但也可能是其他未能预料到的因素在起作用,所以,在进行因果判断时应对大量的事例进行比较,以便提高判断的可靠性。
有两种解决因果问题的方案。统计的解决方案和科学的解决方案。统计的解决方案主要指运用统计和计量回归的方法对微观数据进行分析,比较受干预样本与未接受干预样本在效果指标(因变量)上的差异。需要强调的是,利用截面数据进行统计分析,不管是进行均值比较、频数分析,还是方差分析、相关分析,其结