什么是数据分析:学习如何从数据中获得关键见解
数据是21世纪最有价值的资源圣世纪。在各行各业,世界顶级公司正在调整他们的商业模式,以收集和分析更多的数据。各国政府和民间机构也纷纷效仿。联合国秘书长António古特雷斯称“准确的数据”良好政策和决策的命脉.”
今天,数据影响着一切,从我们的电影推荐到我们的医疗,从在线广告到减贫倡议。在过去两年中产生了更多的数据比人类历史上所有年份的总和还要多。但这里有一个令人震惊的数据。据估计,全世界只有0.5%的数据得到了分析。
的能力一起工作在现代世界,数据正成为一项至关重要的技能。但数据分析到底是什么,如何开始呢?在本文中,我们将探索所有细节。
什么是数据分析?
的意义不同的公司,不同的团队,甚至不同的项目,对“数据分析”的理解也不尽相同。最好考虑一下目的的数据分析。
数据分析的目标是从数据集中提取关键的见解。数据分析师的目标是发现有用的信息,帮助涉众做出明智的决策。这不仅仅是处理数字。数据分析希望找到故事在数据中,底层趋势,隐藏消息.最好的数据分析师甚至可能看起来像算命师,他们利用现有的数据来预测未来。
它可能声音挑战,但数据分析远没有看起来那么复杂!我们大多数人每天都像数据分析师一样思考问题。例如,我们可以:
- 看看我们的信用卡账单,找出我们每个月最大的支出。
- 看看我们最喜欢的运动员过去的表现,就能预测他们在下一场比赛中的表现。
- 在每日待办事项清单上记录我们完成了多少项。
在这些情况下,我们用过去和现在的观察来影响我们未来的行为。数据分析也寻求同样的结果。
有哪些类型的数据?
有很多不同的类型的数据。一些常见的例子包括:
- 基于文本的数据比如名字或地址
- 数值型数据比如年龄、体重或温度
- 基于时间的数据比如事件发生的日期
数据类型可分为两大类:定量和定性.定量数据涉及数字测量.定性数据描述了特征或特征.
假设我们正在分析一个在美国销售的房屋数据集。定量数据的例子可能包括售价、卧室数量或面积。定性数据的例子可能包括房屋的地址、挂牌代理人或类型(例如,牧场或殖民地)。
数据分析的过程
数据分析过程从查询开始。你想算出什么?哪些信息对你或业务部门做出决定有帮助?需要获取哪些数据?现有的数据收集中是否包含了答案?
一旦数据收集完毕,下一步就是提取从它的源头。数据分析师可以查询数据库以提取相关的信息表。CSV(逗号分隔值)、JSON (JavaScript对象符号)和HDF(分层数据格式)等多种不同的文件类型用于存储数据。
原始数据描述数据的原始格式,即数据在被操作之前的存储方式。原始数据往往带有缺陷,分析师需要在分析发生之前修复这些缺陷。例如:
- 一个人的名字可能完全是大写字母,而不是正确的大小写
- 一段文本的结尾可能有额外的空格
- 一行数据可能丢失或重复
- 单元格可能存储多个需要隔离的值
清理数据的过程称为数据整理或数据清理。
一旦数据被清理,我们就对数据集应用一系列操作。每一步的目标都是为了更接近原始业务查询的答案。数据分析有点像侦探工作。随着时间的推移,熟练的分析师会构建一个动态的数据分析技术工具包,并学习正确的方法来解决手头的问题。一些日常操作的例子包括:
- 按升序或降序对列值进行排序
- 提取满足特定条件的行子集
- 通过一个通用键连接多个表中的列
- 对数据进行分组并执行聚合操作,如取平均值
一旦分析师得出结论,最后一步就是将其呈现给利益相关者。可交付成果可能因任务的不同而不同。一个利益相关者可以要求一个确定的数字,例如一个数或一个总数。另一方可能要求收集所有相关数据点。第三个人可能喜欢看书面总结。
用图片比用一段文字更容易描述一个想法。数据的可视化表示在数据分析报告中很流行。一些常见的可视化包括柱状图、饼状图、散点图和直方图。
数据分析工具
所有技能水平的分析师都可以使用免费和商业数据分析工具。有些优化了速度和效率。其他人则关注用户体验和便利性。很少只有一个技术为一份工作。相反,数据分析师要学会选择最好的他们当前任务的工具。
Microsoft Excel是当今最流行的数据分析工具。据估计是安装在全世界7.5亿台电脑上.类似的电子表格软件包括谷歌Sheets和Apple Numbers。对于那些刚开始进行数据分析的人来说,Excel是一个很好的选择。与竞争对手相比,它的视觉界面需要更小的学习曲线。
一旦数据集在规模和复杂性上开始增长,就会转向更强大的解决方案。其他数据分析工具包括:
- Pandas是一个建立在Python编程语言之上的开源库
- 一种用于统计分析的程序设计语言
- SAS是一套用于数据分析的商业工具
这些工具为更高级的分析和包括自动化在内的其他好处打开了大门。
随着企业和机构收集越来越多的数据,预计对数据分析师的需求将持续增长。幸运的是,学习数据分析的入门门槛从来没有这么低过。许多深入的在线课程可用于多种技术。数据分析是一项值得投资的投资,对于那些想要学习一项可以在家庭和工作中都有用的多功能技能的人来说。