什么是数据分析?研究、类型和示例

⚡ 智能摘要

数据分析是对数据进行清洗、转换和建模的过程,以便组织能够……trac获取有用信息并采取行动。五种技术和六阶段工作流程构建了这项工作。

  • 🔘 定义: 清理、转换和建模原始记录,使其成为支持业务决策的信息。
  • ☑️ 五种技巧: 文本分析、统计分析、诊断分析、预测分析和规范分析能够回答越来越复杂的问题。
  • ✅ 问题阶梯: 每项技术都从“发生了什么”开始,到“为什么发生”开始,到“可能会发生什么”开始,到“应该怎么做”开始。
  • 🧪 六个阶段: 需求收集、整理、清理、分析、解释和可视化按顺序进行。
  • 🛠️ 工具: 电子表格、SQL、 PythonR 语言和商业智能平台涵盖了大部分分析工作负载。
  • ⚠️ 数据质量: 重复记录、空白字段和​​多余的空格会扭曲下游产生的每一个结果。

什么是数据分析

什么是数据分析?

数据分析 数据分析被定义为对数据进行清洗、转换和建模,以发现可用于商业决策的有用信息的过程。数据分析的目的是……trac从数据中提取有用信息,并根据分析结果做出决策。

数据分析的一个简单例子就是我们在日常生活中做决定时,会思考上次发生了什么,或者如果我们选择某个选项会发生什么。这其实就是分析我们的过去或未来,并以此为基础做出决定,也就是回顾过去的记忆或预测未来的预期。分析师出于商业目的也会做同样的事情,这就是数据分析。

数据分析属于更广泛的领域。 数据科学它还涵盖数据工程、机器学习和部署。

为什么数据分析很重要?

要想发展你的事业,甚至发展你的人生,有时候你只需要做分析。

如果你的企业没有增长,你需要回顾过去,承认错误,并重新制定计划,避免重蹈覆辙。即使你的企业正在增长,你也需要展望未来,让它发展得更快。你需要做的就是分析你的业务数据和业务流程。

数据分析工具

下面描述的每个阶段都是通过软件完成的,下面的屏幕截图显示了分析工具呈现的界面类型。

数据分析工具界面显示了可供探索的数据集。
数据分析工具

数据分析工具使用户能够更轻松地处理和操作数据,分析数据集之间的关系和相关性,并识别模式和趋势以供解释。电子表格适用于小型数据集,SQL 查询适用于数据仓库。 Python 和 R 处理统计和建模,商业智能平台将结果发布到仪表板。以下是完整列表: 工具 用于研究。

数据分析类型:技术和方法

有几个 数据分析类型 现有的技术均基于商业和技术。然而,主要的数据分析方法包括:

  • 文本分析
  • 统计分析
  • 诊断分析
  • 预测分析
  • 规范性分析

这五个部分环环相扣。下表列出了每个部分所回答的问题,接下来的章节将分别解释它们。

技术 它解答的问题 典型输出
文本分析 非结构化文本中隐藏着哪些模式? 主题、关键词、挖掘规则
统计分析 发生了什么事? 仪表盘、汇总统计信息
诊断分析 为什么会这样? 根本原因、行为模式
预测分析 可能会发生什么? 预测、风险评分
规范性分析 我们应该怎么办? 建议措施

文字分析

文本分析也称为数据挖掘。它是数据分析方法之一,用于利用数据库或文本分析工具发现大型数据集中的模式。 数据挖掘工具它将原始数据转化为商业信息。市面上的商业智能工具用于制定战略性商业决策。总而言之,它提供了一种扩展业务的方法。tract 并检查数据,找出规律,最后解释数据。

统计分析

统计分析利用历史数据,以仪表盘的形式展现“发生了什么?”。它包括数据的收集、分析、解释、呈现和建模,既可以处理完整数据集,也可以处理样本数据。这类分析分为两类:描述性分析和推断性分析。

Descript实证分析

Descript统计分析是对完整数据或数值数据样本进行总结。它报告连续数据的均值和标准差,以及分类数据的百分比和频数。

推理分析

推断分析是对从完整数据中抽取的样本进行分析。在这种分析方法中,通过选择不同的样本,可以从同一总体中得出不同的结论。

诊断分析

诊断分析通过探究统计分析结果背后的原因,揭示“为什么会发生这种情况?”。这种分析有助于识别数据中的行为模式。如果业务流程中出现新问题,您可以参考此分析结果,寻找类似的模式,并且很有可能找到适用于新问题的类似解决方案。

预测分析

预测分析利用历史数据来预测“可能发生的事情”。一个简单的数据分析例子:如果去年我用积蓄买了两个裙子,而今年我的工资翻了一番,那么我就可以买四个裙子了。当然,实际情况并非如此简单,因为你还需要考虑其他因素——今年的服装价格可能上涨了,或者你可能想要一辆新自行车而不是裙子,又或者你可能需要买房。

因此,这种分析方法基于当前或过去的数据对未来结果进行预测。预测只是一种估计;其准确性取决于你掌握的详细信息有多少以及你对信息进行深入挖掘的程度。

规范性分析

规范性分析结合了之前所有分析的洞见,以确定针对当前问题或决策应采取的行动。大多数数据驱动型公司都采用规范性分析,因为仅靠预测性分析和描述性分析不足以提升数据绩效。他们会根据当前情况和问题分析数据并做出决策。

数据分析流程

选择一种技术可以解答你想知道的问题;下面的流程则解释了这项工作是如何进行的。 数据分析流程 就是使用合适的应用程序或工具收集信息,以便探索数据并从中发现规律。基于这些信息,您可以做出决策或得出结论。

数据分析包括以下几个阶段:

  • 数据需求收集
  • 数据收集
  • 数据清理
  • 数据分析
  • 数据解释
  • 数据可视化

数据需求收集

首先,思考一下你为什么要进行这项数据分析。你需要明确分析数据的目的或目标,并决定要进行哪种类型的数据分析。在这个阶段,你需要确定分析的内容、分析方法,并阐明你进行这项研究的原因以及分析将使用的具体指标。

数据收集

需求收集完成后,您应该清楚需要衡量哪些指标以及预期结果是什么。现在,是时候根据这些需求收集数据了。收集完成后,必须对数据进行处理或整理,以便进行分析。由于数据来源多样,请务必记录每个数据集的收集日期和来源。

数据清理

收集到的数据可能无用,或者与您的目标无关,因此必须进行清洗。收集到的数据可能包含重复记录、多余的空格或错误。数据必须干净且无误。此阶段必须在分析之前完成,因为数据清洗的质量决定了输出结果与预期结果的接近程度。

数据分析

数据收集、清洗和处理完成后,即可进行分析。在处理数据的过程中,您可能会发现已经掌握了所需的信息,也可能需要收集更多信息。在此阶段,您需要使用数据分析软件来理解、解释数据,并根据需求得出结论。

资料解读

数据分析完成后,终于到了解读结果的时候了。您可以选择如何表达或传达分析结果——用文字直白地描述,或者用表格或图表的形式呈现。然后,利用数据分析的结果来决定最佳的行动方案。

数据图

数据可视化在日常生活中非常普遍,通常以图表的形式呈现。换句话说,数据以图形化的方式展现,以便人脑更容易理解和处理。数据可视化常用于发现未知的事实和趋势。通过观察数据之间的关系并比较不同的数据集,我们可以挖掘出有意义的信息。

常见问题

数据分析是对现有数据集进行分析,以回答特定问题。数据分析则是一个更广泛的学科,涵盖数据的收集、存储、建模和应用。在日常使用中,这两个术语经常被互换使用。

定量分析运用数字,通过统计检验来回答数量、频率和程度等问题。定性分析则运用文字、图像以及访谈或开放式回答中的观察结果,侧重于阐释意义和背景,而非数量级。

探索性数据分析是对数据集的首次开放式观察:它主要通过简单的图表来展现数据的分布、缺失值、异常值和成对关系。它为后续正式检验的假设奠定基础,因此必须在拟合任何模型之前完成。

实际数据往往存在重复数据、编码不一致、日期格式混乱和字段缺失等问题,而且每个数据源都有其自身的缺陷。所有这些缺陷都会影响最终结果,因此分析师通常会花费项目中的大部分时间来准备数据。

SQL 用于提取数据,电子表格用于快速检查 Python or R 统计分析需要用到统计工具,还需要一个可视化工具。除了这些工具之外,分析师还需要具备领域知识,以及向从未接触过代码的人解释分析结果的能力。

将相关性解读为因果关系,抽样样本不代表总体,下降ping 无缘无故地出现不合时宜的异常值,以及反复检验大量假设直到找到一个看似显著的假设。提前记录每一个决定可以避免大多数此类问题。

现在大多数分析工具都内置了人工智能功能:它们可以分析数据集、提出清洗规则、根据简单语言问题编写查询并生成摘要。它们加速了分析过程。 机器学习 工作成果归分析师所有,但分析师仍然拥有最终的解释权。

是的。 GitHub 副驾驶 Posit 可以根据描述目标的注释自动补全 pandas、dplyr 和 SQL 语句,从而去除大部分样板代码。Posit 会提醒您,生成的建议并非绝对准确,因此在采纳任何数字之前,请务必仔细检查每一行。

总结一下这篇文章: