{DAY 3}如何处理一笔数据?(下)

前言

第三天要延续介绍如何处理一笔数据。

对於数据分析的用途跟前几个步骤

请看上一篇文章

数据分析的流程

3.资料清洗(Data Cleaning)

当我们准备好所有食材就可以搅一搅变成蛋糕糊了吗?

不可能!!

蛋糕是非常精致的甜点,

每一个食材都有食谱

食谱上会有该要的比例,

就像不是所有数据一拿到手就是完美无缺的

可以想像我们平常在填表单的时候,

遇到单选题可能会多填到其他选项或是忽略某些题目,

回答问题打错字、英文大小写搞混的情况。

这时候资料就会出现缺失值、异常值等等,

资料清洗这时候就会派上用场!

就像是将所有食材依照食谱的指示,

变成可以做成蛋糕的完美比例

可以用SQL或是Python的套件Pandas

来将这些杂讯整理成方便後续处理的数据

4. 资料分析(Data Analysis):

当材料都按照食谱的比例准备好後,

就要开始一步一步放到搅拌机搅拌了~

资料分析也是会依照不同业务应用而有不同的分析手法,

有些人会使用常见的数据分析工具像是SPSS, R, Python进行统计分析,

这个阶段也会需要使用到统计学的相关知识,

像是集中趋势、离散、假设检定、回归分析

数据分析工具就像是搅拌机,而统计知识就像是不同的加入步骤

需要按照不同的食材属性,分次加入,

再用搅拌机,将他们搅拌均匀,变成蛋糕糊

蛋糕糊放进去烤模里就可以准备进烤箱烤搂!

我在这个计画里选择利用视觉化进行资料分析,

将叙述性分析的数据利用可视化的图表展示,

选择Python的套件,Seaborn和Metplotlib

这几个工具就像是烤箱,把烤模里的蛋糕糊

Do Rei Me So~~~

https://miro.medium.com/max/1000/1*VgWAlH4fjAqxXgkTfTVAAQ.jpeg

变成漂亮的蛋糕,如同绘制不同类型的图表,

我将在计画中学习挑选图表以应用在合适的资料场景中

并且学习从视觉化的图表里,

洞察出一笔资料的有效消息。

其实资料分析这个步骤里,可以涉及的范围相当广

包含资料探勘(Data Mining)和机器学习(Machine Learning)

但我在这个计画里先不涉及这两个部分

5.协助决策进行:

TADA!

蛋糕烤完,可以开吃!!!

在完成上述所有流程後,就可以藉由产出的分析结果

协助决策的选择

所有的食材,经过一番精致的处理後,变成一个美味可口的蛋糕

所有杂乱的数据,也经过好好的整理、分析、视觉化,

变成有价值的决策协助工具了~~~

这就是通常在面对一笔杂乱的数据,

会进行的资料分析流程


<<:  加上random与time模组,限制次数与时间的管理(1)

>>:  从零开始学3D游戏设计:模型基础 Part.2 加入表面图案

【第二八天 - Flutter 开发套件之旅(上)】

前言 当我在做某某知名平台的画面时,我发现其实健在都没有这个效果的 plugin,可以快速达到想要做...

Day 03 - Curry

yo, what's up? 今天要来介绍 Functional Programming 重要的概念...

CSS Animation 使 Mobile 网页崩溃!? 效能优化篇(2) - 查看网页效能并发现问题~

崩溃之後面对的是迟钝 上一章我们解决了网页崩溃问题,接下来发现网页中的动画在电脑上顺利执行,IPho...

30天轻松学会unity自制游戏-结语

最一开始接触到Unity,只是想说试试看能不能制作个游戏看看,下载完Unity,就按照Unity教学...

Day21-D3 基础图表:散点图/散布图

本篇大纲:基本散布图范例、进阶散布图范例 今天的一天一图表,我们要来画 散点图 / 散布图!散布图...