新闻中心

学数据分析可以准备哪些先修课程?(数据分析先学什么)

2023-05-19
浏览次数:
返回列表

在推荐课程之前,先说一说数据分析的知识体系,然后推荐一些学习资料和相关课程,希望你在入学之前能够先人一步

赶紧卷起来

知识体系

一、必备工具-SQL

SQL包括MySQL、hiveSQL/Oracel等,基本语法差不多,掌握其中一种即可,其他的可以用到时在学。SQL的学习需要掌握以内容:

1. SQL基础语法,包括语句查询,过滤条件,多表组合等

2. 数据库表的增、删、查、改。

3. 数据聚合计算,包括分组计算,自定义函数计算等

4. 开窗函数(面试考察重点)

5. 分页函数(面试考察重点)

推荐书籍及链接:《SQL必知必会》、牛客网刷题、推荐B站神器

二、统计分析神器-R语言

R语言是比较常用的统计分析工具,也是一种简单易学的高级程序语言。R语言的学习需要掌握以下内容

1. R语言的基础语法,基础的语法结构、函数定义以及基本绘图方法

2. 掌握基本统计分析,包括描述性统计、相关、t检验、组间差异的非参数检验;回归;方差分析等

书籍推荐:《R语言实战》、《ggplot2:数据分析与绘图艺术》

三、Python

Python作为AI的必备工具,需要掌握以下内容:

1. Python基础语法,重点要学习数据结构、函数定义、类定义等

2. pandas进行数据管理,清洗,转换等

3. Numpy等高级库进行数值计算,线性转换等

4. 熟练运用Matplotlib进行可视化

5. 能够灵活使用第三方库sklearn, gensim等进行机器学习建模

书籍推荐:《Python编程从入门到实践》、《利用PYTHON进行数据分析》

网站推荐:廖雪峰的官方网站

四、统计学与概率论

统计概率是数据挖掘理论知识的基础。在日常的数据分析工作中,常常会用到统计概率论的知识。统计概率涉及到的条件概率、概率分布,统计检验等知识是学习数据挖掘必备的先验条件。

1. 统计学基础知识,包括方差,中位数,协方差等定义

2. 理解并且掌握离散分布于连续分布,比如高斯分布,泊松分布等概念。做到深刻理解,能够写出公式并且熟知运用

3. 了解统计假设检验

4. 理解并且能够应用线性回归,深入理解最小二乘算法

5. 划重点:条件概率,这是一个经常考的点,牢记公式,能够熟练的运用公式解决实际题目

6. 记住正态分布的3δ原则

书籍推荐:《深入浅出统计学》《统计学-从数据到结论》

五、线性代数与数理统计

概率论与数理统计是学习机器学习和深度学习的基础,学号线性代数与数理统计更容易理解及机器学习中的各项数学表达式。

线性代数与数理统计需要掌握的知识有:

1. 矩阵代数

2. 行列式

3. 空间向量

4. 特征值与特征向量

5. 正交性和最小二乘法

书籍推荐:《线性代数及其应用》

六、机器学习

数据挖掘涉及到数据的清洗、数据挖掘定义,模型理解与运用,模型指标评估等一整套知识体系。

1. 理解并且掌握数据挖掘基础知识,包括代价函数、过拟合、泛化能力、评价标准(精确率、召回率、敏感性、特异性)、划分数据集的方法、处理数据不平衡的方法、bias variance trade-off等

2. 区分监督学习,无监督学习,半监督学习,同时要区分回归于分类模型等常用知识的区别

3. 对于常用模型要有深刻理解并且能够用灵活运用,如 随机森林,GBDT, Logistic Regression, svm等,包括每一个算法定义的function、loss function以及求解loss function 的方法。

4. 除了监督学习,还需要掌握主流的无监督学习方法,比如K-MEANS、层次聚类、密度聚类等,掌握评价无监督学习算法优劣的评价标准。

5. 灵活掌握sklearn机器学习库,能有灵活应用到项目实践中

6. 能够高效的检验模型参数,能够正确的运用评估指标进行模型评价

推荐书籍:《机器学习》周志华 《统计学习方法》

推荐视频:B站李宏毅机器学习系列课程、吴恩达系列课程

七、数据结构与算法基础

数据结构与算法作为校招面试中必考的题目,建议大家提前准备,能够在具体的场景下,抽象问题,用算法解决具体的问题,能够找出最优解最佳。数据结构与算法可以从以下几个方面进行准备:

1.递归

2.栈、堆、队列

3.链表

4.树

5.映射、哈希表和跳跃表

6.搜索树

7.排序与选择

8.图算法

推荐书籍:《算法图解》、《数据结构与算法-python语言实现》、《算法》、《剑指offer》

推荐视频:《左程云算法初级、中级、进阶》

推荐刷题网站:leetcode、牛客

八、自然语言处理(加分项)

NLP处理的是文字与文本数据。在现实中我们接触到的大部分都是非结构化的文本类数据,如果高效的运用这些数据是我们在NLP里面首先要解决的问题。NLP涉及到机器翻译,语音识别,情感分析等方方面面,掌握NLP的基础知识是每一位数据挖掘工程师必备技能。

1. 能够掌握正则表达式,快速准确的提取出有效信息

2. 掌握中文分词,能够灵活调用分词库,学会处理停顿词等

3. 了解语言模型

4. 掌握并且能够运用词向量模型

参考书籍:《统计自然语言处理》

九、大数据基础(加分项)

linux是数据挖掘工程师日常工作的操作系统,所以必须对Linux常用命令和系统有所了解,并且要求能够使用linux完成简单的数据分析任务。同时,linux上部署的分布式机器学习平台spark也是我们需要熟悉掌握的,这是加分项:

1. 掌握常用linux命令,能够熟练使用Linux进行数据分析

2. 能够使用Linux系统进行模型部署与自动调度

3. 熟练使用spark进行分布式机器学习

4. 理解mapreduce、spark的原理与区别

推荐书籍:《鸟哥的私房菜》

十、深度学习实践(加分项)

深度学习是当前最火热最前沿的应用,作为一名合格的数据挖掘工程师,必须理解以及运用深度学习常用模型。 我们需要掌握以下知识:

1. 能够理解神经网络运行机制,比如反向传播等

2. 能够对于常见的模型,DNN、CNN、RNN、LSTM等有深入的理解和运用

3. 必须掌握一门深度学习框架,我们推荐使用Tensotflow

参考书籍:《深度学习》

推荐视频:B站李宏毅机器学习系列课程

学习经验分享

掌握数分知识体系

数据分析是门槛比较低,容易入门的一个岗位,要入门数据分析,需要掌握需要有良好的数据分析思维、会使用Excel常用函数、透视表以及制作可视化看板,除了这些当然少不了SQL,Python,BI工具,Pytho编程语言,统计学知识等等。

1数据思维

想要转行数据分析,最重要的当然是要有数据的sense,通俗来讲就是要拥有数据分析的思维。很多培训机构一上来就给学员们教各种工具和编程语言,但是很多人学会了这些编程语言之后依然不会数据分析。数据分析的思维也不是一蹴而就,需要慢慢积累,多在行业里面摸爬滚打;而对于没有经验的应届生或者转行的小伙伴来说就可以多看一些数据分析的案例,拓展和丰富自己的分析思路。小编也给大家准备了一些笔试面试中常见的数据思维的面试题,希望能够帮助到大家!

【数据思维面试题】

没有数据思维,却不知道怎么培养?这些面试题给你想要的答案!没有数据思维,却不知道怎么培养?这些面试题给你想要的答案(二)!没有数据思维,却不知道怎么培养?这些面试题给你想要的答案(三)!数据分析之道:用数据思维指导业务实战(博文视点出品)京东¥106.00去购买

全书数据代码领取链接《数据分析之道——用数据思维指导业务实战》!

坚持写作两年,我的第一本书出版啦, 本周限时优惠,免费送30本!
mp.weixin.qq.com/s/2s4rCBKedyAdT7i9EQDtsw

本书以数据分析思维为主题,主要介绍对比思维、分群思维以及相关思维三大数据分析思维,同事以数据分析全流程为主线,融合了编程语言、统计学基础以及案例分析等多模块内容,全书分为4篇,囊括了数据分析思维的基础概念培养方法、数据来源及体系建设、数据分析三大思维方式以及用户流失、用户转化实战等共十一章的内容。

全书都是彩印,放上两张图让给大家瞅瞅。

数据分析之道:用数据思维指导业务实战(博文视点出品)京东¥106.00去购买

2Excel技能

作为数据分析师,天天跟数据打交道,必然少不了要用到Excel。那么Excel要学学到什么程度才够呢?当然是熟练的掌握常用的分析函数,包括统计函数,时间函数,字符串处理函数,逻辑函数,查找与引用函数等。说到这里你可能会问,这么多的函数,我哪里学的玩,能不能划下重点?看这里,小编已经为大家整理好了分析师必会的函数大全,请注意查收!

[数据分析师必会Excel函数大全]

数据人必会的Excel|连Excel函数都不会,那你还能干啥

除了函数之外呢,分析师还需要使用Excel做透视表,做可视化看板等等。可视化看板也称为仪表盘(Dashboad),小编已为大家整理好了Dashboard的制作流程。

[数据分析师必会Excel可视化仪表盘]

数据人必会的Excel|还在给老板看苍白无力的数据?有了这份Excel炫酷的报表,还愁不升职加薪?Word/Excel/PPT办公应用从入门到精通京东¥41.30去购买

3SQL

数据分析师需要掌握的最重要的技能莫过于SQL了,小编当然不会忘记为大家准备SQL的大礼包。

[数据分析师必会SQL知识点大全]

史上最全的SQL知识点汇总,错过这次在等一年

[数据分析师必会SQL知识点详解]

学好SQL,数据分析就已经入门一半SQL必知必会 第5版(图灵出品)京东¥36.50去购买

4 BI工具

BI工具也是数据分析师常用的工具,每次开发报表都会用到这些工具。现在市面上的BI工具也很多,有Tableau,PoweBI,FineBI,Superset等等,熟悉一类BI工具即可。小编在这里推荐Tableau。Tableau数据可视化从入门到精通(视频教学版)¥43.60

5统计学基础

统计学的基础理论和思维也是数据分析师安身立命之本,因此在很久以前小编就已经汇总了一些统计学相关的文章,同时也收藏了一些视频,今天就把压箱底的资料统统分享给大家!

[数据分析师学要了解的统计学知识]

用最简单的方法学会贝叶斯统计学上最全的统计学知识不得不学的统计学知识(一)不得不学的统计学知识(二)深入浅出统计学(中文版)道恩·格里菲思著统计学入门教¥71.28商务与经济统计(原书第13版)戴维安德森 商务与经济京东¥187.00去购买

6 Python编程语言

Python作为一门胶水语言,比JAVA呀,C呀之类的语言都容易学。对于数据分析师来说,掌握Python处理数据的基础操作以及可视化就基本足够了!如果你能学习一些机器学习之类的课程,当然这是加分项咯!Python数据分析 活用Pandas库(图灵出品)京东¥66.30去购买Python编程 从入门到实践 第2版(图灵出品)¥66.30R语言实战 第2版京东¥72.35去购买【视频教学】2本 笨办法学python3+进阶篇 基础编程从京东¥118.00去购买利用Python进行数据分析(原书第2版)京东¥98.20去购买

7 数分实操案例

拥有了数据思维,学会了以上分析方法和分析工具,但是缺少实操案例怎么办呢?小编当然也不会忘记这一点啦,贴心地为大家准备了实操案例,大家按需索取哈!

【数据分析实践案例】

加拿大各地区温度的时空变化趋势分析利用ARIMA预测加拿大各地区温度的时空变化趋势分析未来25年气候变化通过相关性分析探究极寒天气与气候变化的关系

免费课程分享

点击上方蓝字关注我们

来源:公众号-数据万花筒

链接:B站数据分析课程学习清单!

很多优质的数据分析课程,需要的小伙伴自取!课程包括了数据思维系列、统计学基础系列、面试经验分享系列、项目实战、SQL、EXCEL、Python等多方面的内容,课件笔记还在整理中,之后会继续分享!B站数据分析课程学习清单!很多优质的数据分析课程,需要的小伙伴自取!课程包括了数据思维系列、统计学基础系列、面试经验分享系列、项目实战、SQL、EXCEL、Python等多方面的内容,课件笔记还在整理中,之后会继续分享!

数据分析思维

1.《互联网大厂之商业分析》

https://www.bilibili.com/video/BV1a64y127Hi

2.《互联网业务数据分析》

https://www.bilibili.com/video/BV16p4y1W79k

3.《用户增长之数据驱动的增长黑客技能》

https://www.bilibili.com/video/BV1f64y127U9

4.《游戏数据分析运营求职面试职场进阶必会知识体系》

https://www.bilibili.com/video/BV1y54y1j7p7

5.《数据分析师必会的用户画像构建》

https://www.bilibili.com/video/BV15h411k7wR

系统地学习数据分析思维,请移步《数据分析之道——用数据思维指导业务实战》!

数据分析之道:用数据思维指导业务实战(博文视点出品)京东¥106.00去购买

全书数据及代码领取链接!

本书特色

本书并不是空洞而孤立地讲数据分析思维,而是基于完整的数据分析流程阐述数据思维在整个流程中的应用,涉及到数据分析的每一阶段。从通过数据埋点获取用户数据到数据标签化处理再到指标体系监控业务变化是数据分析的准备工作;而对比思维、分群思维以及相关思维是数据分析各个阶段都会用到的思维方式;而将各类分析方法以及分析思维恰到好处的运用到业务场景中以揭示业务问题才是数据分析真正要解决的问题。本书从数据埋点到各类分析方法的应用为读者搭建一套系统的分析框架,读者需要在掌握Python、SQL、Excel等数据工具的前提下进行实践效果最佳。

数据分析思维并不是一蹴而就的,也不是学完本书就会立刻拥有的,本书不具备赋予读者数据思维的“超能力”。数据分析思维不同于数据分析工具,数据思维较为抽象,不像数据工具有一定的语法结构,需要在业务实战中进行积累的。但是本书会总结分析方法论以及分享实践案例引导读者树立数据分析思维,当然这是远远不够的,培养数据思维最好的方式还是在实战中积累和总结,本书只是抛砖引玉为读者建立一个系统地框架,最终还是需要读者在自己行业中进行实践和积累。

面向的读者

本书适合以下几类人群

-工作1-3年的初级数据分析师

-已经掌握了数据分析工具,需要培养数据分析思维的转行人员

-数据科学行业的人力专家和猎头,用于标定候选人数据分析能力

本书主要以数据分析思维为主题,其中的实践案例涉及到Python以及SQL语言,但本书不会去讲解。

Python以及SQL语法,所以本书面向已经掌握了Python及SQL等数据分析工具的出即数据分析师和相关转行人员。

数据分析之道:用数据思维指导业务实战(博文视点出品)京东¥106.00去购买

大数据统计学基础与线性代数

1.《大数据的统计基础》

https://www.bilibili.com/video/BV1Ny4y1x7ha

2.《数据分析师常踩的统计学坑》

https://www.bilibili.com/video/BV1Hy4y1Y7zC

3.《深入浅出统计学》

https://www.bilibili.com/video/BV1rV411a7XD?p=4

4.《一门课程讲透数据科学中常用的统计学知识》

https://www.bilibili.com/video/BV1dZ4y1N7jw

5.《李宏毅2020最新线性代数课程》

https://www.bilibili.com/video/BV1sz4y1Z7W1

面试及转行经验

1.《大数据相关工作职位介绍》

https://www.bilibili.com/video/BV1sp4y1r7rR

2.《一线大厂数据分析师总结的求职面试干货》

https://www.bilibili.com/video/BV1Wh411k7oq

3.《讲讲那些年转行数据分析用到过的书籍》

https://www.bilibili.com/video/BV1Hr4y1N7ki

4.《令人心动的offer,数据分析师求职面试指南》

https://www.bilibili.com/video/BV1vy4y1m7RM

5.《从生物医学转行到互联网数据分析,我做对了什么?》

https://www.bilibili.com/video/BV1dk4y1C7xy

6.《数据岗知识体系及岗位介绍》

https://www.bilibili.com/video/BV1N5411L7JB

项目实战课程

1.《Python项目实战课》

https://www.bilibili.com/video/BV1fU4y147Cg

2.《Kaggle实战课程》

https://www.bilibili.com/video/BV1x64y127tC

3.《自学数据分析但没有实战经验?别担心,Kaggle实战案例也可以让你的简历熠熠生辉!》

https://www.bilibili.com/video/BV1vN411d7w4

4.《大数据挖掘与算法》

https://www.bilibili.com/video/BV1Fy4y1q79e

SQL与数据库

1.《SQL零基础1小时快速入门,学完就会做数据分析了!》

https://www.bilibili.com/video/BV1zi4y1j79E

2.《数据库及SQL优化》

https://www.bilibili.com/video/BV1d54y1r7Wj

3.《Hive数据库》

Hive数据库_哔哩哔哩_bilibili

4.《大数据生态架构》

https://www.bilibili.com/video/BV1JA411x7gM

Excel

1.《数据人必会Excel基础教学必会技巧》

https://www.bilibili.com/video/BV1qf4y1C7Si

2.《掌握Excel32个操作技巧,让你在数据分析中秒变效率达人》

https://www.bilibili.com/video/BV1uf4y1y78y

3.《数据人必会的Excel逻辑函数》

https://www.bilibili.com/video/BV1D64y1f7sG

数据可视化

1.《Tableau入门教程》

https://www.bilibili.com/video/BV15A411x7Qk

2.《GGPLOT2数据分析的艺术》

https://www.bilibili.com/video/BV1uy4y1z7og

Python与R

1.《R语言与数据分析》

https://www.bilibili.com/video/BV1St4y1e7d4

2.《小甲鱼-python入门课程》

https://www.bilibili.com/video/BV1iZ4y1V7vM

3.《李晓华-数据科学实战》

https://www.bilibili.com/video/BV1FV411a7FJ

4.《Python从入门到精通(一)》

https://www.bilibili.com/video/BV13K4y177hM

5.《Python从入门到精通(二)》

https://www.bilibili.com/video/BV1hK411V759

6.《数据分析师必会的python基础知识大全》

https://www.bilibili.com/video/BV1EK4y1W7un

7.《python爬虫从入门到精通》

https://www.bilibili.com/video/BV1Wh41127Ma

数据分析之道:用数据思维指导业务实战(博文视点出品)京东¥106.00去购买

如果您觉得我们的文章还不错,请分享,点赞,再看,一键三连!!!

END

搜索