12项数据工程在线课程


据Statista,到2025年,大数据市场将增长到2019年(比41 175个zetabytes 图表)。要在这一领域开展工作,您需要了解如何使用云中存储的大数据。 Cloud4Y编制了12项付费和免费数据工程课程的清单,这些课程将扩展您在该领域的知识,并且可以成为通往云认证道路的良好起点。

前言

什么是数据工程师?这是负责在数据科学项目中创建和维护数据体系结构的人。他的职责可能包括确保服务器与应用程序之间的数据流不间断,集成用于数据管理的新软件,改进基础数据流程以及创建数据管道。

数据工程师必须拥有大量的技术和工具才能使用云计算,数据仓库,ETL(提取,转换,加载)等。此外,所需技能的数量也在不断增长,因此数据工程师需要定期补充行李知识。我们的清单中有针对初学者和经验丰富的专业人士的课程。选择适合您的东西。

1.数据工程纳米级认证(Udacity

您将学习如何设计数据模型,创建数据仓库和数据湖,自动化数据管道以及使用数据集数组。在该计划的最后,您将通过完成Capstone项目来测试您的新技能。

持续时间:5个月,每周5小时
语言:英语
价格:1695美元
级别:初学者

2.成为数据工程师认证(Coursera

从基础学习。您可以通过讲座和实践项目来分阶段发展技能。培训结束时,您将准备使用ML和大数据。建议您至少了解Python。

持续时间:8个月,每周10小时
语言:英语
价格:?
级别:初学者

3.成为数据工程师:掌握概念(LinkedIn学习

您将开发数据设计技能和DevOps技能,学习如何使用Hazelcast和Hadoop数据库实时创建大数据应用程序,创建数据管道,实时处理应用程序

持续时间:取决于您的
语言:英语
价格:第一个月免费-
水平:初学者

4.数据工程课程(edX

这是一系列程序,向您介绍数据工程并教您如何开发分析解决方案。课程是根据难度级别进行分类的,因此您可以根据自己的经验级别选择一种。在培训过程中,您将学习如何使用Spark,Hadoop,Azure和管理公司数据。

持续时间:取决于您
语言:英语
价格:取决于所选课程
水平:初级,中级,高级

5.数据工程师(DataQuest

如果您具有Python经验并想加深您的知识并建立数据处理专家的职业,那么该课程是值得选择的。您将学习如何使用Python和pandas建立数据管道,以及在清理,转换和验证后将大型数据集加载到Postgres数据库中。

持续时间:取决于您的
语言:英语
价格:取决于订阅的形式
级别:初学者,中级

6. Google Cloud的数据工程(Coursera

本课程将帮助您掌握在大数据领域建立职业所需的技能。例如,使用BigQuery,Spark。您将获得准备获得行业认可的Google Cloud Professional数据工程师认证所需的知识。

持续时间:4个月
语言:英语
价格:免费,
水平:初学者,中级

7.数据工程,谷歌云平台上的大数据(Coursera

一个有趣的课程,提供有关GCP中数据处理系统的实践知识。在课程中,您将学习在开始开发过程之前如何设计系统。此外,您还将分析结构化和非结构化数据,应用自动缩放,并应用ML方法提取信息。

学习时间:3个月
语言:英语
价格:免费,
水平:初学者,中级

8。圣地亚哥加州大学:大数据专业化(Coursera

该课程基于Hadoop和Spark基础架构的使用以及ML过程中这些大数据处理方法的应用。您将学习将Hadoop与MapReduce,Spark,Pig和Hive结合使用的基础知识。了解如何建立预测模型并使用图分析对问题进行建模。请注意,本课程不需要编程经验。

持续时间:8个月,每周10个小时
语言:英语
价格:免费,
水平:初级

9.使用Apache Spark和Python驯服大数据(Udemy

您将学习如何在Spark3中使用流结构和数据帧,了解如何使用Amazon的Elastic MapReduce服务与Hadoop中的集群一起使用。了解如何在分析大数据时发现问题,并了解GraphX库如何与网络分析一起使用以及如何使用MLlib。

持续时间:取决于您的
语言:英语
价格:从800卢布到149.99美元(多么幸运)
水平:初级,中级

10.大数据工程PG程序(upGrad

本课程将使您了解Aadhaar的工作方式,Facebook如何个性化提要以及如何使用数据工程。关键主题将是数据处理(包括实时处理),MapReduce,大数据分析。

持续时间:11个月
语言:英语
价格:约3000美元
级别:初级

11.数据科学家(Skillbox专业

您将学习如何使用Python编程,学习训练神经网络Tensorflow和Keras的框架。掌握MongoDB,PostgreSQL,SQLite3数据库,学习如何使用Pandas,NumPy和Matpotlib库。

持续时间:300小时的培训
语言:俄语
价格:上半年是免费的,然后每月3900卢布
水平:初学者

12。数据工程师7.0(新专业实验室

您会发现对Kafka,HDFS,ClickHouse,Spark,Airflow,lambda体系结构和kappa体系结构的深入研究。您将学习如何将工具彼此连接,形成管道并获得基准解决方案。学习需要至少具备Python 3的知识。学习

时间:21节课,7周
语言:俄语
价格:60,000卢布
水平:中级

如果您想在列表中添加另一门好课程,可以在评论中或PM中退订。我们将补充该职位。

您还可以在Cloud4Y博客上阅读其他内容

宇宙的几何形状是什么?
瑞士的地形图上的复活节彩蛋
“云”发展的简短而短暂的历史
银行如何“中断”
90年代的计算机品牌,第3部分,最后

订阅我们的Telegram频道,以免丢失其他文章。我们每周写不超过两次,仅在商务上写。我们还提醒您,我们将于5月21日15:00(莫斯科时间)举行网络研讨会主题“在远程站点上工作时业务的信息安全性”。如果您想了解员工在家工作时如何保护敏感和公司信息,请注册!

All Articles