客服咨询

意见反馈

终身学习智能服务
课程
大数据开发工程师
大数据工程技术人员S//
0.0
114
视频
7.7
课时
介绍
目录

课程概述

适用对象: 大数据领域的软件开发工程师; 对大数据技术感兴趣,在数据处理、分析和大数据解决方案开发方面的专业IT人士; 对新兴技术有浓厚兴趣的技术爱好者。

课程目标

学习大数据的基本概念、特征(如体量大、速度快、种类多和真实性)以及大数据技术的应用场景; 熟悉并掌握大数据生态系统中的核心组件,包括Hadoop、Spark、Flink等框架的使用和原理; 了解如何设计可扩展、高可用的大数据解决方案,并能够进行系统架构的规划; 学习如何对大数据处理流程进行性能调优,以提高数据处理的效率和效果。

考核评价

不仅理解理论知识,而且能够将所学知识应用于实际的大数据项目中,并具备解决实际问题的能力。

讲师介绍

详细介绍

第一节课--走进大数据hadoop生态体系
HDFS概述及应用场景

(747s)

关键特性介绍

(1341s)

MapReduce概述及应用场景

(554s)

MapReduce计算流程

(680s)

Yarn系统架构及功能

(639s)

分布式协调服zookeeper

(573s)

第二节课--数据管理Hive和Hbase
Hive的概述及系统架构

(1167s)

Hive数据类型及表操作

(842s)

Hbase概述及系统架构

(1377s)

Hbase的数据模型

(1539s)

Hbase的shell操作及优化

(922s)

第三节课--流式数据处理及数据采集
Kafka消息队列

(1757s)

storm流式处理

(2040s)

flume数据采集

(1345s)

第四节课--Spark生态体系
Spark基础

(1778s)

Spark RDD

(1632s)

Sprak on yarn

(577s)

Spark Streaming

(1055s)

Spark SQL

(446s)

资源方logo

浙江华为

6

门课

84

人报名学习

推荐课程

监督管理单位:江苏省人力资源和社会保障厅     运营服务单位:杭州沃土教育科技股份有限公司     技术支持单位:浙江浙大网新软件产业集团有限公司