客服咨询

意见反馈

终身学习智能服务
课程
大数据时代:数据采集集成指南
数据库应用//
0.0
41
视频
1.8
课时
介绍
目录

课程概述

数据产生方式的变革促成了大数据时代的到来。目前数据的产生已经完全不受时间、地点的限制。本课程将介绍数据采集的基础知识、系统日志数据源、数据库间的数据同步,以及数据采集实战案例——网络爬虫。

课程目标

通过学习,你将会收获: (1)了解大数据的来源、数据采集的概念、大数据采集目标、大数据采集方法和数据存储方式 (2)了解网络爬虫概念、网络爬虫原理、搜索策略和爬虫道德 (3)了解系统日志采集的目的、日志采集过程以及使用Flume实现日志采集。 (4)了解数据同步技术。

考核评价

章节练习题辅助知识点学习,认证考试检验学习成果。

讲师介绍

详细介绍

大数据时代:数据采集集成指南
1、数据采集简介

(969s)

2、网络数据采集

(1357s)

3、网络爬虫实现(上)

(756s)

4、网络爬虫实现(下)

(783s)

5、系统日志采集

(514s)

6、数据同步

(531s)

监督管理单位:江苏省人力资源和社会保障厅     运营服务单位:杭州沃土教育科技股份有限公司     技术支持单位:浙江浙大网新软件产业集团有限公司