设为首页收藏本站

大数据论坛

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
查看: 2743|回复: 2

CCA Spark and Hadoop Developer (CCA175) 公开课信息

[复制链接]
发表于 2017-5-9 14:44:34 | 显示全部楼层 |阅读模式
CCA Spark and Hadoop Developer (CCA175) 开发者认证
认证准备建议:Spark andHadoop开发者培训
考试形式:120分钟;70%通过;解决10~12基于CDH5机群上需通过实际操作的问题
线上:长期开课
线下北京、上海定期开课(最近一次培训时间:北京6月22-25日Cloudera Developer training for Sparkand Hadoop(CCA-175) ,上海6月27-30日Cloudera Developer training for Spark and Hadoop(CCA-175))
课时:28h/4天
咨询:Q1438118790
课程介绍
Hadoop及生态系统介绍    
•  传统大规模系统的问题   
• Hadoop !   
• Hadoop 生态系统
Hadoop体系结构及 HDFS   
•  机群环境下的分布式处理   
•  存储:HDFS 体系结构   
•  存储:使用 HDFS   
•  资源管理:YARN 体系结构   
•  资源管理:使用 YARN
使用Apache Sqoop 导入关系数据   
• Sqoop 简介   
•  数据的基本导入导出   
•  减少传输的数据量   
•  改善 Sqoop 性能   
• Sqoop 2
Impala及 Hive 介绍   
•  简介   
•  为什么使用 Impala 及 Hive   
• Hive 和传统数据库的比较   
• Hive 应用场景
使用Impala 及 Hive 管理数据及建模   
•  数据存储   
•  创建数据库及表   
•  表数据导入   
• HCatalog   
• Impala 元数据缓存
数据格式   
•  选择文件格式   
• 支持不同文件格式的工具   
• Avro 数据格式定义模式   
• 在 Hive 及 Sqoop 里使用 Avro   
• Avro 格式数据模式变更   
• 压缩 数据分区   
• 分区概述   
• Impala 及 Hive 里的数据分区
ApacheFlume 实时数据采集   
•  什么是 Apache Flume   
• Flume 基本体系结构   
• Flume 源   
• Flume 槽   
•  Flume 通道   
• Flume 配置
Spark基础   
•  什么是 Apache Spark   
•  使用 Spark Shell   
• RDDs( 可恢复的分布式数据集)   
• Spark 里的函数式编程 Spark RDD   
• RDD   
•  键值对 RDD   
• MapReduce   
•  其他键值对 RDD 操作
编写和部署 Spark 应用   
• Spark 应用对比 Spark Shell   
•  创建 SparkContext   
•  创建 Spark 应用(Scala 和Java)   
•  运行 Spark 应用   
• Spark 应用 WebUI   
•  配置 Spark 属性   
•  运行日志
Spark的并行处理   
•  回顾:机群环境里的 Spark   
• RDD 分区   
•  基于文件 RDD 的分区   
• HDFS 和本地化数据   
•  执行并行操作   
•  执行阶段及任务
Spark缓存和持久化   
• RDD 演变   
•  缓存   
•  分布式持久化
Spark数据处理的常见模式   
•  常见 Spark 应用案例   
•  迭代式算法   
•  图处理及分析   
•  机器学习   
•  例子:K-Means 预览:SparkSQL   
• Spark SQL 和 SQL Context   
•  创建 DataFrames   
•  变更及查询 DataFrames   
•  保存 DataFrames   
• Spark SQL 对比 Impala

点评

海!外直播 url.cn/48VU4MB 禁闻视频 url.cn/48WYS6Q 前天看了一份调查CCTV在全国的收视率,东三省最高87%,然后依次下降到广东的5%。我看得笑起来了,活脱脱的一个经济倒排序,看得越多脑子越残!不如看这个..  发表于 2017-5-13 19:38
回复

使用道具 举报

发表于 2019-3-6 20:52:20 | 显示全部楼层
回个帖子,下班咯~
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|大数据论坛 ( 京ICP备10002193号-4 京公海网安备110108001289号  

GMT+8, 2020-7-7 00:13 , Processed in 0.277024 second(s), 27 queries , Gzip On.

Powered by Discuz! X3.1

© 2001-2013 Comsenz Inc.

快速回复 返回顶部 返回列表