课程详情 学校简介 学校地址 申请试听
关键词:上海大数据培训哪家好 上海大数据培训机构 上海大数据培训哪里靠谱
大数据学科培训班
课程内容
Hadoop离线计算
大数据概述和Hadoop环境安装
云计算和分布式、大数据应用场景、分布式文件系统设计原理、Hadoop集群环境的安装、HDFS的基本操作(命令行)、HDFS的配置文件的核心相关参数。
HDFS原理和应用
HDFS原理分析、HDFS工作流程分析、访问HDFS、分布式日志采集案例。
MapReduce和Yarn
MapReducer原理分析、MapReducer的算法模型、MapReduce和Yarn集群的配置、Yarn模型的运行管理机制、MapReduce的本地运行模式。
MapReduce编程案例
流量统计、汇总排序、订单分组topN、线段重叠统计、电影评分的topN、倒排索引、JOIN算法、MapReduce分布式启动运行流程、MapReduce数据处理流程、数据倾斜。
Hadoop架构和源码分析
数据仓库
Hive
Hive核心工作机制、Hive的安装和运行、Hive的DDL操作、SQL语法加强。
Hive加强
Hive数据类型、单行函数、聚合函数和表生成函数、Hive案例、窗口函数、Hive自定义函数等。
Hadoop生态圈组件
Flume工作机制、Flume安装和配置、Flume拦截器、Flume高可用、日志采集分类汇总、Sqoop工作机制、Sqoop的安装部署、Sqoop的导入导出案例案例、Azkaban的工作流调度器介绍、Azkaban的安装部署和使用配置等。
HBASE
HBASE概述和核心特点、HBASE工作原理、HBASE的集群部署、shell客户端的基本操作、Java操作HBASE、HBASE读写操作和流程等。
Storm实时计算
Storm编程入门
Storm概述和原理、Storm的本地和集群模式、Storm的核心组件详解、Storm的并行运算和分组运算、Storm集群执行过程分析,Storm案例。
Storm架构和源码分析
Storm核心机制
Ack机制概述、Storm通信机制、Storm数据分发机制。
消息中间件Kafka的使用
KafKa概述和原理、KafKa的集群环境部署、KafKa的生产者和消费者、KafKa分组策略、KafKa配置详解。
Scala语言
Scala语言基础、Scala函数和方法、Scala数据结构、Scala面向对象、隐式参数、隐式参数类型转换、泛型、视图界定、上下文界定、Akka的RPC通信框架等。
Spark内存计算
Spark入门
Spark原理、Spark架构分析、Spark集群安装、Spark-shell单机和集群、Spark任务执行流程、Spark程序调试。
Spark RDD
RDD运行架构、Transformation操作API、RDD分区数据的读取、Action操作API、Spark编程案例、自定义排序、Stage切分、Spark整体执行流程。
Spark SQL
Spark SQL原理、Spark SQL应用场景、Spark SQL性能分析、Spark SQL的案例、Spark SQL函数。
Spark Streaming
Stream运行架构、SparkStream工作原理、Spark Stream和KafKa整合、Spark Stream和Redis的整合等。
Spark架构和源码分析
大数据项目
大型日志采集系统、大数据综合项目
叩丁狼教育是隶属于狼码教育,是一家专注于线下IT教育培训的机构,在广州、沈阳、上海、成都四地均设有教学点。
从2015年创立之初,叩丁狼就依靠着高质量的教学与管理,赢得了众多学员的喜爱。通过不断的发展革新,以前沿的课程体系,强大的师资团队,科学的教学方式,严格的教学管理为基础,并辅以专业的就业服务,迄今已为IT行业输送了数万名高端技术人才,90%以上的学员都是因为叩丁狼的好口碑而来。
从最开始的单一学科,到目前开设有JAVA、全栈UI设计、H5前端、软件测试、大数据、Python等学科;从最初的埋头自研课程,到联合知名互联网企业技术专家一起共建学科;从单一的线下教学模式,到打造线下+线上学习生态闭环。叩丁狼立志成为一家能够保障学员核心竞争力,帮助其成长并追求职业自由的中国IT教育培训品牌。
教育理念
"用心做教育,专注每一位学员的成长"是叩丁狼一直坚持的教学理念,我们认为教育是一个特殊的行业,只有用心去做,才能让每一位学员成长与蜕变,且在往后的人生与职业道路上健康发展。
在实际的教学工作中,叩丁狼一直坚持内外兼修的观点。务求让学员蜕变的不仅仅是外在的技能熟练度、项目实战经验,更要有内在的自学能力、思考与解决问题的能力以及对技术精进的长期追求。让学员通过学习,真正地改变生活,改变命运!
使命愿景
致力于让所有愿意进入IT行业的学员,职业道路走得坚实而长远!
信息化时代,技术改变生活,推动社会发展已经是不争的事实,不管是从个人还是从社会贡献的角度出发,投身IT行业,都是当代年轻人*的选择之一。作为深耕IT教育多年的教学团队,叩丁狼希望建立起一套完整的人才培养体系,为企业源源不断输送高质量人才,通过关注到每一位学员的长远发展,从而推动整个行业与社会的进步。多年来,叩丁狼不断强化自身的责任心,严把教学质量关,为实现这一目标而奋斗终生。
学校名称:上海叩丁狼IT教育
固定电话:400-001-5729
授课地址:上海市徐汇区徐泾镇双联路168号 预约参观