上海大数据开发课程培训班

课程内容

大数据运维之Linux基础
Linux系统做为大数据平的企业级操作系统，本部分是基础课程，帮大家打好Linux基础，以便更好地学习Hadoop，hbase,NoSQL，Spark，Storm，docker,openstack等众多课程。这是进入大数据领域的必须掌握的基础技术因为企业中的项目基本上都是使用Linux环境下搭建或部署的。
从入门到精通
本课程是整套大数据课程的基石：其一，分布式文件系统HDFS用于存储海量数据，无论是Hive、HBase或者Spark分析的数据是存储在HDFS里面；其二是分布式资源管理框架YARN是用来在Hadoop云操作系统（也称数据系统）管理集群资源和分布式数据处理框架MapReduce、Spark应用的资源调度与监控的；分布式并行计算框架MapReduce目前是海量数据并行处理的一个常用的框架。Hadoop 2.x的编译、环境搭建、HDFS Shell使用，YARN集群资源管理与任务监控，MapReduce编程，分布式集群的部署管理（包括高可用性HA）必须要掌握的。
大数据仓库Hive精讲
hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供基本的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通类SQL语句快速实现简单的MapReduce统计，不必开发专门的MapReduce应用，十分适合数据仓库的统计分析。
大数据仓库Hive精讲
Sqoop是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库mysql、Oracle、SQLServer、postgresql等RDBMS数据间进行数据的传递，可以将一个关系型数据库，例如：MySQL、Oracle、SQLServer、Postgres等RDBMS中的数据导进到关系型数据库中。Sqoop项目开始于2009年，最早是作为Hadoop的一个第三方模块存在，后来为了让使用者能够快速部署，也为了让开发人员能够更快速的迭代开发，Sqoop独立成为一个Apache项目。
WEB工具Hue精讲
Hue是一个开源的Apache Hadoop UI系统，最早是由Cloudera Desktop演化而来，由Cloudera贡献给开源社区，它是基于Python Web框架Django实现的。通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据，例如操作HDFS上的数据，运行MapReduce Job等等。
核心应用
国内关于Java性能调优的课程非常少，如此全面深入介绍Java性能调优;本套课程系多年工作经验与心得的总结，课程有着很高的含金量和实用价值，本课程专注于java应用程序的优化方法，技巧和思想，深入剖析软件设计层面、代码层面、JVM虚拟机层面的优化方法，理论结合实际，使用丰富的示例帮助学员理解理论知识。