上海大數(shù)據(jù)開發(fā)課程培訓班

課程內容

大數(shù)據(jù)運維之Linux基礎
Linux系統(tǒng)做為大數(shù)據(jù)平的企業(yè)級操作系統(tǒng)，本部分是基礎課程，幫大家打好Linux基礎，以便更好地學習Hadoop，hbase,NoSQL，Spark，Storm，docker,openstack等眾多課程。這是進入大數(shù)據(jù)領域的必須掌握的基礎技術因為企業(yè)中的項目基本上都是使用Linux環(huán)境下搭建或部署的。
從入門到精通
本課程是整套大數(shù)據(jù)課程的基石：其一，分布式文件系統(tǒng)HDFS用于存儲海量數(shù)據(jù)，無論是Hive、HBase或者Spark分析的數(shù)據(jù)是存儲在HDFS里面；其二是分布式資源管理框架YARN是用來在Hadoop云操作系統(tǒng)（也稱數(shù)據(jù)系統(tǒng)）管理集群資源和分布式數(shù)據(jù)處理框架MapReduce、Spark應用的資源調度與監(jiān)控的；分布式并行計算框架MapReduce目前是海量數(shù)據(jù)并行處理的一個常用的框架。Hadoop 2.x的編譯、環(huán)境搭建、HDFS Shell使用，YARN集群資源管理與任務監(jiān)控，MapReduce編程，分布式集群的部署管理（包括高可用性HA）必須要掌握的。
大數(shù)據(jù)倉庫Hive精講
hive是基于Hadoop的一個數(shù)據(jù)倉庫工具，可以將結構化的數(shù)據(jù)文件映射為一張數(shù)據(jù)庫表，并提供基本的SQL查詢功能，可以將SQL語句轉換為MapReduce任務進行運行。其優(yōu)點是學習成本低，可以通類SQL語句快速實現(xiàn)簡單的MapReduce統(tǒng)計，不必開發(fā)專門的MapReduce應用，十分適合數(shù)據(jù)倉庫的統(tǒng)計分析。
大數(shù)據(jù)倉庫Hive精講
Sqoop是一款開源的工具，主要用于在Hadoop(Hive)與傳統(tǒng)的數(shù)據(jù)庫mysql、Oracle、SQLServer、postgresql等RDBMS數(shù)據(jù)間進行數(shù)據(jù)的傳遞，可以將一個關系型數(shù)據(jù)庫，例如：MySQL、Oracle、SQLServer、Postgres等RDBMS中的數(shù)據(jù)導進到關系型數(shù)據(jù)庫中。Sqoop項目開始于2009年，最早是作為Hadoop的一個第三方模塊存在，后來為了讓使用者能夠快速部署，也為了讓開發(fā)人員能夠更快速的迭代開發(fā)，Sqoop獨立成為一個Apache項目。
WEB工具Hue精講
Hue是一個開源的Apache Hadoop UI系統(tǒng)，最早是由Cloudera Desktop演化而來，由Cloudera貢獻給開源社區(qū)，它是基于Python Web框架Django實現(xiàn)的。通過使用Hue我們可以在瀏覽器端的Web控制臺上與Hadoop集群進行交互來分析處理數(shù)據(jù)，例如操作HDFS上的數(shù)據(jù)，運行MapReduce Job等等。
核心應用
國內關于Java性能調優(yōu)的課程非常少，如此全面深入介紹Java性能調優(yōu);本套課程系多年工作經驗與心得的總結，課程有著很高的含金量和實用價值，本課程專注于java應用程序的優(yōu)化方法，技巧和思想，深入剖析軟件設計層面、代碼層面、JVM虛擬機層面的優(yōu)化方法，理論結合實際，使用豐富的示例幫助學員理解理論知識。