石家莊Python+大數據開發高級工程師

Python大數據專業能從事的領域有很多，如: Python全棧工程師，Python爬蟲工程師，Python開發工程師，金融自動化交易，Linux運維工程師，自動化開發工程師，前端開發工程師，大數據分析和數據挖掘等。

實驗班 — Python編程基礎

知識點分布

1，Python基礎語法

1.變量 | 2.數據類型 | 3.運算符 | 4.流程控制語句

2，Python數據處理

1.字符串 | 2.列表 | 3.元組 | 4.字典

3，函數

1.函數定義 | 2.函數傳參 | 3.函數返回值 | 4.可變不可變類型 | 5.包的用法

4，文件讀寫

1.文件的打開、關閉、讀寫 | 2.文件目錄操作 | 3.OS模塊文件與目錄操作

5，面向對象

1.面向對象的概念 | 2.對象的創建 | 3.繼承 | 4.重寫

6，異常處理

1.異常的概念 | 2.異常的捕獲 | 3.異常的傳遞

7，模塊和包

1.模塊的概念 | 2.模塊的導入 | 3.包的概念 | 4.包的導入

進階班 — Python編程進階

知識點分布

1，網絡編程

1.IP地址及端口號介紹 | 2.*CP、Socket介紹 | 3.*CP網絡應用開發流程 | 4.基于TCP通信程序開發

2，多任務編程

1.多進程編程 | 2.多線程編程 | 3.線程同步

3，高級用法

1.閉包 | 2.裝飾器 | 3.迭代器 | 4.深淺拷貝 | 5.正則

進階班 — MySQL數據庫

知識點分布

1，mysql與SQL

1.數據庫的概念和作用 | 2.***ql數據類型 | 3.數據完整性和約束 | 4.數據庫、表的基本命令 | 5.***re子句 | 6.分組聚合 | 7.連接查詢 | 8.外鍵使用

2，Kettle與BI工具

1.****le基本操作 | 2.****le數據轉換 | 3.使用SQL腳本組件 | 4.****le Job開發 | 5.****BI操作

3，PyMySQL

1.環境搭建 | 2.****on操作數據庫

進階班 — 大數據Hadoop技術棧

知識點分布

1，Linux

1.***ux命令 | 2.遠程登錄和拷貝 | 3.權限管理 | 4.vi編輯器 | 5.集群搭建準備

2，大數據基礎和硬件介紹

1.大數據特點 | 2.分布式概念 | 3.服務器種類 | 4.網絡拓撲、IDC、Raid

3，Zookeeper

1.應用場景 | 2.架構原理 | 3.存儲模型 | 4.選取機制 | 5.客戶端操作 | 6.集群搭建

4，HDFS

1.**FS特點 | 2.架構 | 3.讀寫流程 | 4.集群搭建

5，MapReduce

1.架構原理 | 2.運算機制 | 3.序列化、排序與壓縮

6，Yarn

1.原理架構 | 2.高可用 | 3.資源封裝 | 4.調度策略 | 5.模式搭建

7，Hive

1.*QL操作 | 2.數據類型 | 3.分區、分桶、臨時表 | 4.內置函數 | 5.數據壓縮、存儲格式

進階班 — Pandas技術棧

知識點分布

1，Pandas及可視化

1.數據結構和數據類型 | 2.索引及列操作 | 3.數據增刪改查 | 4.常用函數 | 5.數據讀取保存及交互 | 6.可視化

進階班 — Spark

知識點分布

1，Spark基礎

1.基礎環境搭建 | 2.S*****lone環境搭建 | 3.S*******neHA環境搭建 | 4.S******Yarn環境搭建

2，Spark Core

1.架構和原理 | 2.*DD開發和原理 | 3.廣播變量 | 4.*AG原理

3，Spark SQL

1.架構和原理 | 2.D****rame、DataSet、SQL開發 | 3.多數據源整合 | 4.*QL執行計劃原理 | 5.*QL性能調優

4，實施計算

1.流式處理基本概念 | 2.架構 | 3.流式運算基本使用 | 4.組件整合

進階班 — 實時計算基礎

知識點分布

1，萬億級NoSQL海量數據存儲

1.***SE原理及架構 | 2.預分區、LSM結構 | 3.優化查詢

2，Flume實時數據采集

1.原理及架構 | 2.文件數據源及相關配置 | 3.斷點續傳

3，分布式流處理平臺

1.***ka原理及架構分析 | 2.分布式實時計算架構及思想

4，NoSQL社交場景大數據分析實戰

1.社交APP場景實戰 | 2.大數據架構剖析 | 3.數據采集 | 4.數據ETL | 5.數據分析

進階班 — 就業指導

知識點分布

1，SQL實戰

1.*QL優化加強 | 2.面試題

2，Hive數據分析

1.**ve數倉構建實例 | 2.面試題

3，Spark數據分析

1.離線分析 | 2.面試題

4，NoSQL數據分析

1.***ka加強 | 2.***SE加強 | 3.面試題

5，大數據多行業架構剖析

1.數據分析流程 | 2.數據架構剖析

進階班 — 大數據實時技術棧

知識點分布

1，Flink Core

1.基礎概念

2，Flink Data Stream

1.使用操作 | 2.***ka+Flink

3，Flink SQL

1.開發技術 | 2.**ve+Flink SQL

4，Flink Runtime

1.W****Mark | 2.C*****oint | 3.任務調度與負載均衡 | 4.狀態管理

5，Flink 高級

1.性能監控 | 2.***nk調優 | 3.***nk SQL 執行計劃

6，電商案例實戰

Flume+Kafka+Flink+HBASE+ Sqoop+Canal+MySQL實戰