課程詳情
課程內容:
1、python介紹、安裝、基本操作、基本語法、數據結構、內建函數、異常、模塊;
2、Storm介紹、Storm應用場景及行業案例、Storm特點、Storm編程模型部署;
3、Storm集群搭建、配置集群、通信機制;
4、Component組件、spout水龍頭、bolt轉接頭、spout的tail特性、網站日志處理案例、將接收到日志的會話id打印在控制臺案例、動態增加日志,查看控制臺打印信息案例、分組策略和并發度、實時單詞統計案例、實時計算網站PV案例、實時計算網站UV去重案例、常見問題總結;
5、消息隊列Kafka、使用Flume收集數據到Kafka、Mahout的離線計算數據、Kafka基礎與常用API;
項目:
基于storm體系的“雙十一實時數據分析平臺”、Grouping策略及并發度、計算網站、storm事務、Storm集群和作業監控、點擊流日志分析、Python爬蟲
課程評價
聚劃算