根據用戶在電商網站的消費行為日志數據以及數據庫數據等,分析用戶的消費偏好,進行對用戶消費行為進行分析
對電商網站日志進行收集,清洗;對用戶構建用戶畫像;通過Hive對用戶消費行為分析;通過Oozie進行ETL任務調度
基于電商日志數據構建用戶畫像,完整的企業級離線大數據處理項目,完成該項目可勝任企業離線大數據開發工作
項目實戰,多方位接軌企業需求
根據用戶在電商網站的消費行為日志數據以及數據庫數據等,分析用戶的消費偏好,進行對用戶消費行為進行分析
對電商網站日志進行收集,清洗;對用戶構建用戶畫像;通過Hive對用戶消費行為分析;通過Oozie進行ETL任務調度
基于電商日志數據構建用戶畫像,完整的企業級離線大數據處理項目,完成該項目可勝任企業離線大數據開發工作
項目介紹
主要業務
項目特色
核心教學優勢,專為提分設計
好課程讓你贏在起跑線
課程階段 | 課程內容 |
第一階段:Java基礎 |
核心技能點:Java基礎語法、面向對象、異常處理、集合框架、常用類、I/O操作、多線程、網絡編程、XML解析 核心能力培養:熟練使用MyElipse開發Java程序;會使用Java編寫常用的流程控制語句;理解并掌握面向對象思想及其三大特性;能夠靈活運用Java常用類解決實際問題;會使用集合框架存儲數據、I/O技術操作文件;能夠實現多線程及網絡編程 具備能力及市場價值:深刻理解面向對象思想,掌握JavaEE核心技術并能靈活運用Java常用API解決實際問題,具備了程序員必備的邏輯思維能力及自學能力,為后續深入學習JavaWeb技術及框架技術打下牢固的基礎 |
第二階段:JavaWeb網站開發 |
核心技能點:HTML5、CSS3、JavaScript/ES6、JQuery、JSP/Servlet、MySQL數據庫、JDBC、Linux、SVN 核心能力培養:了解B/S架構運行原理;掌握網頁的開發和設計技能;掌握JavaWeb核心開發技能;掌握Linux應用部署和監控技能;掌握基本的JavaEE應用設計和開發技能;鍛煉學員團隊協作能力 具備能力及市場價值:能夠完成B/S架構的中小型網站系統的開發,并在真實生產環境下進行項目發布 |
第三階段:SSM/SSH框架 |
核心技能點:MyBatis框架、Spring框架、Spring MVC框架、Struts2框架、Hibernate框架、Git、Maven 、Oracle數據庫 核心能力培養:掌握SSM/SSH框架核心技能及應用開發技能;掌握Oracle數據庫設計和應用技能;學會使用Git進行項目代碼版本管理;學會使用Maven進行項目構建管理 具備能力及市場價值:能夠勝任垂直架構下的Java開發工作,熟練使用流行的開發框架SSM、SSH進行傳統企業級項目開發。 |
第四階段:基于分布式微服的互聯網架構 |
核心技能點:分布式微服架構、Dubbox、Spring Cloud、Spring Boot、Docker環境快速搭建實現自動化部署、分布式下ID唯一性、Redis、分布式事務處理、分布式下三方接入、Active MQ消息隊列等 核心能力培養:培養學員基于分布式項目的業務架構、應用架構、技術架構、安全架構、網絡拓撲架構等的設計和代碼開發能力,以及在部署策略等方面的綜合能力;培養學員分布式項目下核心業務處理能力;培養學員在分布式項目下對于高并發、數據最終一致性、性能優化等問題的解決處理能力 具備能力及市場價值:能夠勝任互聯網公司的分布式項目的開發和架構設計工作, |
第五階段:Python爬蟲+ELK+分析 |
核心技能點:Linux Shell編程、Python編程、NumPy&Pandas、Scrapy、LXML、PySpider、數據采集、整理和清洗、Elasticsearch、Logstash、Kibana 核心能力培養:掌握Python編程;具備Python的爬蟲開發、 數據獲取和整理等能力;能夠使用ELK進行數據導入、 查詢和集成 具備能力及市場價值:能夠勝任Python開發工程師、爬蟲工程師、搜索引擎工程師 |
第六階段:Hadoop生態圈 |
核心技能點:HDFS、MapReduce、YARN、Hive、Sqoop、HBase 核心能力培養:掌握Hadoop集群配置與管理;掌握HDFS文件操作;掌握分布式計算原理;掌握基于Hive的數據ETL和數據查詢;掌握HBase數據存儲;掌握數據導入導出 具備能力及市場價值:能夠勝任:Hadoop工程師、ETL工程師、Hive工程師、數據倉庫工程師 |
第七階段:Spark技術棧 |
核心技能點:Scala編程、Spark RDD、Spark SQL、Spark GraphX、PySpark、Jupyter、Hadoop數據模型、Atlas&Ranger、NiFi、Kafka、Oozie、Cassandra&Hive、Redis&Hive、MongoDB、Tableau 核心能力培養:掌握Spark集群配置與管理,以及Spark離線計算;具備Scala和Python編寫 Spark應用的能力;具備在企業數據湖中建立數據流程/通道、實施數據監管、規范數據管理和確保數據安全;具備數據采集、數據變換、數據建模、任務調度以及與企業應用的數據集成的能力;具備多種NoSQL數據存儲的能力;掌握Hive/Spark實施數據變換、BI工具與 Hive、 NoSQL 的集成;掌握用戶興趣取向分析/航班飛行網圖分析/電子商務消費行為分析/用戶交易欺詐分析案例的具體實現 具備能力及市場價值:能夠勝任:Spark工程師、Hadoop工程師、ETL工程師 |
第八階段:實時流處理平臺 |
核心技能點:Spark Streaming、Flink、Flume、Storm、d3.js、Echarts 核心能力培養:掌握Apache NiFi/Kafka/Flume/Spark Streaming的集成使用;具備實時流數據存儲、計算、查詢的能力;具備多種流處理框架的運用能力;掌握多種常見可視化工具的使用;掌握股票流數據實時分析/輿情分析案例 具備能力及市場價值:能夠勝任:大數據開發工程師、大數據架構師, |
第九階段:機器學習 |
核心技能點:Spark Mllib 核心能力培養:掌握Spark機器學習數據結構及流程;掌握分類,聚類和推薦模型;掌握垃圾郵件分類 具備能力及市場價值:能夠勝任:大數據架構師、大數據初級分析師、大數據挖掘工程師 |
成體系培養,符合行業發展趨勢
精通Java語言及Java技能體系;熟練掌握SSM/SSH框架技術進行垂直架構項目的開發;要具備架構設計的能力,可進行分布式微服架構項目的開發;要具備大數據Hadoop相關的基礎知識
掌握大數據生態圈相關技術的開發及應用,精通Hadoop、Spark、Spark Streaming、Kafka,掌握Java、Python、Scala、Shell等編程;并能夠利用大數據平臺實現對數據的分析和處理
教師幫助學員掌握流行的學習、分析、挖掘算法、分布式數據處理、數學建模、模型演練、智能化算法優化,以及創造性的算法實現,同時使用R、go、python等進行模型的實現
我們靠什么自信獲得您的認可?
門面
過道
資質
走廊
¥詢價課時:詳詢
¥19800課時:詳詢
¥19800課時:詳詢
¥19800課時:詳詢
¥19800課時:詳詢
¥詢價課時:詳詢