回到首頁
個人.家庭.數位化 - 數位之牆



產業動態 【資策會】網路爬蟲與Spark大數據流處理實務(9/15)
資策會 本新聞稿發佈於2018/07/15,由發布之企業承擔內容之立場與責任,與本站無關

本課程旨在教導學員能透過開源Library從網站、社群媒體、裝置獲取資訊,並能將非結構化資料轉換為結構化資料,交由Kafka訊息管理系統做統一管理,接著利用Spark Streaming進行大數據流的即時運算,並將結果予以應用。課程設計能使學員親身體驗資料串流的處理,並能從體驗中遭遇的問題,學習更多解決方案,加倍學習之效果。

 
■ 發布/輪播新聞稿 新聞稿直達14萬電子報訂戶刊登新聞稿:按此 想在你的Blog上輪播產業動態按此
 
 課程環境準備: 課程VM環境準備與設定
 資料流獲取
(1) 網頁爬蟲實戰技術
(2) 網頁結構化解析技術
(3) 社群媒體資料擷取技術:Facebook、Ptt、Mobile01等實作
(4) Socket 資料流獲取技術: 網路層基礎Socket Server實作
 Spark 技術回顧: Spark Batch處理技術
 Kafka與Spark Streaming技術實作
(1) Spark Streaming DStream 方法介紹與實作
(2) Kafka 訊息管理系統介紹與實作
(3) Spark Streaming資料流與Kafka介接技術
 綜合實戰練習
(1) 開源中文斷詞Library使用
(2) PTT八卦版即時關鍵字訊息流獲取系統實作
*課程執行單位保留調整課程內容、日程與講師之權利
【課程網址】http://www.iiiedu.org.tw/ites/NBS.htm
【相關課程】http://www.iiiedu.org.tw/ites/portal/MA.htm


- 新聞稿有效日期,至2018/08/15為止


聯絡人 :吳小姐
聯絡電話:(02)6631-6533
電子郵件:fionawu@iii.org.tw

上一篇:【資策會】Big Data之處理與分析進階班(9/15)
下一篇:【資策會】Python資料視覺化(9/15)

 
搜尋本站


最新科技評論

訂閱制付費會員經營之道:我積攢一生的工作經驗 - 2020/12/06

共享經濟:以人民的名義爭奪流量入口 - 2017/06/18

影音網站的未來(三) PGC孵化IP,直播更接近長尾 - 2016/10/16

影音網站的未來(二)短影音適合往社交和工具發展 - 2016/10/09

影音網站的未來(一)長尾效應與頭部效應無法兼顧 - 2016/10/02

大部分O2O 模式違反網際網路經濟特性 - 2015/02/08

融資是怎麼回事(下)什麼人能拿到投資 - 2015/01/04

融資是怎麼回事(中)讀懂投資人的唇語 - 2014/12/21

融資是怎麼回事(上)融資是迭代的過程 - 2014/12/14

■ 訂閱每日更新產業動態
RSS
RSS

當月產業動態

Information

 

 

 




個人.家庭.數位化 - 數位之牆

欲引用本站圖文,請先取得授權。本站保留一切權利 ©Copyright 2008, DigitalWall.COM. All Rights Reserved.
Question ? Please mail to service@digitalwall.com

歡迎與本站連結!