2016/10/31-11/1, 新竹, 大數據Hadoop+Spark巨量資料分析、雲端伺服器架設與機器學習整合開發實戰

導單位

執行單位

智慧手持裝置核心技術攻堅計畫 政府補助50%

大數據Hadoop+Spark巨量分析、雲端伺服器架設

與機器學習整合開發實戰

    1. 課程簡介與目標

「大數據」(Big Data)是繼大型電腦、個人電腦、網路與社群媒體等四波資訊科技浪潮之後最被看好的第五波科技新浪潮,透過對大量資料分析後,將可獲致資料的關連性,進而運用於預測商業趨勢、行銷研究、金融財務、疾病研究等等領域。

巨量資料中如何摸索出資料所要表達的意涵、提煉出「數據精華」是非常重要的課題,「機器學習(Machine Learning)」與「資料探勘(Data Mining)」便成為大數據時代中的重點領域。本「Hadoop+Spark大數據巨量分析與機器學習整合開發實戰課程,現已成為大數據趨勢中的重點,預期將能指導學員透過實作方法,靈活爬取大型網站的資料,並依照自訂規則獲得所需的資料。課程將配合範例程式碼介紹各種機器學習演算法,示範如何擷取資料、訓練資料、建立模型、預測結果,由淺而深介紹Spark機器學習。課程內容也包含紮實的數據基礎、高等代數、概率及統計分析,學員需具備一定程度的計算機基礎,將傳授數據分析相關知識和高等數學及數據分析基礎概念。

本課程特聘國際知名技術專家-柯博文老師,實機操作和架設Hadoop MapReduceHDFS,以及Spark RDDMapReduce,並實際撰寫數據分析程式和報表。

  1. 建議修課條件程式設計相關經驗基礎知識預計招生:15人,最低人數:10

實作環境與方法:課程採用Linux樹莓派Raspberry Pi 2 B 實驗板進行實作練習(一人一套實驗設備)

講師簡介 美國矽谷錄克軟體設計公司(LoopTek)首席技術執行長 柯博文老師

專長與經歷曾多次獲設計比賽大獎;為大型上市公司(如美國SanDisk、國泰世華銀行、昱泉國際、中國移動、海信電視等)開發手機應用軟體和多項硬體穿戴式設備產品;在AndroidiOS平台上開發銷售近百款軟體。曾任大陸工信部電子視像行業協會數位平台推進中心顧問和台灣工研院資通所顧問。授課地點遍及美國矽谷、台灣、大陸等地,並應邀在美國相關iOS開發者大會、台北Computex展、上海GDC大會等活動擔任演講者。

著作Raspberry Pi 最佳入門與實戰應用」、「Raspberry Pi 超炫專案與完全實戰 」、「Android 變形金剛:程式設計實戰應用」、「Arduino互動設計專題與實戰」等。

日期

1051031-11/1日(一〜二09301730

地點

新竹市光復路二段2953樓恆逸資訊電腦教室(位於工研院光復院區旁之帝國經貿大樓、永豐銀行樓上〕

課程內容

簡介大數據分析

■基礎大數據概念

架設 Hadoop

架設樹梅派 Hadoop Cluster

Hadoop 教學

MapReduce分散式程式框架

■對應Divide and conquer演算法

Hadoop HDFS教學

架設 Spark教學

SparkRDD Transformation Action教學

Scala 程式教學

演算法、StumbleUpon、決策樹、迴歸分析、貝式

Spark資料運算和視覺圖形化應用

Spark SQL結構化資料處理應用

Spark MLlib 機器學習函式庫和分類模組使用

Spark MLlib分群模組操作

■實作:針對政府的Open Data做大數據分析整合
Spark文件探勘前處理模組使用

■使用多台樹梅派架設和整合大數據分析伺服器

■實作

費用與繳費方式

  1. 原價NT$ 14,000,政府補助50%學員自費NT$ 7,0001010日以前報名可享優惠價NT$ 6,500/

若學員身份為身心障礙者、原住民、低收入戶或中堅企業廠商之特定對象者,政府補助70%,學員自行負擔NT$4,200/人。(業界上課人數未達10人則無政府補助70%)

本課程經政府補助,上課學員皆需依規定填寫相關資料,且學員出席時數需達課程時數八成以上,方可適用政府補助;若未符合規定者,則需將其政府補助費用繳回。

(2)繳費方式:

A.即期支票、匯票(抬頭—財團法人工業技術研究院)請郵寄至:新竹市光復路二段3213204

B.電匯或ATM轉帳帳號:005(土銀代碼)-156005000033(土地銀行工研院分行)、戶名:財團法人工業技術研究院;匯款時請註明參加者姓名、所屬機構與課程名稱。匯款後請將匯款收據傳真至03-5743838

報名方式

(1)報名網址http://140.96.176.3/training.orig/course/course_details.php?id=05136

(2)傳真報名專線:03-5743838聯絡人:李小姐03-574 3810小姐 03-574 3703

(3)E-mail報名或索取簡章信箱:YuanRuLee@itri.org.twhuichuanlo@itri.org.tw

(4)課前一週以e-mail與傳真傳送上課通知單

報名表 105.10.31-11.01大數據Hadoop+Spark巨量分析

機構名稱:

統一編號:

聯絡地址:

姓名

部門

電話

傳真

E-mail

餐點

( ) 分機

一般

( ) 分機

一般

(1)若有報名相關事宜應通知: 參加者 承辦人員:姓名 電話 傳真

(2)結訓學員應請配合經濟部工業局培訓後電訪調查

《經濟部工業局廣告》指導單位:經濟部工業局 執行單位:工業技術研究院量測中心

  • 教學 741
  • 柯博文個人 362