2016/5/17-18 新竹 ,Hadoop+Spark大數據巨量分析與機器學習整合開發實戰(工業技術研究院)

導單位: 執行單位

智慧手持裝置核心技術攻堅計畫 政府補助50%

  1. Hadoop+Spark大數據巨量分析與機器學習整合開發實戰

 

    1. 課程簡介與目標

  1. Python大數據分析由Hadoop Spark數據分析課程學習,現在已經成為大數據這一趨勢中的重點,要想學好,並且能夠在實際中靈活運用透過實做的方法實際在爬取大型網站的資料,並依照自訂的規則,獲得所需的資料。 配合範例程式碼來介紹各種機器學習演算法,示範如何擷取資料、訓練資料、建立模型、預測結果,由淺而深介紹Spark機器學習。而課程中將有紮實的數據基礎、高等代數、概率及統計分析, 需要有一定的計算機算法基礎,並且有極高的對數據分析這些知識的熱情和高等數學及數據分析基礎課程,全課程實做的方式完成。 本課程特聘國際知名技術專家-柯博文老師,實機操作和架設Hadoop MapReduceHDFS,以及Spark RDDMapReduce,並實際撰寫數據分析程式和報表。

  2. 建議修課條件程式設計相關經驗的基礎知識預計招生:15人,最低人數:10

實作環境與方法:課程採用Linux 樹莓派 Raspberry Pi 2 B 實驗板進行實作練習

講師簡介 美國矽谷錄克軟體設計公司(LoopTek)首席技術執行長 柯博文老師

專長與經歷曾多次獲設計比賽大獎;為大型上市公司(如美國SanDisk、國泰世華銀行、昱泉國際、中國移動、海信電視等)開發手機應用軟體和多項硬體穿戴式設備產品;在AndroidiOS平台上開發銷售近百款軟體。曾任大陸工信部電子視像行業協會數位平台推進中心顧問和台灣工研院資通所顧問。授課地點遍及美國矽谷、台灣、大陸等地,並應邀在美國相關iOS開發者大會、台北Computex展、上海GDC大會等活動擔任演講者。

著作Raspberry Pi 最佳入門與實戰應用」、「Raspberry Pi 超炫專案與完全實戰 」、「Android 變形金剛:程式設計實戰應用」、「Arduino互動設計專題與實戰」等。

日期

105050506(四〜五09301730

地點

新竹市光復路二段2953樓恆逸資訊電腦教室(位於工研院光復院區旁之帝國經貿大樓、永豐銀行樓上〕

課程內容

簡介大數據分析

■基礎Python 教學

■網路海量資料抓取程式

■實做:抓取網路新聞

■實做:定時股票資料

■雲端系統整合

■實做:Amazon EC2, AWS

Big data 大數據資料分析

■實做:分析臉書現在的熱門討論用字■ umPyScipy,Pandaspython數據分析函示庫教學

Scipy 數據分析函示庫

Pandaspython數據分析函示庫教學

架設 Hadoop

使用 Hadoop

架設樹梅派 Hadoop Cluster

Hadoop 教學

MapReduce分散式程式框架

■ 對應Divide and conquer演算法

Hadoop HDFS教學

架設 Spark教學

SparkRDD Transformation Action教學

演算法、StumbleUpon

Spark資料運算和視覺化應用

Spark SQL 結構化資料處理應用

Spark MLlib 機器學習函式庫和分類模組使用

Spark MLlib分群模組操作
Spark 文件探勘前處理模組使用

■ 使用多台樹梅派架設和整合大數據分析伺服器

費用與繳費方式

  1. 原價NT$ 14,000,政府補助50%,學員自費NT$ 7,000420日以前報名可享優惠價NT$ 6,500/

若學員身份為身心障礙者、原住民、低收入戶或中堅企業廠商之特定對象者,政府補助70%,學員自行負擔NT$4,200/人。(業界上課人數未達10人則無政府補助70%)

本課程經政府補助,上課學員皆需依規定填寫相關資料,且學員出席時數需達課程時數八成以上,方可適用政府補助;若未符合規定者,則需將其政府補助費用繳回。

(2)繳費方式:

A.即期支票、匯票(抬頭—財團法人工業技術研究院)請郵寄至:新竹市光復路二段3213204

B.電匯或ATM轉帳帳號:005(土銀代碼)-156005000033(土地銀行工研院分行)、戶名:財團法人工業技術研究院;匯款時請註明參加者姓名、所屬機構與課程名稱。匯款後請將匯款收據傳真至03-5743838

報名方式

(1)報名網址httpss://140.96.176.3/training.orig/course/course_details.php?id=05048

(2)傳真報名專線:03-5743838聯絡人:李小姐03-574 3810小姐 03-574 3703

(3)E-mail報名或索取簡章信箱:YuanRuLee@itri.org.twhuichuanlo@itri.org.tw

(4)課前一週以e-mail與傳真傳送上課通知單

報名表《結訓學員應請配合經濟部工業局培訓後電訪調查》

機構名稱:

統一編號:

聯絡地址:

姓名

部門

電話

傳真

E-mail

餐點

( ) 分機

一般

( ) 分機

一般

若有報名相關事宜應通知: 參加者 承辦人員:姓名 電話 傳真

《經濟部工業局廣告》指導單位:經濟部工業局 執行單位:工業技術研究院量測中心