就是站在BigData上的范例巨大的数据源课件.ppt

1、楊立偉教授台灣大學工商管理學系2013 FallIntroduction to Database ManagementConfidential and Proprietary老師介紹台大資訊管理博士研究領域為知識工程、搜尋引擎、語意分析、網路行銷等超過20項語意及行為分析相關專利發明人現任台大工管系兼任助理教授 2006意藍資訊董事總經理(創辦人)1999龍捲風科技董事長 2008經歷資訊及通信國家標準技術委員2009年獲選經理人雜誌100 MVP最有價值經理人2012年獲數位時代雜誌創業之星首獎FunTime,Co-founder 國內最大旅遊搜尋引擎MobileWiz Inc.,Co-fo

2、under 國內最大互動簡訊行銷公司Digital J Walter Thompson,Taiwan,Principal Consultant(兼任)課程目標 了解資料庫管理之目的與理論 培養資料庫管理之觀念與能力 了解資料庫管理之工具與應用 了解資料庫管理和組織、企業等相關之管理議題Why Database(1)每人每天產生多少資料 搭公車、搭捷運、刷悠遊卡 到便利商店買飲料 用手機上臉書、按個讚、打個卡 送個LINE、拍張照片上傳 上網瀏覽、刷卡購物、給個評價 過個馬路被超過十個鏡頭拍下Why Database(2)資料快速成長Source:IBM 2012全球CEO調查報告https:/

3、 Database(3)運用資料與演算，達成智慧決策Source:IBM 2012全球CEO調查報告https:/ Database(4)管理整體資訊供應鍊Source:IBM 2012全球CEO調查報告https:/ Database(5)企業應用 數位化時代中，資訊扮演的角色越來越重要 所有企業資訊化的背後，幾乎都與資料庫有關。生產/研發/供應商 行銷/銷售/客戶 組織/人事 財會/資料分析 策略/決策支援Scenario 1:資料收集處理Scenario 2:Member Sorting 你任職於某大電信公司行銷部門 為了擬定促銷策略 想了解目前800萬會員內，各付費方案人數比例 想調出

4、每月帳單金額超過5000元的名單 且濾出30歲以上之男生 想促銷iPhone 5s 面臨的問題 向IT部門要資料卻要2個月後才給 跟你說沒這個欄位做不到Scenario 3:ERP 上線 你任職於一家電子組裝公司 因應綠色環保法規，你必需將供應商分類(合格/不合格/待檢驗)以重新整理零件存貨 為了方便作業，你請IT部門做系統調整 IT部門說如果是加欄位則 2 天就可以做完 但如果是更改資料庫結構，就要很久 你心想差在哪裏?Scenario 4:資料更新問題 你任職為零售賣場的分析師 你將POS(銷售點)系統產生的紀錄全留下 某日得知新竹店電話改了 請問要修改幾筆資料?容易有什麼問題?Scena

5、rio 5:交易不完整 你有兩個銀行戶頭A 銀行 B 銀行$3,000$3,000$1,000$3,000$1,000$5,000$0$3,000初始餘額存$3,000到A銀行轉$2,000到B銀行(1)A銀行先扣$2,000(2)B銀行再加$2,000$2,000發生大地震全台大停電-為何會這樣?如何解決?Scenario 6:更多資料庫的管理問題 資料庫整合 你任職於某大金控公司客服部門 公司最近合併了銀行、保險、與證券公司 客戶打電話來問為什麼還是收到三張帳單?保險的客戶打電話來，你卻調不出客戶資料 資料庫安全 你任職於某大電視購物公司 聽聞拍賣網站有盜賣公司會員資料光碟，一筆3元 好奇

6、買來看，卻不會用?學習目的 這是一門介紹基礎理論的課 資料庫背後的理論 管理資料庫應具備的觀念 資料庫可能衍生的相關議題 這是一門著重應用與實務的課 如何建立與使用資料庫 以MS Access/SQL Server為例 靈活運用資料並進行查詢分析 Ex.問卷分析 了解各種資料庫最新應用 Ex.資料倉儲、Big Data授課與評分方式 課堂上課，配合應用解說與討論 評分方式 作業報告30%期中考30%期末考及分組專題40%課程網址 http:/homepage.ntu.edu.tw/wyang楊立偉教授台灣大學工商管理學系2013 FallIntroduction to Database Man

7、agement資料庫發展趨勢Confidential and ProprietaryTrend of Big Data(1)Big Data 係指資料大量成長 根據IBM的研究，全世界90%的資料是在過去2年產生 Google、Facebook 等，就是站在Big Data上的範例 巨大的數據源，將改變整個學術界，商界和政府 依賴資料庫工具處理 包括 capture，storage，search，analytics 等Trend of Big Data(2)資料分析人才需求大幅增加Understanding Big DataUnderstanding Big DataUnderstanding

8、 Big DataUnderstanding Big DataBig Data 巨量資料分析的應用緣起 Source:IBM 2012 智慧科技論壇Big Data 四大特性Source:IBM Big Data Hubhttp:/ rules the world(1)2013 top 10 rich menNameWealth IndustryNationality1.Bill Gates$72.7BMicrosoftUSA2.Carlos Slim Helu$72.1BTelecomMexico3.Amancio Ortega$57.0BZaraSpain4.Warren Buffett$

9、53.5BFinanceUSA5.Lawrence Ellison$43.0BOracleUSA6.Charles Koch$34.0BOilUSA7.David Koch$34.0BOilUSA8.Li Ka-shing$31.5BReal estateHong Kong9.Liliane Bettencourt$30.0BLOrealFrance10.Bernard Arnault$41.0BLVMHFranceDatabase rules the world(2)about ORACLE 繼Microsoft及IBM後，全球收入第三多的軟體公司 1977年在矽谷由3人合資成立，當時IBM

10、發表關聯資料庫的論文，Ellison以此造出新資料庫，名為甲骨文 首年賺不到百萬美元，10年內迅速冒起 2012年市值1529億美元 現況 2012年營收371億美元 全球有38萬個客戶，1400萬個開發者 財星100大企業全使用Oracle的資料庫Database rules the world(3)產業#1 金融 Banking 通信與媒體 Telecom&media 建築 Construction 製造 Manufacturing 生技醫療 Life sciencesand healthcare 專業服務 Professional services 政府 Public sector 零售

11、 Retail 運輸 Transportation 企業#1 前20大航空公司 airlines 前20大汽車公司 automotive 前20大政府機構 governments 前20大高科技公司 high tech 前20大保險公司 insurers 前20大製造公司 manufacturers 前20大石油公司 oil and gas 前20大製藥公司 pharmas 前20大水電公司 utilities 前20大銀行公司 banksEvolution of Database TechnologiesGrowth driversMicrosoft:The Fourth Paradigm:

12、Data-Intensive Scientific Discovery 科學發展走過實驗、理論、計算三個典範，將近入以資料為重點的第四典範IDC Taiwan 需管理的資料持續爆炸性成長 商業智慧(business intelligence)需求持續成長 新的資料庫技術創造新的機會Database Market in Taiwan2011 Market Revenue US$130MTop 3:Oracle,Microsoft,IBMSource:IDC Taiwan問題討論指定閱讀作業(1)雲端時代的殺手級應用：海量資料分析 胡世忠 著，天下文化，2013年3月 閱讀第 13章指定閱讀作業(2)於 9/25 6am 前繳交 Word檔 含心得報告及問題回答1.大數據對企業管理的影響為何？企業如何因應？2.個人對於資料庫管理的認識與期望