『您的瀏覽器不支援JavaScript功能,若網頁功能無法正常使用時,請開啟瀏覽器JavaScript狀態』

跳到主要內容區塊

工業技術研究院

:::

工業技術與資訊月刊

出版日期:

正方形 Icon 專欄 Column

如何做出對的決策 巨量資料分析領頭關鍵

口述/余孝先 整理/陳玉鳳

巨量資料的發展攸關臺灣產業競爭力的強弱,所有的產業領域皆會用到相關技術及服務,臺灣產業面臨產業轉型及升級的關鍵時刻,巨量資料分析的導入將能為臺灣產業提供具體及大幅的加值作用,讓臺灣產業能持續在全球舞台上發光及發熱。

在大賣場中,如果你看到啤酒和尿布被擺在一起,會不會覺得這樣的擺設方式毫無邏輯可言?然而,事實證明啤酒的銷售量因此上升,而這要拜巨量資料(Big Data)分析所致。

Walmart 在一次營業資料分析中偶然發現,嬰兒尿布和啤酒竟然常常被同時購買,原因為何?原來就是美國嬰兒的父親常在下班回家前買尿布,而許多的嬰兒父親在買尿布時,會隨手買幾罐啤酒。根據這樣的分析結果,Walmart就在各個賣場把啤酒和尿布擺在一起,結果銷售量增加3成。

這個例子說明了巨量資料分析的精髓,也就是「以資料分析的結果做決策」,因為如果是以經驗來判斷,應該沒有店老闆會把啤酒擺在尿布旁邊。

資料產生又快又多 傳統分析技術不適用

綜觀人類的決策行為大致可以分為兩類──經驗判斷及資料分析。隨著網路的普及,資料產生速度驚人且數量龐大,再加上分析技術的精進,因此人類仰賴資料分析進行決策的比例越來越高,許多領域都仰賴巨量資料分析來找出人腦無法察覺的資料相關性,以及潛藏在資料中的價值。

相較於早期便已出現的商業智慧、資料探勘等,現在的資料來源太多且性質差異大,除了網際網路應用服務外,GPS、RFID、監視攝影機等各式各樣感測器,也都日以繼夜地提供各種資料,因此資料分析的難度已大幅提高,過去傳統的資料分析工具與方法已不敷需求。這些改變造成新的挑戰,同時也帶來新的機會。

這幾年「資料」特性的改變,可用4個V的概念來說明。首先是Volume,也就是處理的資料量,根據研究,人類活動所產生的資料量,將以每年增加50%以上的幅度成長,過去的分析方法已經應付不了,所以必須開發新的資料處理系統;第二個V則是Velocity,意指資料產生是不間斷的,因此處理及回應皆必須是即時及快速的。

第三個V是Variety,是指資料的多樣性,現在我們所面對的資料可能是一則Twitter上的推文,可能是新聞下方的一則評論,也可能是Youtube上的影片,這些資料都不具結構性,對僅擅長處理問卷分析等結構性資料的傳統分析技術而言,這無疑是極大挑戰;最後一個V是Veracity,指的是資料的可信程度,現在因為資料來源龐雜,因此正確性及可靠性降低。

對於既存的系統與演算法而言,巨量資料的4V特性實在太難於處理了,因此我們需要新的技術及方法。針對龐大的資訊量,大規模平行處理新技術備受期待;資訊的產生如此快速,因此我們需使用更即時的新運算方式來處理;面對資料的多樣性,我們則需要能整合不同資料種類的技術;至於面對品質不佳的資訊,誰能分析出重要的資訊,誰就掌握了勝算。總而言之,我們需要找尋新的方法來處理資料,才能從巨量資料中整理出高價值的資訊。這些問題是挑戰,也是商機。

工研院投入巨量資料 鎖定軟體及應用服務

上述這些挑戰構成了龐大的商機,吸引無數企業投身此領域,全球先進國家為了掌握資料分析所能挖掘出的許多隱晦事實,無不積極投入巨量分析的研究。在臺灣,工研院於去年5月成立的「巨量資訊科技中心」,正是臺灣第一個以巨量資料處理分析為主軸的研發中心,目前約有100多名成員。

相較於其他發展巨量資料分析的組織及單位,工研院具有數項優勢,其一,工研院是全球少數具多領域技術發展的研發機構,具有各種產業的 know-how 與能力,足以發展巨量資料的跨產業應用;其二,工研院能以六大技術領域的巨量分析新應用,來驅動各產業的優化發展;第三大優勢則是奠基於工研院與國內各行各業的緊密關係,且許多國內高科技公司更是自工研院孕育而生,這些皆有助於工研院巨資中心能以產業的角度出發,發展出最切中產業需求的巨量分析應用模式。

中心的定位非常明確,就是以應用驅動技術發展。為了實現這個目標,巨資中心根據產業領域的需求來發展巨量資料的創新應用服務與新興商業模式,提供產業所需的智慧分析與機器學習演算法等核心技術,並建構巨量資料及開放資料分析應用所需的運算平台與系統整合技術等。

「巨量資訊科技中心」有兩大重要任務,一是建立智慧分析技術,協助臺灣資訊軟體業建立知識經濟的核心能力;另一則是切入智慧分析應用,協助相關產業提升生產力、創造新商機。

臺灣產業長久以來重硬體、輕軟體;著重硬體代工、不擅長應用服務。在這樣的現實及氛圍下,巨資中心在成立及定調的過程中,的確有許多意見仍是沿襲舊有的硬體製造思維,認為臺灣應該仍是以硬體角度來切入巨量資料分析產業。
然而,我們認為臺灣過去雖然因為資訊硬體而創造數波經濟榮景,但現在面臨「毛三到四」,甚至是「說一不二」的低利潤困境,已經到了轉型開拓新領域的時刻,所以在經過慎密的研究後,工研院巨資中心決定以軟體及應用服務為切入重點。

首波訴求製造業及零售業 持續建立實績

工研院巨資中心已鎖定LED產業為首波合作對象,藉由巨量資料分析技術的導入,協助LED業者提升製造良率。再者,工研院巨資中心也與多個縣市警察局、警政署合作,分析街頭攝影機錄影視訊,藉以產生特定車輛行進軌跡,進而達到打擊犯罪的目的。

為了讓臺灣的主流產業更強,也為了快速建立臺灣的巨量資料分析服務能量,巨資中心除了LED產業外,也將鎖定製造業中的半導體、機械產業等,另外,就業人口數高達110萬人,約占臺灣總就業人口數10%的零售業,也是巨資中心的重點目標。

中心近期已和momo購物網合作,利用巨量資料分析技術的導入,協助該網站進行個人化的推薦。也就是說,當消費者進入momo購物網站時,所見到的首頁內容並非「千篇一律」,而是「因人而異」,不同消費者看到的商品推薦是不同的,這樣的方法能命中消費者的需求,因此可以有效提升銷售量。

基本上,資料分析做得越精確、考慮到更多面向,就能更精準掌握顧客的需求,除了提升客戶的滿意度外,也能為企業指引出產品開發及銷售的方向,日本7-ELEVEN的「七五三感冒指數」就是一個好例子。根據巨量資料的分析結果,日本7-ELEVEN發現,如果一天當中溫度相差七度、今天和昨天的溫度差到五度、且溼度差大於30%的話,代表感冒的人會增加,店家就該把感冒藥、溫度計和口罩等上架。

此外,無論是電子產業或是零售服務業,所有企業的經營成本有很大一部分是來自存貨,而導入巨量資料分析服務不僅能增加銷量,還能由精準預測消費趨勢而減少存貨、削減報廢。

提供在地服務 提升臺灣產業競爭力

巨量資料已是全球資訊及服務的新趨勢,面對全球化的國際競爭,巨量資料分析對未來我國產業優化影響頗大。值得期待的是,經由不斷的推廣,以及國外市場上的成功案例愈來愈多,現階段已有越來越多臺灣企業懂得巨量資料分析的重要性;採納相關服務的意願漸漸升高。

隨著臺灣市場的商機浮現,來自海外的競爭對手勢必越來越多,相較於資源龐大的國外巨量資料服務供應商,我們對於發展臺灣在地巨量資料分析服務仍有很大信心。

外商的經營是著眼於全球市場,對於臺灣本地產業的了解程度不如工研院巨資中心,且國外巨量資料分析服務供應商的客戶涵蓋全球,容易在客戶資訊保密方面引發疑慮。相對地,工研院巨資中心就比較容在獲得本地企業的信任,且外商的服務顧問可能人在國外,而中心的資料分析人才可以就近提供服務。另外還有很重要的一點是,臺灣絕大部分企業都是負擔不起昂貴外商產品的中小企業,為了提升臺灣的國際競爭力,我們會提供中小企業也能採用的解決方案。

工研院巨資中心持續累積相關系統、軟體與服務的研發能量,研發成果將以新創事業或技轉方式發散出去,進而推動臺灣巨量資料分析新興產業的建立及發展。

巨量資料的發展攸關臺灣產業競爭力的強弱,其影響範圍非僅少數產業,因為巨量資料是一種共通性的工具,所有的產業領域皆會用到相關技術及服務,尤其是全球競爭日漸加劇,巨量資料的導入與否,將是企業優勝劣敗的關鍵所在。

在此臺灣產業面臨產業轉型及升級的關鍵時刻,巨量資料分析的導入,將能為臺灣產業提供具體及大幅的加值作用,讓臺灣產業能持續在全球舞台上發光及發熱,這是工研院成立巨量資訊科技中心的初衷,也是我們群策群力的願景所在,未來我們將持續精進相關技術的開發及服務能量的建立,為臺灣的產業未來貢獻一己之力。

下載全文PDF Icon下載全文PDF