日本研發出巨量資料解析速度冠全球之新技術
作者：沈沛均 現職：留日學人
文章來源：取材自日本經濟新聞2013/02/13
發佈時間：2013.03.22
快速解析巨量資料的需求與日俱增，日前，NTT 軟體創新中心開發出可快速解析巨量資料中擁有圖型結構 (Graph) 資訊的技術，速度較既有技術快數十倍，若分析約1億人的社群網路服務 (SNS) 交友關係，既有技術約需4至6分鐘，但新技術則3分鐘即可完成，可謂「世界最快」。所謂圖型結構資訊乃存在於Twitter等SNS中，以圖形形式聯結人、物、場所等之資訊。
該新技術的2項特徵如次：
一、可將類似資訊依組分類，即「集群分析 (Cluster Analysis) 技術」。分析1500萬條資訊約需8秒，約可分成10萬至100萬種集群，若能利用該項技術，NTT 軟體創新中心分散處理基礎技術計畫的塩川浩昭表示：「可解析原本因過度耗時而放棄解析的大容量資訊。」
二、「個人化網頁級別 (Personalized PageRank) 技術」，即由依集群分類的資訊中指定並評價特定節點 (Node)、分析其關係性，以決定對該節點影響較大的重要結點。NTT 軟體創新中心以該技術簡化計算處理時資訊的偏頗，將速度提高數十倍。
為使技術邁向實用化，NTT已與國內某大學合作，開始解析電子病歷資訊之議論。NTT表示：「若使用該技術可解析何種人適合何種治療，則更有效的醫療應指日可待。」塩川則表達其企望：「由人所衍生出的資訊日益多元化、大容量化，將致力對應以實現更高度的解析能力。」
資料來源:http://stn.nsc.gov.tw/view_detail.asp?doc_uid=1020322013&kind_no=A03
文章來源：取材自日本經濟新聞2013/02/13
發佈時間：2013.03.22
快速解析巨量資料的需求與日俱增，日前，NTT 軟體創新中心開發出可快速解析巨量資料中擁有圖型結構 (Graph) 資訊的技術，速度較既有技術快數十倍，若分析約1億人的社群網路服務 (SNS) 交友關係，既有技術約需4至6分鐘，但新技術則3分鐘即可完成，可謂「世界最快」。所謂圖型結構資訊乃存在於Twitter等SNS中，以圖形形式聯結人、物、場所等之資訊。
該新技術的2項特徵如次：
一、可將類似資訊依組分類，即「集群分析 (Cluster Analysis) 技術」。分析1500萬條資訊約需8秒，約可分成10萬至100萬種集群，若能利用該項技術，NTT 軟體創新中心分散處理基礎技術計畫的塩川浩昭表示：「可解析原本因過度耗時而放棄解析的大容量資訊。」
二、「個人化網頁級別 (Personalized PageRank) 技術」，即由依集群分類的資訊中指定並評價特定節點 (Node)、分析其關係性，以決定對該節點影響較大的重要結點。NTT 軟體創新中心以該技術簡化計算處理時資訊的偏頗，將速度提高數十倍。
為使技術邁向實用化，NTT已與國內某大學合作，開始解析電子病歷資訊之議論。NTT表示：「若使用該技術可解析何種人適合何種治療，則更有效的醫療應指日可待。」塩川則表達其企望：「由人所衍生出的資訊日益多元化、大容量化，將致力對應以實現更高度的解析能力。」
資料來源:http://stn.nsc.gov.tw/view_detail.asp?doc_uid=1020322013&kind_no=A03
瀏覽數:
分享
