知意圖大數據一體機2.0 詮釋Hadoop簡單之美

2012年11月30日于北京開幕的HBTC 2012 (Hadoop與大數據技術大會 2012，原 Hadoop in China) 技術盛會上，云集眾多學者、企業用戶以及技術領袖。大會發揚開源精神的角度，聯合國際和國內 Hadoop 及大數據應用的產學界人士和成功企業，通過技術應用審視大數據技術生態系統的現狀和發展趨勢，圍繞大數據處理、信息檢索、內容挖掘、自然語言理解、數據可視化、計算廣告學、地理信息系統等相關技術主題進行探討，充分促進 Hadoop 與大數據技術在國內的應用實踐。

Etu 知意圖首席顧問陳昭宇先生，在本屆大會上進行了題為”企業應用Hadoop 的最佳模式”的主題演講。在演講中，陳昭宇先生不僅介紹了知意圖大數據一體機 Etu Appliance 2.0 版本的最新功能，同時也向與會嘉賓分享知意圖的用戶和伙伴基于 Etu Appliance 2.0 上開發的行業解決方案與應用案例，讓更多對大數據感興趣但充滿疑慮的人，充分了解大數據如何真正的落地。

Etu 知意圖是亞洲大數據解決方案的領導品牌，專注于電信、金融、與電商行業的大數據解決方案研發，于 2012 年3 月28 日正式發布了亞洲第一個基于Hadoop 的大數據一體機產品 —— Etu Appliance。在此次 HBTC 2012 年度盛會中，Etu 知意圖再次與現場的嘉賓分享了技術卓越的 Hadoop 大數據一體機產品Etu Appliance 的最新版本。這一版本在 Hadoop 生態系統的開源基礎上，除了計算效能是用戶自行搭建系統的3~12倍外，還實現了一鍵式的大規模集群自動部署、非僅是Name Node的系統全面性 HA、Kerberos/LDAP集成的多租戶安全性、高效數據采集、集群集中管理等特色功能，是一個真正企業級即插即用的 Hadoop 一體機產品。

“因為Etu 知意圖深刻理解 Hadoop 應用開發者與系統管理員的痛，我們獨到的設計讓Etu Appliance 2.0 確實做到了 Hadoop集群部署、管理、HA、安全性都簡單難以超越，計算與網絡傳輸效能高性價。這是亞洲的驕傲，并首先在中國發布?！盓tu 知意圖負責人蔣居裕在 HBTC 2012 大會上如此表示。

來自 Etu 知意圖的大數據系統架構專家施宏良 (Jason Shih) 先生，也和與會嘉賓一起做了“從 Hadoop 安全架構部署實施到高等服務的演變”的精彩分享，施宏良先生認為目前使用 Hadoop 的開源框架，組織和管理龐大的數據量已經成為解決快速數據處理和提高分析能力的趨勢。但企業對于數據與集群系統的安全有更高的要求，從不同層面或者訪問權限上分離敏感信息和隔離共享存儲或計算機設備。在 Hadoop 0.20 之前的版本中，類似 Unix 的文件權限已經提及并提供集群內的簡單身份驗證機制，但缺乏訪問控制每個作業隊列，控制提交等操作。為了使用新的安全功能，Etu Appliance 2.0集成了 Kerberos 網絡認證協議，使其具備強大的身份驗證和授權，保證嚴格的訪問控制數據，資源和隔離之間運行的任務。施宏良先生分享了基于 Kerberos 的 Hadoop 安全集群環境的基礎設施部署細節以及如何以此實現高層次的服務。通過 Etu Appliance 的快速部署和自動化系統內置的跨域認證機制，實現現有的活動域與外部 LDAP 域的互操作，并有效減少集成和操作的管理員開銷。

2012 年5 月，Etu 知意圖正式在北京發布了基于Hadoop 的Etu Appliance 知意圖大數據一體機。同年10 月，又針對電子商務的行業特征推出具有針對性的解決方案知意圖精準推薦系統 Etu Recommender。標志著Etu 知意圖以Etu Appliance 知意圖大數據一體機為數據處理平臺為基礎，支撐多種行業應用的“一橫多縱”產品走向初步建立。

大數據起源于互聯網，因而使用大數據的人才大多也扎根互聯網。為了改善“人才瓶頸就是技術瓶頸”的現狀，Etu 知意圖為了更好的幫助中國用戶實現 Hadoop 大數據處理與分析價值，特別在北京建立了 Hadoop 開發原廠團隊和技術支持團隊，Etu 知意圖大數據一體機降低 Hadoop 采用上的系統門檻，幫助企業跨越大數據處理基礎架構的障礙。Etu 知意圖清楚的知道 Hadoop 等技術是實現大數據的技術手段，讓企業發現數據背后的價值，集中精力透過數據尋找新的商業機會上才是大數據的核心意義。（文章來源：CDA數據分析師）