亞馬遜11月發(fā)布的數(shù)據(jù)流服務 Kinesis 終于向公眾開放了。
眼下隨著越來越多的公司從傳統(tǒng)批處理轉(zhuǎn)移到更加智能的云計算，數(shù)據(jù)流服務也開始變得越來越流行。和傳統(tǒng)服務相比，數(shù)據(jù)流服務更快速，更便捷。它可以實時處理數(shù)據(jù)，而不是向過去一樣花幾分鐘甚至幾小時來等待批量處理程序收集和處理全部內(nèi)容。
過去 Storm 是處理此數(shù)據(jù)流任務的上佳工具。2011 年收購 Backtype 時，Twitter “順便”將 Storm 創(chuàng)始人南森·馬茨（Nathan Marz）收入麾下。Storm 可以讓 Twitter 時間線保持實時更新，另外還能讓用戶追蹤突發(fā)事件。但它在完成長期趨勢分析以及訓練搜索引擎模塊時，卻需要依賴其它工具。
與 Storm 一樣，Kinesis 也可以在把數(shù)據(jù)傳遞到另一數(shù)據(jù)庫之前，完成對這些內(nèi)容的實時處理。但不同的是，Kinesis 可以通過軟件套件處理超過 24 小時的數(shù)據(jù)，每小時自動分析的數(shù)據(jù)量高達幾百 TB。此外，Kinesis 還加入了針對 Storm 的數(shù)據(jù)移植接口，AWS 數(shù)據(jù)科學部門總經(jīng)理馬特·伍德（Matt Wood）解釋說，此步設置是為了兼顧部分用戶在使用 Kinesis 收集數(shù)據(jù)時，希望能繼續(xù)使用 Storm 來處理數(shù)據(jù)的要求。
SDK 是 Kinesis 的主要內(nèi)容，畢竟歸根結(jié)底，Kinesis 是用來“打開創(chuàng)建更多敏捷性應用的機會”。首批接入 Kinesis 數(shù)據(jù)流服務的用戶包括移動游戲開發(fā)商 Supercell 和營銷服務平臺 Bizo。前者主要通過 Kinesis 生成具有實時數(shù)據(jù)流的主控板，后者主要用 Kinesis 接管此前需要大量人工服務的數(shù)據(jù)管道管理工作。
迄今為止，AWS 是唯一提供類似服務的提供商。其它云計算服務商想要阻止用戶繼續(xù)選擇 AWS 的話，顯然需要拿出更加豐富的內(nèi)容，而不僅僅是 Hadoop 服務。
