近日，據(jù)國(guó)外媒體報(bào)道，EMC旗下的Greenplum部門專注于數(shù)據(jù)分析軟件的開發(fā)，Kaggle則是一家專注于統(tǒng)計(jì)歸納人才發(fā)現(xiàn)和部署的公司。二者如今展開了合作，力圖打造一個(gè)大數(shù)據(jù)工程師市場(chǎng)。這樣，一家沒有全職數(shù)據(jù)科學(xué)家的企業(yè)如今也可以把數(shù)據(jù)分析的工作眾包出去。
Kaggle會(huì)舉辦全球范圍的數(shù)據(jù)科學(xué)家競(jìng)賽活動(dòng)。Greenplum的客戶可以通過一款叫做Chorus的產(chǎn)品來搜索和查看這些參賽者的個(gè)人檔案。然后，各企業(yè)可以挑選出合適的數(shù)據(jù)分析師，按小時(shí)支付酬勞為自己的企業(yè)解決數(shù)據(jù)問題。
Kaggle數(shù)據(jù)競(jìng)賽主題覆蓋面很廣，從宇宙暗物質(zhì)發(fā)現(xiàn)到債券價(jià)格預(yù)測(cè)都有。除了解決特定的數(shù)據(jù)問題之外，Kaggle還能甄選出那些擅長(zhǎng)解決問題的人。然后Kaggle針對(duì)一些大公司舉辦一些數(shù)據(jù)競(jìng)賽，然后挑選出最為優(yōu)秀的數(shù)據(jù)人才進(jìn)行簽約。Kaggle會(huì)收取一定的費(fèi)用。
目前為止，Kaggle的注冊(cè)參賽者達(dá)55000人次，任何參賽者都可注冊(cè)受雇于Greenplum客戶的項(xiàng)目。由于本周二才剛發(fā)布，因此目前還不清楚多少人想要參與此項(xiàng)目。
Kaggle CEO安東尼－古德魯姆（Anthony Goldbloom）表示，“這種方式既能幫助企業(yè)解決問題，又能為數(shù)據(jù)師們找到雇主。此外，對(duì)我們的業(yè)務(wù)也有好處�，F(xiàn)在的一些參與者由熱情吸引而來。如果還能夠幫他們賺取一定金錢，將會(huì)吸引更多的人參與進(jìn)來。”
Kaggle會(huì)為一些大型項(xiàng)目舉辦私下的競(jìng)賽。古德魯姆期待Greenplum客戶需求能夠簡(jiǎn)單一點(diǎn)。比如保險(xiǎn)公司通常會(huì)尋求改善職工獎(jiǎng)金系統(tǒng)的方法。針對(duì)特定項(xiàng)目舉辦競(jìng)賽，Kaggle會(huì)收取每小時(shí)300美元到500美元不等的費(fèi)用和一定的傭金。
Greenplum聯(lián)合創(chuàng)始人兼高級(jí)產(chǎn)品副總裁Scott Yara表示，公司目前已經(jīng)有25名專職數(shù)據(jù)科學(xué)家，但是還遠(yuǎn)遠(yuǎn)不夠。“市場(chǎng)空缺很難填補(bǔ)。即使是世界上最大的公司也有很大的數(shù)據(jù)人才需求。”
Greenplum和Kaggle此次的合作可能是應(yīng)對(duì)市場(chǎng)上數(shù)據(jù)科學(xué)家短缺的一種解決方法。去年，麥肯錫全球研究院(Mckinsey Global Institute)指出，由于企業(yè)搜集的大數(shù)據(jù)正在以爆炸式的速度增長(zhǎng)，美國(guó)市場(chǎng)對(duì)于熟練數(shù)據(jù)分析師的需求量達(dá)19萬人，而對(duì)精通數(shù)據(jù)的管理人才需求量則達(dá)到150萬人。
還有一些其他的大數(shù)據(jù)解決方案，包括打造基于算法和更好用戶界面的交易平臺(tái)市場(chǎng)來進(jìn)行數(shù)據(jù)自動(dòng)化流程處理。目前，在一些大公司和小型創(chuàng)業(yè)公司中這兩種方式都有所使用。
