首頁 > 新聞 > 國內(nèi) >

青云QingCloud推Hadoop集群服務(wù)完善大數(shù)據(jù)平臺

2015-12-22 14:24:17   作者:   來源:CTI論壇   評論:0  點(diǎn)擊:


  CTI論壇(ctiforum)12月22日消息(記者李文杰):企業(yè)級基礎(chǔ)云服務(wù)商青云QingCloud日前宣布,基于Hadoop的大數(shù)據(jù)集群服務(wù)現(xiàn)已正式推出。該服務(wù)包括三大核心組件,即HDFS分布式文件系統(tǒng)、YARN任務(wù)調(diào)度和集群資源管理系統(tǒng),以及MapReduce并行計(jì)算系統(tǒng)。通過QingCloudHadoop集群服務(wù),用戶能夠在2-3分鐘內(nèi)創(chuàng)建一個Hadoop集群,并且可以進(jìn)行橫向和縱向的在線伸縮,極大地降低了Hadoop平臺的技術(shù)門檻。
  青云QingCloud推出Hadoop集群服務(wù)
  Hadoop是一個針對海量大數(shù)據(jù)進(jìn)行存儲和處理的分布式開源平臺,在大數(shù)據(jù)領(lǐng)域的應(yīng)用極為廣泛。它使用簡潔的MapReduce編程模型分布式處理跨集群的大型數(shù)據(jù)集,集群規(guī)?梢詳U(kuò)展到幾千甚至上萬。QingCloudHadoop集群服務(wù)采用Master/Slave架構(gòu),由三種節(jié)點(diǎn)類型構(gòu)成,即主節(jié)點(diǎn)(YARNResourceManager和HDFSNameNode)、從節(jié)點(diǎn)(YARNNodeManager和HDFSDataNode),以及客戶端節(jié)點(diǎn)(HadoopClientNode)。用戶在客戶端節(jié)點(diǎn)發(fā)起MapReduce任務(wù),通過與HDFS和YARN集群中各節(jié)點(diǎn)的交互存取文件、執(zhí)行MapReduce任務(wù),最終獲取結(jié)果。
  青云QingCloudHadoop集群架構(gòu)圖
  早在2015年8月,青云QingCloud就已推出基于Spark的大數(shù)據(jù)集群服務(wù),此次Hadoop集群服務(wù)的上線是對QingCloud大數(shù)據(jù)基礎(chǔ)平臺的有力補(bǔ)充。Hadoop和Spark各有千秋,Hadoop適用于更大規(guī)模的離線數(shù)據(jù)處理,且對系統(tǒng)故障具備天然的抵抗力;Spark更適合做快速的實(shí)時數(shù)據(jù)分析。因此,用戶可以根據(jù)應(yīng)用場景的不同,選擇靈活的大數(shù)據(jù)解決方案。
  具體而言,青云QingCloudHadoop集群服務(wù)具有以下特性:
  • 一鍵部署:用戶只需要簡單的幾步操作就能夠在2-3分鐘內(nèi)創(chuàng)建出一個Hadoop集群,幫助用戶降低Hadoop的技術(shù)門檻和開發(fā)成本,快速地利用Hadoop展開數(shù)據(jù)分析工作。
  • 簡化運(yùn)維:大數(shù)據(jù)平臺尤其是Hadoop的運(yùn)維非常繁瑣,QingCloud為用戶提供了便捷的運(yùn)維工具和圖形化操作,極大地簡化了Hadoop集群的運(yùn)維和管理工作。
  • 在線伸縮:Hadoop集群服務(wù)支持橫向和縱向在線伸縮,以滿足用戶對計(jì)算能力和容量的需求。用戶可以選擇新增或者刪除節(jié)點(diǎn)進(jìn)行橫向伸縮,也可以根據(jù)節(jié)點(diǎn)的監(jiān)測數(shù)據(jù)隨時調(diào)整各個節(jié)點(diǎn)的配置。
  • 監(jiān)控告警:QingCloud針對HDFS、YARN和MapReduce提供了豐富的監(jiān)控信息,還為每個節(jié)點(diǎn)資源提供了監(jiān)控告警服務(wù),包括CPU使用率、內(nèi)存使用率、硬盤使用率等,以幫助用戶更好地管理和維護(hù)Hadoop集群。
  • 安全性:Hadoop集群運(yùn)行于100%二層隔離的私有網(wǎng)絡(luò)內(nèi),結(jié)合QingCloud提供的高性能硬盤,在保障高性能的同時兼顧用戶的數(shù)據(jù)安全。
  青云QingCloudCTO甘泉(RenoGan)表示,Hadoop集群服務(wù)的推出標(biāo)志著QingCloud大數(shù)據(jù)基礎(chǔ)平臺的進(jìn)一步完善,結(jié)合已經(jīng)推出的Spark、ZooKeeper、消息隊(duì)列(Kafka)、Redis、Memcached、MongoDB等服務(wù),QingCloud的大數(shù)據(jù)平臺服務(wù)已經(jīng)能夠越來越靈活地滿足用戶的各種需求,實(shí)現(xiàn)用戶數(shù)據(jù)價值的最大化。
  關(guān)于青云QingCloud
  青云QingCloud是全球首家實(shí)現(xiàn)資源秒級響應(yīng)并按秒計(jì)量的基礎(chǔ)云服務(wù)商,致力于為企業(yè)用戶提供安全可靠、性能卓越、按需、實(shí)時的IT資源交付平臺。其產(chǎn)品包含完整的IaaS層組件、PaaS/Orchestration層服務(wù)及超融合硬件設(shè)備。
  QingCloud提供全維度的存儲服務(wù),采用分布式塊存儲系統(tǒng)確保高性能I/O,部署實(shí)時異地副本保障數(shù)據(jù)安全,通過云端SDN實(shí)現(xiàn)靈活易用的專享私有云服務(wù)(VPC),提供塊設(shè)備級的備份與恢復(fù),設(shè)計(jì)實(shí)時P2P機(jī)器人社區(qū)協(xié)作確保故障無害,支持全透明代理模式的負(fù)載均衡器,并基于自身IaaS平臺構(gòu)建的數(shù)據(jù)庫、大數(shù)據(jù)平臺等服務(wù)。QingCloud無限開放全部功能API,并致力于同眾多領(lǐng)域的合作伙伴共同打造開放、健全、專業(yè)、共贏的云生態(tài)。
  在為逾40,000家企業(yè)提供公有云服務(wù)的同時,QingCloud面向中、大型政企用戶提供包含軟件定義的智能云平臺、超融合設(shè)備及桌面云等產(chǎn)品與服務(wù)的云計(jì)算整體解決方案,幫助企業(yè)用戶構(gòu)建和運(yùn)維更加可靠、敏捷、有效的IT基礎(chǔ)資源調(diào)度平臺,有效降低總擁有成本和運(yùn)維投入。目前已幫助包括中國銀行、招商銀行在內(nèi)的眾多大型企業(yè)完成了企業(yè)云平臺的構(gòu)建與實(shí)施。因其全球領(lǐng)先的技術(shù)水平、卓越的產(chǎn)品表現(xiàn)和成熟的企業(yè)云解決方案,QingCloud榮獲工信部“2014-2015云計(jì)算優(yōu)秀解決方案/產(chǎn)品獎”、“2014-2015年度推動中國云計(jì)算行業(yè)發(fā)展突出貢獻(xiàn)單位獎”,榮膺2015年Gartner“CoolVendor”,并被Forrester評為2015年中國公有云“StrongPerformer”。
分享到: 收藏

專題