谷歌云為拜耳作物科學(xué)將Kubernetes引擎擴(kuò)展到15000個(gè)節(jié)點(diǎn)

谷歌云今天發(fā)布的一項(xiàng)新的案例研究顯示，這家科技巨頭的云部門，特別是它的谷歌Kubernetes引擎，可以迅速擴(kuò)大規(guī)模，以滿足密集的數(shù)據(jù)處理需求。

該案例涉及到拜耳作物科學(xué)數(shù)據(jù)科學(xué)家，他們需要大量的數(shù)據(jù)處理能力來處理基因型數(shù)據(jù)，以決定向客戶提供哪些產(chǎn)品——在這個(gè)案例中是種子。數(shù)據(jù)處理之前是在BCS決定切換到谷歌云的前提下完成的。

通過與BCS的數(shù)據(jù)科學(xué)家合作，谷歌能夠?qū)KE提升到15000個(gè)節(jié)點(diǎn)——是開源Kubernetes所支持節(jié)點(diǎn)的三倍——以提供更好的數(shù)據(jù)處理能力。至少對(duì)BCS來說，結(jié)果是顯著的，它允許該公司在四天內(nèi)處理完整個(gè)數(shù)據(jù)集，而以前需要兩周的時(shí)間。

在案例研究中,Maciek Ro?acki,產(chǎn)品經(jīng)理在谷歌云,解釋說,可伸縮性是一個(gè)核心的產(chǎn)品要求。隨著越來越多的企業(yè)采用GKE，公司一直在努力推動(dòng)GKE集群的極限，使其超越支持的極限。

據(jù)稱，額外的規(guī)模對(duì)運(yùn)營(yíng)大型互聯(lián)網(wǎng)服務(wù)的公司有利。其好處包括簡(jiǎn)化基礎(chǔ)設(shè)施管理，特別是對(duì)于批處理，縮短數(shù)據(jù)處理時(shí)間，以及吸收資源需求的大幅增長(zhǎng)。

“這15000 -節(jié)點(diǎn)的成就更重要的,當(dāng)你考慮到IT系統(tǒng)的可伸縮性不僅僅是它支持多少個(gè)節(jié)點(diǎn),“Ro?acki說?！耙粋€(gè)可擴(kuò)展的系統(tǒng)需要能夠使用大量的資源，并仍然滿足其目的?！?/p>

使GKE用戶運(yùn)行的工作負(fù)載需要超過5000在一個(gè)集群節(jié)點(diǎn),Ro?acki解釋說,Googleengaged一群設(shè)計(jì)合作伙伴為一個(gè)封閉的早期訪問計(jì)劃。

“由于其掌握的15000個(gè)節(jié)點(diǎn),BCS也節(jié)省了大量的時(shí)間,“Ro?acki補(bǔ)充道。在15000個(gè)節(jié)點(diǎn)上有240,000個(gè)cpu, BCS每小時(shí)可以處理約15,000,000,000個(gè)基因型。這給BCS提供了進(jìn)行模型修訂、快速再處理整個(gè)數(shù)據(jù)積壓或快速添加基于新數(shù)據(jù)集的推斷的靈活性，因此他們的數(shù)據(jù)科學(xué)家可以繼續(xù)工作，而不是等待批作業(yè)完成?！?/p>