亞馬遜網(wǎng)絡(luò)服務(wù)的maian Tomsen Bukovec正在為一個(gè)數(shù)據(jù)永遠(yuǎn)存在的未來(lái)做準(zhǔn)備

從管理硬件的負(fù)擔(dān)中解脫出來(lái)是公司將其技術(shù)基礎(chǔ)設(shè)施轉(zhuǎn)移到云計(jì)算的主要原因之一。但是，既然計(jì)算和存儲(chǔ)是分別購(gòu)買(mǎi)和管理的，那么消除這一負(fù)擔(dān)也開(kāi)啟了新的可能性。

Amazon Web Services S3數(shù)據(jù)存儲(chǔ)服務(wù)副總裁兼總經(jīng)理Mai-Lan Tomsen Bukovec上周在貝爾維烏舉行的2019年GeekWire云峰會(huì)上說(shuō)，這是向云計(jì)算的轉(zhuǎn)變帶來(lái)的最激動(dòng)人心的發(fā)展之一。獨(dú)立擴(kuò)展計(jì)算和存儲(chǔ)的能力，而不是每年為自己的數(shù)據(jù)中心購(gòu)買(mǎi)更大、更強(qiáng)大的盒子，即使你只需要升級(jí)其中的一個(gè)，允許公司更仔細(xì)地花錢(qián)，并圍繞這一現(xiàn)實(shí)設(shè)計(jì)新的應(yīng)用程序。

但是，新接觸云的公司通常需要幫助了解如何利用這種自由，他們也需要幫助了解如何管理他們的數(shù)據(jù)在云上的安全性。與所有云公司一樣，AWS在安全方面使用“共享責(zé)任”模型，這意味著客戶需要確保他們使用S3等存儲(chǔ)服務(wù)提供的安全工具。

我們?cè)跁?huì)議期間討論了這些主題和更多內(nèi)容，這是云峰會(huì)上美好一天的一部分。下面是我們對(duì)話的文字記錄，稍作編輯。

GeekWire云和企業(yè)編輯湯姆Krazit:宣布微軟后(約其女性在云計(jì)劃),我在想如果你能談?wù)勅绾卧谠朴?jì)算和女性的機(jī)會(huì)科技行業(yè)一般來(lái)說(shuō),改變了對(duì)時(shí)間你一直在這個(gè)行業(yè)工作。還有什么需要做的?

邁蘭·托姆森·布科維茨:我認(rèn)為我們?cè)谂钥萍碱I(lǐng)域已經(jīng)取得了一些進(jìn)步，主要是在教育方面，湯姆。如果你想想本科生和研究生的計(jì)算機(jī)科學(xué)畢業(yè)班，現(xiàn)在許多主要的技術(shù)學(xué)院的畢業(yè)班大約有一半是女性。

卡內(nèi)基梅隆大學(xué):非常棒的大學(xué)，而且他們有非常棒的科技項(xiàng)目。她們的畢業(yè)率穩(wěn)定在50%甚至更高。所以，如果我想想我們?cè)诮逃矫嫠〉玫倪M(jìn)步，那真是太了不起了。如果我想一下我們?cè)诟咧薪逃统踔薪逃先〉玫倪M(jìn)步，其實(shí)也很不錯(cuò)。對(duì)STEM活動(dòng)的大量關(guān)注已經(jīng)產(chǎn)生了很大的影響。

AWS也認(rèn)識(shí)到了這一點(diǎn)。我們有一個(gè)名為AWS教育的項(xiàng)目，在世界各地舉辦14歲以上的活動(dòng)。我們要么與韓國(guó)的一所女子技術(shù)大學(xué)合作，要么與菲律賓的年輕人合作，舉辦黑客松活動(dòng)，舉辦競(jìng)賽，開(kāi)展各種云技能教育。因?yàn)槲覀冎?，為了改變?nèi)丝诮Y(jié)構(gòu)，為了增加技術(shù)勞動(dòng)力的多樣性，你必須盡早開(kāi)始。你必須從中學(xué)開(kāi)始，然后再繼續(xù)。

湯姆，我認(rèn)為，作為一個(gè)行業(yè)，我們真正需要做得更好的地方，是那些女性在開(kāi)始組建家庭時(shí)經(jīng)歷的轉(zhuǎn)變，例如。我們讓這些女性直接從學(xué)校畢業(yè)，因?yàn)閷W(xué)校在爭(zhēng)取平等方面做得很好。

但當(dāng)他們有了第一個(gè)孩子，我們這個(gè)行業(yè)如何更歡迎新父母?我說(shuō)的不只是女人。我也說(shuō)男人。對(duì)我來(lái)說(shuō)，這又回到了這個(gè)房間里每個(gè)人的行為，你和我。

當(dāng)我們回來(lái)看到有人休完陪產(chǎn)假或產(chǎn)假回來(lái)他們沒(méi)有得到足夠的睡眠，他們回到工作中他們想要擺脫困境?一個(gè)簡(jiǎn)單的動(dòng)作，比如“歡迎回來(lái)”，就能起到很大的作用。

很多都是文化上的。根據(jù)我在亞馬遜的經(jīng)驗(yàn)，我們當(dāng)然相信這一點(diǎn)，但在場(chǎng)的每一個(gè)人都可以幫助建立這樣一種文化，不僅歡迎新媽媽，也歡迎新父母重返工作崗位。幫助他們度過(guò)我們認(rèn)為的生命過(guò)渡階段。

Tom Krazit:是的，我認(rèn)為這也會(huì)促進(jìn)整個(gè)科技行業(yè)的發(fā)展。

我想是的。

湯姆·克拉茲特:讓我們來(lái)談?wù)劷裉斓脑掝}。凱文(斯科特，微軟首席技術(shù)官)在他的演講中提到了這一點(diǎn)，但是他談到了與10年前相比，現(xiàn)在生成的海量數(shù)據(jù)。我昨晚查了一個(gè)估計(jì)，到2020年，地球上所有人將產(chǎn)生44兆字節(jié)的數(shù)據(jù)。在座的各位，如果沒(méi)有幫助，像我一樣數(shù)不過(guò)來(lái)的人，一澤字節(jié)是一萬(wàn)億字節(jié)。我做對(duì)了嗎?(Mai-Lan點(diǎn)點(diǎn)頭。)

好吧。這些數(shù)據(jù)從何而來(lái)，我們將如何處理?

是的，我認(rèn)為這是令人驚奇的觀看。真的，我認(rèn)為我們所看到的數(shù)據(jù)的增長(zhǎng)和爆炸是由數(shù)據(jù)來(lái)源的爆炸所驅(qū)動(dòng)的。

你有物聯(lián)網(wǎng)傳感器:約翰迪爾(John Deere)的拖拉機(jī)正在把有關(guān)田間情況的物聯(lián)網(wǎng)數(shù)據(jù)發(fā)回云端，存儲(chǔ)在S3中，然后在此基礎(chǔ)上運(yùn)行分析。你有人類(lèi)基因組測(cè)序，這是一個(gè)非常有趣的領(lǐng)域，(而且)由于云存儲(chǔ)的成本，它正在爆炸。

例如，在S3中，我們有一個(gè)客戶，HLI，它是人類(lèi)壽命公司，他們的任務(wù)是測(cè)序100萬(wàn)個(gè)人類(lèi)基因組?，F(xiàn)在一個(gè)基因組有了所有你需要建立和維持一個(gè)有機(jī)體的信息。如果你對(duì)人類(lèi)基因組進(jìn)行排序，那就是100g的數(shù)據(jù)。這是原始數(shù)據(jù)，沒(méi)有注釋，沒(méi)有顯型來(lái)源，沒(méi)有類(lèi)似的東西。如果你只是從每個(gè)人類(lèi)基因組100g的數(shù)據(jù)開(kāi)始，你從那里開(kāi)始，你可以看到像醫(yī)學(xué)研究和基因組測(cè)序本身是如何推動(dòng)你所談?wù)摰囊恍w積。

但自動(dòng)駕駛汽車(chē)的名單還在繼續(xù)。每次自動(dòng)駕駛汽車(chē)回來(lái)停車(chē)時(shí)，都會(huì)上傳大量的數(shù)據(jù)。這些數(shù)據(jù)對(duì)于安全，分析，以及各種各樣的事情都是必要和重要的。說(shuō)實(shí)話，我想我們才剛剛開(kāi)始，湯姆。我們談?wù)摰氖菙?shù)據(jù)爆炸，你們談?wù)摰臄?shù)字。但實(shí)際上，隨著這些數(shù)據(jù)來(lái)源的增加，不僅是在美國(guó)或歐洲，而且是在整個(gè)東南亞和東亞，并走向全球，這是一個(gè)驚人的數(shù)據(jù)量。

湯姆·克拉茲特:人們是如何改變處理這些數(shù)據(jù)的方式的?我的意思是，我們不只是把這些(數(shù)據(jù))扔到磁帶驅(qū)動(dòng)器上，然后把它扔到某個(gè)地方的壁櫥里，然后再把它忘掉。我的意思是，與你的數(shù)據(jù)有更積極的關(guān)系。根據(jù)您的經(jīng)驗(yàn)，當(dāng)人們?cè)跇I(yè)務(wù)中生成越來(lái)越多的數(shù)據(jù)時(shí)，他們希望做什么?

邁蘭·托姆森·布科維茨:我認(rèn)為我們現(xiàn)在看到了一些非常有趣的趨勢(shì)。我認(rèn)為我們現(xiàn)在看到的一個(gè)趨勢(shì)是，客戶現(xiàn)在能夠，特別是像S3這樣的云技術(shù)，他們能夠分離計(jì)算和存儲(chǔ)。這是一個(gè)非?；镜母拍睢Ｒ?yàn)槿绻隳馨涯愕挠?jì)算和存儲(chǔ)分開(kāi)，你就能獨(dú)立地?cái)U(kuò)展它們。

我們現(xiàn)在討論的數(shù)據(jù)爆炸，數(shù)據(jù)爆炸可以彈性增長(zhǎng)，這是我們?yōu)镾3所做的，我們是專門(mén)為彈性尺度設(shè)計(jì)的。它可以彈性增長(zhǎng)，然后根據(jù)你今天的計(jì)算需要，不管是分析還是別的什么，你都可以構(gòu)建它。但是您可以將計(jì)算應(yīng)用程序的構(gòu)建與存儲(chǔ)本身的增長(zhǎng)分開(kāi)。

我們發(fā)現(xiàn)，顧客確實(shí)喜歡把它看作兩個(gè)不同的模型。因?yàn)榈阶詈螅麄儾恢?0年后他們要構(gòu)建的計(jì)算應(yīng)用程序會(huì)是什么樣子。但是他們想要確保有足夠的數(shù)據(jù)讓他們?nèi)プ?。機(jī)器學(xué)習(xí)就是一個(gè)很好的例子。

我們有很多客戶說(shuō)，“今天我需要分析。今天，我需要在我的數(shù)據(jù)腿上進(jìn)行某種類(lèi)型的日志潛水。但我想在一年內(nèi)學(xué)習(xí)機(jī)器學(xué)習(xí)，我需要知道我的數(shù)據(jù)在那里?！拔艺J(rèn)為計(jì)算機(jī)和存儲(chǔ)的分離是客戶想要的。

另一件事是，我們的客戶有exabyte的存儲(chǔ)空間。我們發(fā)現(xiàn)，在我們的存儲(chǔ)系統(tǒng)中建立能力是非常重要的，它能讓你同樣輕松地管理1tb或1tb的存儲(chǔ)。因此，當(dāng)數(shù)據(jù)爆炸時(shí)，你如何確保你的能力的簡(jiǎn)單性在進(jìn)化，這樣數(shù)據(jù)的增長(zhǎng)并不意味著管理它的額外復(fù)雜性?

Tom Krazit:是什么使計(jì)算和數(shù)據(jù)分離?這是怎么發(fā)生的?

答:嗯，我認(rèn)為云的本質(zhì)就是這個(gè)想法……當(dāng)然，對(duì)于AWS來(lái)說(shuō)，當(dāng)我們想到它時(shí)，我們想到的是專門(mén)構(gòu)建的系統(tǒng)。我們現(xiàn)在有超過(guò)140種不同的服務(wù)。的一件事,我們發(fā)現(xiàn),當(dāng)我們建立一個(gè)特定的服務(wù),擅長(zhǎng)的東西- S3是擅長(zhǎng)存儲(chǔ)數(shù)據(jù)的表的股權(quán),這是安全、耐用性、可用性、可靠性和性能,這是一個(gè)持續(xù)發(fā)展的核心競(jìng)爭(zhēng)力。

我認(rèn)為，客戶發(fā)現(xiàn)他們也有自己的核心競(jìng)爭(zhēng)力。當(dāng)他們能夠?qū)⒋鎯?chǔ)的增長(zhǎng)與他們?cè)谟?jì)算方面的業(yè)務(wù)邏輯分離開(kāi)來(lái)時(shí)，他們就能夠更快地迭代，更快地創(chuàng)新，也能夠進(jìn)行實(shí)驗(yàn)，這是AWS的核心。他們能夠嘗試新事物，并在一個(gè)行業(yè)中真正成名。

我們有很多這樣的例子。Airbnb在旅游方面，有很多這樣的網(wǎng)站。但真正的核心是這種分離讓公司做他們想做的事，即創(chuàng)新未來(lái)的新模式，使他們?cè)谧约旱念I(lǐng)域成為長(zhǎng)期的業(yè)務(wù)。

湯姆·克拉茲特:人們想用我們今天無(wú)法做到的數(shù)據(jù)做什么?我想，如果客戶想用他們的數(shù)據(jù)做一些事情，但是沒(méi)有技術(shù)，或者業(yè)務(wù)模型不正確，他們會(huì)有什么要求呢?你發(fā)現(xiàn)了什么?

maio - lan Tomsen Bukovec:我們很少聽(tīng)到客戶不能用他們的數(shù)據(jù)做什么。我想我們聽(tīng)到的是很多客戶來(lái)找我們，他們說(shuō)，“我想用我的數(shù)據(jù)做這件事?！?/p>

當(dāng)我們想到這一點(diǎn)時(shí)，你可能聽(tīng)說(shuō)過(guò)，顧客至上是我們的基因。

湯姆:我聽(tīng)說(shuō)了。

我給你舉個(gè)例子。數(shù)字地球收集并提供衛(wèi)星圖像。數(shù)字地球幾年前就出現(xiàn)了。他們說(shuō)，看，我有18年的衛(wèi)星圖像檔案，有100拍字節(jié)。我不想構(gòu)建一個(gè)將所有數(shù)據(jù)上傳到S3的應(yīng)用程序，我該怎么辦?”

所以我們?cè)炝搜┑啬ν?，我們?cè)炝艘惠v卡車(chē)，一輛數(shù)據(jù)卡車(chē)，如果你愿意的話。數(shù)據(jù)車(chē)，數(shù)據(jù)車(chē)的第一批客戶之一，數(shù)字地球有一個(gè)很好的博客和圖片。我們開(kāi)車(chē)到數(shù)字地球的數(shù)據(jù)中心，把卡車(chē)連接起來(lái)，我們把他們需要的所有數(shù)據(jù)放到卡車(chē)上，然后我們把數(shù)據(jù)帶到他們真正想要的AWS地區(qū)。

這種想法或模式在存儲(chǔ)、計(jì)算、數(shù)據(jù)庫(kù)或機(jī)器學(xué)習(xí)中不斷重復(fù)?？蛻魰?huì)來(lái)找我們說(shuō)，“我想做這個(gè)。我們?cè)趺醋瞿?“真正有趣的事情之一是，你已經(jīng)看到了，在云端工作，現(xiàn)在可能性的精神非常強(qiáng)大。原因是所有這些技術(shù)都在飛速發(fā)展，只要你用心去做，你幾乎可以做任何你想做的事情，你可以為它建立專門(mén)的應(yīng)用程序。

湯姆·克拉茲特:如果人們想把他們的數(shù)據(jù)轉(zhuǎn)移到另一個(gè)地方，你會(huì)把那輛卡車(chē)開(kāi)到你的數(shù)據(jù)中心嗎?

邁蘭·托姆森·布科維茨:我們現(xiàn)在沒(méi)有。

湯姆:也許有一天。讓我們來(lái)談?wù)劥鎯?chǔ)桶，因?yàn)槲矣X(jué)得這是我聽(tīng)到人們談?wù)揝3時(shí)經(jīng)常提到的一件事。你們大多數(shù)人可能都見(jiàn)過(guò)這樣的故事，不幸的或疏忽的人把他們的存儲(chǔ)桶放在S3上，在互聯(lián)網(wǎng)上發(fā)現(xiàn)，導(dǎo)致客戶數(shù)據(jù)或個(gè)人數(shù)據(jù)被破壞。我知道AWS已經(jīng)做了很多來(lái)幫助人們處理這個(gè)問(wèn)題，但是它還在繼續(xù)發(fā)生。首先，為什么人們總是把桶開(kāi)著?你還能做些什么來(lái)幫助他們呢?

邁蘭·托姆森·布科維茨:我認(rèn)為這是一個(gè)艱難的情況下的客戶，當(dāng)他們進(jìn)入那個(gè)位置。我覺(jué)得如果你思考一下我們的安全模型，當(dāng)我們?cè)O(shè)計(jì)的時(shí)候，我們從頭開(kāi)始設(shè)計(jì)安全。我們?cè)诠蚕碡?zé)任模型中操作，AWS負(fù)責(zé)主機(jī)操作系統(tǒng)和虛擬化層，一直到數(shù)據(jù)中心的物理資產(chǎn)?？蛻糌?fù)責(zé)使用工具并應(yīng)用適合其應(yīng)用程序的權(quán)限。

因此，當(dāng)我們?cè)?3年前創(chuàng)建S3時(shí)，我們開(kāi)始并繼續(xù)維護(hù)當(dāng)您第一次創(chuàng)建bucket時(shí)，它被鎖定為只有該帳戶的所有者。今天這是真的。你去建一個(gè)桶，唯一能進(jìn)去的人就是你自己。

隨著時(shí)間的推移，會(huì)發(fā)生的情況是，客戶讓其他人進(jìn)來(lái)，可能會(huì)修改權(quán)限。有時(shí)他們會(huì)修改權(quán)限，把權(quán)限放在別人可以做你說(shuō)的地方。雖然我們知道這是一個(gè)共同的責(zé)任模式，但我們也在做很多事情來(lái)幫助客戶。

例如，去年年底我們構(gòu)建了一個(gè)稱為塊公共訪問(wèn)的功能。我們建立這個(gè)的原因是我們希望每個(gè)人，每個(gè)人除了那些做基于網(wǎng)絡(luò)的資產(chǎn)的人他們需要為他們的應(yīng)用程序，每個(gè)人都應(yīng)該使用block公共訪問(wèn)。每一個(gè)人。這樣做的原因是，當(dāng)您將塊公共訪問(wèn)放在帳戶級(jí)別時(shí)，您現(xiàn)在和將來(lái)都將鎖定該帳戶中每個(gè)S3資源、對(duì)象和bucket的所有公共訪問(wèn)。

這是非常強(qiáng)大的。這是任何云存儲(chǔ)中惟一允許您這樣做的功能。這是未來(lái)的打樣。這意味著在該帳戶所有權(quán)下創(chuàng)建的任何bucket或?qū)ο蠖疾粫?huì)具有公共訪問(wèn)權(quán)限。

這是我們?cè)赟3中構(gòu)建的一種幫助客戶的功能。這是一個(gè)控制。但我們也有像CloudTrail這樣的服務(wù)，它可以監(jiān)控訪問(wèn)。我們還有Amazon Macie，這是一個(gè)機(jī)器學(xué)習(xí)驅(qū)動(dòng)的服務(wù)，可以查找個(gè)人身份信息或知識(shí)產(chǎn)權(quán)。我們?cè)谫Y源層為S3建立了整個(gè)生態(tài)系統(tǒng)，并提供其他服務(wù)，以幫助客戶使用它。但是在一天結(jié)束時(shí)，應(yīng)用程序開(kāi)發(fā)人員必須了解權(quán)限并為其應(yīng)用程序適當(dāng)?shù)貞?yīng)用它們。

湯姆·克拉茲特:為什么人們總是讓這些桶開(kāi)著?需要這種訪問(wèn)的應(yīng)用程序類(lèi)型或業(yè)務(wù)類(lèi)型是什么?

maio - lan Tomsen Bukovec:嗯，剛開(kāi)始的時(shí)候，我們出去和很多客戶談過(guò)。因?yàn)槲覀冋f(shuō)，“看，我們有所有這些能力來(lái)控制你的權(quán)限。這是怎么回事?“我們發(fā)現(xiàn)了一些東西。

一個(gè)是我們發(fā)現(xiàn)，隨著越來(lái)越多的公司采用云存儲(chǔ)，存儲(chǔ)桶的所有權(quán)開(kāi)始在不同的組之間共享。有人可能會(huì)想到暫時(shí)開(kāi)放bucket權(quán)限來(lái)交換文件，來(lái)回共享文件。當(dāng)我們聽(tīng)到這個(gè)消息時(shí)，我們構(gòu)建了SFTP。是的,這是真的。這是一個(gè)老的，但好吃。至少是SFTP。我們建立了一整套服務(wù)，致力于幫助客戶更安全地傳輸文件。那是我們?nèi)ツ昊蚯澳晖瞥龅?，非常受歡迎。

所以文件交換是一個(gè)原因。然后人們有時(shí)會(huì)忘記更改它的權(quán)限。另一個(gè)是，可能你會(huì)有一個(gè)承包商或者其他不屬于公司的人進(jìn)來(lái)可能他們不理解許可模式。這是我們建立block public access的主要原因之一，因?yàn)槲覀冋J(rèn)為它是一種控制。如果它是你的bucket和storage，不管誰(shuí)在上面工作，你都要應(yīng)用一個(gè)控件。

因此，我們將繼續(xù)沿著構(gòu)建更多控件的道路前進(jìn)，就像我們構(gòu)建審計(jì)服務(wù)，如CloudTrail，或分析服務(wù)，如Macie。但是在一天結(jié)束的時(shí)候，很多問(wèn)題又回到了客戶對(duì)“我想要的數(shù)據(jù)安全性是什么，它是否合適?”的理解上。

湯姆·克拉茲特:感覺(jué)這一切都源于移民。剛接觸云計(jì)算的人不一定了解最佳操作方式或最安全的操作方式。但是，隨著越來(lái)越多的不熟悉云的公司遷移到it，您在考慮哪些事情來(lái)幫助他們進(jìn)行遷移并保持?jǐn)?shù)據(jù)安全呢?

mike - lan Tomsen Bukovec:對(duì)AWS來(lái)說(shuō)，安全是第一項(xiàng)工作，就像對(duì)我們所有的客戶一樣。它的工作。你問(wèn)任何一個(gè)CIO, CEO，他們都會(huì)告訴你這個(gè)。最重要的是，如果你要存儲(chǔ)客戶數(shù)據(jù)，你必須保護(hù)它。

我們已經(jīng)建立了良好的基礎(chǔ)。在S3中存儲(chǔ)數(shù)據(jù)的每個(gè)服務(wù)默認(rèn)都有加密選項(xiàng)。默認(rèn)或作為客戶的選項(xiàng)。我們將繼續(xù)在安全領(lǐng)域建立更多的服務(wù)，讓人們可以進(jìn)行這種類(lèi)型的控制。我認(rèn)為，我在與處于云之旅開(kāi)始階段的客戶打交道時(shí)看到的一件事是，我認(rèn)為非常有用的一件事是，當(dāng)您為云遷移的第一步進(jìn)行架構(gòu)時(shí)。

我將告訴你,發(fā)生的一件事是,當(dāng)一些公司的安全辦公室坐下,開(kāi)始真正學(xué)習(xí)和在AWS打破所有的安全模型,實(shí)際發(fā)生的一件事就是安全辦公室最終被云計(jì)算項(xiàng)目的冠軍。而不是擔(dān)心或反復(fù)檢查的人。

當(dāng)他們深刻理解AWS安全的深度時(shí)，它實(shí)際上會(huì)對(duì)您的云計(jì)算之旅產(chǎn)生相當(dāng)大的變革。因?yàn)樗麄兛梢栽谶w移到云的所有不同組和不同應(yīng)用程序之間設(shè)置控制。它消除了摩擦力。因?yàn)槊恳粋€(gè)不同的組都需要考慮它。

如果建立一個(gè)中心模型，因?yàn)榘踩k公室說(shuō)這是放置數(shù)據(jù)最安全的地方，就像Capital One那樣。Capital One對(duì)AWS的安全性進(jìn)行了分析，并表示:“你比我們更安全地運(yùn)行你的數(shù)據(jù)中心。所以我們把一切都?jí)涸谀闵砩?。“這是一種真正能釋放遷移速度的東西，但也消除了所有不同應(yīng)用程序之間的摩擦?！碧崆跋牒茫阉?dāng)作適用于整個(gè)公司的東西，這樣你就可以同時(shí)得到這些好處。

湯姆·克拉茲特:如果你展望存儲(chǔ)技術(shù)的未來(lái)，我覺(jué)得存儲(chǔ)技術(shù)有一點(diǎn)不好的名聲。這種進(jìn)步的方式并不一定是摩爾定律。但很明顯，你在想辦法，你在做的事情，你認(rèn)為會(huì)給未來(lái)的客戶帶來(lái)突破性的存儲(chǔ)收益。你在看什么?你認(rèn)為這些將如何實(shí)施?

maio - lan Tomsen Bukovec:嗯，我認(rèn)為有兩個(gè)部分。一個(gè)是湯姆，回到這個(gè)概念，存儲(chǔ)和計(jì)算的分離。

我們有一整套的計(jì)劃，使得在規(guī)模上管理存儲(chǔ)變得更容易，因?yàn)槲覀兛吹降氖莈xabytes和exabytes的存儲(chǔ)。我發(fā)現(xiàn)，我們考慮在那里建造什么東西的很多方式實(shí)際上都是由客戶的需求決定的。例如，客戶希望在將存儲(chǔ)從一個(gè)區(qū)域復(fù)制到另一個(gè)區(qū)域方面具有更大的靈活性。因此，您將看到更多關(guān)于復(fù)制來(lái)自AWS的任何存儲(chǔ)類(lèi)的功能。

我認(rèn)為另一個(gè)主要的創(chuàng)新領(lǐng)域是;這是你在其他云存儲(chǔ)提供商中看不到的。我認(rèn)為S3的一個(gè)特點(diǎn)是，我們已經(jīng)有13年的歷史了，我們與很多客戶合作過(guò)，我們聽(tīng)說(shuō)過(guò)很多關(guān)于他們的發(fā)展方向。就像你之前說(shuō)的，“他，我想做這個(gè)。我怎么去那兒?“我們現(xiàn)在真正創(chuàng)新的地方是將計(jì)算能力引入存儲(chǔ)領(lǐng)域。

我們?cè)诳蛻魬?yīng)用程序和客戶數(shù)據(jù)方面討論了計(jì)算和存儲(chǔ)的分離。但我們所觀察到的是，有些特定類(lèi)型的計(jì)算是客戶反復(fù)對(duì)其存儲(chǔ)進(jìn)行的。

湯姆:比如?

我給你舉個(gè)例子。幾年前，我們發(fā)現(xiàn)數(shù)據(jù)湖的很多客戶，例如，正在提取大量的存儲(chǔ)空間，數(shù)以百計(jì)的拍字節(jié)，以便過(guò)濾掉他們想要分析的數(shù)據(jù)的10%。本質(zhì)上，他們把錢(qián)花在計(jì)算集群上以進(jìn)行過(guò)濾。因此，幾年前，我們發(fā)布了一個(gè)S3 API，稱為S3 Select，這是一個(gè)本機(jī)S3 API，允許您在對(duì)象存儲(chǔ)API中使用SQL語(yǔ)句過(guò)濾對(duì)象，以(本機(jī))帶回您需要的東西。

如果你有一個(gè)Apache Parquet文件對(duì)象，你可以使用S3 API從該對(duì)象的列中拉回?cái)?shù)據(jù)。它非常強(qiáng)大。這是將計(jì)算從集群轉(zhuǎn)移到S3的一個(gè)方面。所以我們?yōu)槟阕鲇?jì)算，或者我們?yōu)槟闾崛?shù)據(jù)然后我們把它作為檢索的一部分帶回來(lái)存儲(chǔ)。

我們做這件事的另一種方式是，今年我們基本上推出了一批。我們稱之為批量操作。在S3上的批處理引擎，您可以在服務(wù)中在S3上運(yùn)行批處理作業(yè)，而不必自己支付任何計(jì)算費(fèi)用。執(zhí)行諸如設(shè)置aql、復(fù)制存儲(chǔ)或運(yùn)行Lambda函數(shù)等操作。如果您考慮到這一點(diǎn)，您將在S3上運(yùn)行Lambda函數(shù)作為S3操作的一部分。而不是自己付錢(qián)。這是非常強(qiáng)大的。

Tom Krazit:這是一件值得思考的有趣的事情。serverless會(huì)改變數(shù)據(jù)的等式嗎?如果你從函數(shù)和事件的角度來(lái)考慮serverless，我的意思是很明顯，它會(huì)生成大量的數(shù)據(jù)。這會(huì)導(dǎo)致數(shù)據(jù)存儲(chǔ)需求的指數(shù)級(jí)增長(zhǎng)嗎?

maii - lan Tomsen Bukovec:是的，我認(rèn)為serverless真正有趣的地方是，我不知道它是否對(duì)存儲(chǔ)的增長(zhǎng)有很大的影響。它對(duì)用法有很大的影響。因?yàn)閟erverless讓你做的是實(shí)驗(yàn)。它允許您構(gòu)建與業(yè)務(wù)工作流連接的應(yīng)用程序，并且允許您以您以前可能想不到的方式利用您的存儲(chǔ)。很多這樣的容器和服務(wù)器，其他形式的計(jì)算都是基于相同的數(shù)據(jù)湖原理，人們?cè)诖嘶A(chǔ)上構(gòu)建他們的下一代應(yīng)用程序。

Tom Krazit:人們?cè)赟3上使用數(shù)據(jù)的方式最讓您感到驚訝的是什么?比如，“我不敢相信A客戶會(huì)那么做。有什么事情是亞馬遜甚至沒(méi)有想到的，然后看到一個(gè)客戶想要沿著這些路線做一些事情，然后說(shuō)，“哇!”這真的很有趣?！?/p>

我覺(jué)得每天都是這樣。在AWS上工作非常有趣，因?yàn)槲覀冇羞@么多不同類(lèi)型的客戶在做這么多不同類(lèi)型的事情。我要告訴你一件幾年前讓我吃驚的事。然后我再舉一個(gè)最近的例子。

幾年前，作為美國(guó)證券交易所的監(jiān)管機(jī)構(gòu)，F(xiàn)INRA的使命是成為消費(fèi)者的監(jiān)督者。它是為了尋找在美國(guó)各地股票市場(chǎng)的日常交易中存在的欺詐行為。他們做得非常好的一件事是，他們?cè)趲啄昵暗陌l(fā)展中很早就意識(shí)到，他們將重新架構(gòu)他們的關(guān)鍵任務(wù)應(yīng)用程序。

這將使您感到驚訝，有多少公司首先開(kāi)始使用他們的關(guān)鍵任務(wù)應(yīng)用程序。他們不會(huì)從一個(gè)更小的應(yīng)用開(kāi)始，在一些部門(mén)作為實(shí)驗(yàn)。他們從主應(yīng)用程序開(kāi)始因?yàn)樗麄円庾R(shí)到主應(yīng)用程序?qū)⒌玫阶畲蟮暮锰?。他們的任?wù)需要AWS云所提供的好處。

現(xiàn)在，F(xiàn)INRA每天對(duì)超過(guò)5000億筆股票交易進(jìn)行驗(yàn)證。所有的操作都在S3和EMR中進(jìn)行，因?yàn)樗麄兒茉缇妥隽诉@樣的決定。我一直對(duì)這些公司的創(chuàng)新能力和領(lǐng)導(dǎo)能力感到驚訝很多公司都將關(guān)鍵任務(wù)應(yīng)用到云上。

最近，我認(rèn)為一些真正有趣的用例是關(guān)于機(jī)器學(xué)習(xí)的。人們把數(shù)據(jù)放在S3中，有些人現(xiàn)在在做機(jī)器學(xué)習(xí)，有些人想在一年后做機(jī)器學(xué)習(xí)。但是Marinus Analytics是一家位于波士頓的公司，他們制造人工智能工具。他們現(xiàn)在正在做的是運(yùn)行Amazon reko，這是一個(gè)圖像識(shí)別機(jī)器學(xué)習(xí)服務(wù)，將圖像存儲(chǔ)在S3中以幫助識(shí)別和找到人口販賣(mài)的受害者。

像這樣的故事，像人類(lèi)基因組排序的故事，以及這對(duì)預(yù)防性醫(yī)療意味著什么。這對(duì)我來(lái)說(shuō)是非常鼓舞人心的。因?yàn)樗粌H僅是關(guān)于技術(shù)，它是關(guān)于把技術(shù)和人類(lèi)結(jié)合在一起，使人類(lèi)的條件變得更好。湯姆，我是和平隊(duì)的，我以前是和平隊(duì)的志愿者。我認(rèn)為這是當(dāng)今科技的一大進(jìn)步。

湯姆·克拉茲特:我敢肯定，有很多客戶對(duì)這些未來(lái)的可能性感到非常興奮。另一類(lèi)顧客會(huì)說(shuō)，“我想要更便宜的?！爱?dāng)我們談?wù)摂?shù)據(jù)爆炸，當(dāng)我們談?wù)搶⒈晃盏乃袛?shù)據(jù)時(shí)，你對(duì)此有何看法?這會(huì)讓顧客付出一些代價(jià)。隨著時(shí)間的推移，價(jià)格將如何適應(yīng)這種數(shù)據(jù)爆炸?

不管客戶的目標(biāo)是什么，我想說(shuō)的是，對(duì)我們所有的客戶來(lái)說(shuō)，成本是第一位的?，F(xiàn)在，我們有時(shí)看到客戶最初來(lái)到AWS，是因?yàn)樗麄儽惠^低的成本所吸引。然后他們發(fā)現(xiàn)敏捷的好處。

但說(shuō)到底，成本很重要。當(dāng)數(shù)據(jù)增長(zhǎng)時(shí)，成本就變得很重要。我想你會(huì)繼續(xù)看到越來(lái)越多的低成本存儲(chǔ)的選擇。

我們?cè)诮衲暝缧r(shí)候推出了Deep Archive。深度存檔每個(gè)月的存儲(chǔ)空間不到0.1美分。正是這種價(jià)格點(diǎn)讓人們想，“為什么我要?jiǎng)h除我的數(shù)據(jù)?”

當(dāng)我們推出Deep Archive的時(shí)候，有很多客戶來(lái)找我們說(shuō)，“在這個(gè)價(jià)位，我不會(huì)刪除。”因?yàn)槲乙龅木褪前阉Ａ粝聛?lái)。它比磁帶便宜，比磁帶好。我只會(huì)在需要的時(shí)候使用S3 API。我可以把它放在我的數(shù)據(jù)湖中。我只是不會(huì)刪除它。”

我認(rèn)為你會(huì)發(fā)現(xiàn)最低成本的價(jià)格點(diǎn)，就像深度存檔，將會(huì)改變?nèi)藗儗?duì)數(shù)據(jù)湖的演變的看法，以及他們?cè)谖磥?lái)可以做什么應(yīng)用，并保持開(kāi)放的大門(mén)，因?yàn)樗麄儾槐貏h除。他們的指尖有活動(dòng)的東西，不再被鎖在磁帶里。