三星與Bixby一起獲勝的計(jì)劃是為第三方開(kāi)發(fā)商提供支持

布蘭迪斯大學(xué)和加州大學(xué)洛杉磯分校的校友Adam Cheyer擁有計(jì)算機(jī)科學(xué)和人工智能學(xué)位，對(duì)數(shù)字助理知之甚少。他曾在SRI International的人工智能中心領(lǐng)導(dǎo)了Learns and Organizations(CALO)項(xiàng)目的認(rèn)知助理項(xiàng)目，該項(xiàng)目旨在將尖端的機(jī)器學(xué)習(xí)技術(shù)整合到一個(gè)與平臺(tái)無(wú)關(guān)的認(rèn)知助手中。Cheyer是Siri的創(chuàng)始團(tuán)隊(duì)，Siri是蘋(píng)果公司在2010年以2億美元收購(gòu)的同名AI助手技術(shù)背后的創(chuàng)業(yè)公司。他共同創(chuàng)辦了Viv Labs，該公司在花了四年時(shí)間開(kāi)發(fā)了一個(gè)旨在處理復(fù)雜的輔助平臺(tái)后于2016年隱身起步查詢。

三星以大約2.15億美元的價(jià)格于2016年10月收購(gòu)了 Viv，并且不久之后，Cheyer及其同事要求將其創(chuàng)業(yè)公司的技術(shù)應(yīng)用于公司的Bixby助手，該助手于2017年3月與三星Galaxy S8和S8 +一起推出。-他們的勞動(dòng)果實(shí)比克斯比2.0 -在2017年10月在三星的比克斯比開(kāi)發(fā)者大會(huì)上首次亮相，并正式啟動(dòng)對(duì)銀河注9在2018年八月。

如今，Bixby已在200多個(gè)和超過(guò)5億臺(tái)設(shè)備上銷(xiāo)售，其中包括三星的Family Hub 2.0冰箱，最新一代的智能電視產(chǎn)品系列，以及包括Galaxy S，Galaxy Note和中端Galaxy C在內(nèi)的智能手機(jī)和平板電腦系列。 ，J和A.(今年的某個(gè)時(shí)候，第一個(gè)內(nèi)置Bixby的智能揚(yáng)聲器--Galaxy Home - 將加入俱樂(lè)部。)在功能方面，Bixby已經(jīng)學(xué)會(huì)識(shí)別成千上萬(wàn)的命令并講德語(yǔ)，法語(yǔ)，語(yǔ)，英國(guó)英語(yǔ)和西班牙語(yǔ)。感謝最新發(fā)布的開(kāi)發(fā)人員工具包--Bixby Developer Studio--它支持比以往更多的第三方應(yīng)用和服務(wù)。

但是Bixby團(tuán)隊(duì)面臨著艱巨的挑戰(zhàn)，也許是他們中的主要挑戰(zhàn)。市場(chǎng)研究公司Ovum估計(jì)，截至2018年11月，6%的人使用Bixby，而分別使用Alexa和Google智能助理的人數(shù)分別為24%和20%。為了深入了解Bixby的發(fā)展以及對(duì)未來(lái)可能發(fā)生的一瞥，VentureBeat 今天在布魯克林舉行的Bixby開(kāi)發(fā)者會(huì)議之前與Cheyer進(jìn)行了交談。

這是我們討論的輕微編輯的成績(jī)單。

VentureBeat：我想更多地了解Bixby市場(chǎng)，Bixby即將推出的應(yīng)用程序商店?？蛻艨梢云诖裁?他們是否必須搜索Bixby應(yīng)用程序并手動(dòng)添加它們，或者他們是否能夠啟動(dòng)帶有觸發(fā)詞和短語(yǔ)的應(yīng)用程序?

Adam Cheyer： Bixby Marketplace最終將作為Galaxy Store，應(yīng)用程序商店[Galaxy手機(jī)，Samsung Gear可穿戴設(shè)備和功能手機(jī)]的一部分提供。三星致力于擁有一個(gè)可以購(gòu)買(mǎi)應(yīng)用，觀看面孔和其他物品的地方。此外，您還可以在那里找到膠囊，而開(kāi)發(fā)商在三星的高級(jí)開(kāi)發(fā)計(jì)劃中提供的膠囊將有關(guān)鍵位置。但我認(rèn)為與市場(chǎng)互動(dòng)的最酷方式將是通過(guò)Bixby本身。

您可以采取多種方法。一個(gè)是Bixby Home，這是Galaxy手機(jī)主屏幕上最左邊的儀表板。在[智能手機(jī)]上，您只需點(diǎn)擊Bixby按鈕并滑動(dòng)即可查看各種類(lèi)別的精選膠囊和其他膠囊。

您還可以通過(guò)自然語(yǔ)言自動(dòng)發(fā)現(xiàn)Capsules。例如，如果你說(shuō)“讓我乘車(chē)前往舊金山”，Bixby會(huì)回答“嗯，你現(xiàn)在沒(méi)有啟用任何rideshare供應(yīng)商，但是這里有幾個(gè)供應(yīng)商。”你會(huì)被提示嘗試[不同的選項(xiàng)]，并決定你是喜歡一個(gè)品牌，另一個(gè)品牌，或兩者兼而有之。如果啟用多個(gè)，Bixby將默認(rèn)詢問(wèn)您要使用哪個(gè)。

此外，如您所建議，您可以使用名稱(chēng)或短語(yǔ)調(diào)用Capsules。例如，你可以說(shuō)“優(yōu)步，讓我去舊金山。”

VentureBeat：對(duì)。因此，最終，開(kāi)發(fā)人員能否為語(yǔ)音體驗(yàn)收費(fèi) - 無(wú)論是膠囊本身還是膠囊功能?我想象的東西類(lèi)似于亞馬遜的技能內(nèi)購(gòu)買(mǎi)，它支持一次性購(gòu)買(mǎi)和訂閱。

謝爾：當(dāng)然。Bixby Marketplace的第一個(gè)版本將不會(huì)出現(xiàn)我稱(chēng)之為“高級(jí)膠囊”的內(nèi)容，這意味著付費(fèi)應(yīng)用或訂閱應(yīng)用。但我們正在努力做到這一點(diǎn)，我們很快就會(huì)發(fā)布一些聲明。我們知道世界的內(nèi)容提供商需要謀生，我們絕對(duì)會(huì)支持這一點(diǎn)。

Transactional Capsules可以收取費(fèi)用 - 我們有像Ticketmaster和1-800-Flowers這樣的供應(yīng)商，他們今天接受購(gòu)買(mǎi)，我們努力降低商業(yè)合作伙伴的購(gòu)買(mǎi)摩擦。如果你已經(jīng)在三星生態(tài)系統(tǒng)的任何地方保存了你的卡片，Bixby就會(huì)知道它 - 你只是說(shuō)“送一些鮮花給我的媽媽”，而1-800-Flowers Capsule會(huì)說(shuō)“很棒 - 你想要嗎?用普通卡付款?“

此外，我們還為Uber等合作伙伴提供OAuth支持，這些合作伙伴的用戶帳戶中存有卡片。您可以附加Bixby并為其授予帳戶訪問(wèn)權(quán)限，以便您可以在這些合作伙伴的付款流程中進(jìn)行購(gòu)買(mǎi)。

VentureBeat：您最近向Bixby添加了新語(yǔ)言 - 他們加入了英語(yǔ)，韓語(yǔ)和普通話。在將Bixby帶到新的領(lǐng)域時(shí)，團(tuán)隊(duì)面臨的一些本地化障礙是什么?

Cheyer：我們正在努力每年推出至少五種新語(yǔ)言，我們可能會(huì)在未來(lái)推出這種語(yǔ)言。

我們相信，提供合適的工具并構(gòu)建可擴(kuò)展的生態(tài)系統(tǒng)將使全世界的開(kāi)發(fā)人員能夠?yàn)樽罱K用戶創(chuàng)建出色的內(nèi)容。在全球化方面，這一點(diǎn)尤為重要，因?yàn)檫@意味著我們無(wú)需對(duì)每項(xiàng)服務(wù)進(jìn)行本地化。相反，我們提供了一種在每種語(yǔ)言中具有相同功能的平臺(tái)。

VentureBeat：關(guān)于開(kāi)發(fā)者工具的問(wèn)題，Bixby團(tuán)隊(duì)是否研究過(guò)亞馬遜和谷歌采用的神經(jīng)聲音?我指的是深度神經(jīng)網(wǎng)絡(luò)產(chǎn)生的聲音，聽(tīng)起來(lái)比上一代合成聲音更像人類(lèi)。

Cheyer：我不會(huì)宣布任何尚未投入生產(chǎn)的內(nèi)容，但我會(huì)說(shuō)三星不僅在文本到語(yǔ)音方面具有重要的能力，在語(yǔ)音識(shí)別方面也是如此。人工智能正在取得重大進(jìn)展，神經(jīng)網(wǎng)絡(luò)的聲音無(wú)疑是其中之一。自動(dòng)語(yǔ)音識(shí)別(ASR)中還有很多工作要做 - 我們正在從隱馬爾可夫模型方法轉(zhuǎn)變?yōu)榧兇獾亩说蕉松窠?jīng)網(wǎng)絡(luò) - 我們看到ASR模型從云端移到邊緣設(shè)備，如手機(jī)。

我們肯定已經(jīng)意識(shí)到這一切，你可以放心，我們正在努力解決這些問(wèn)題。

VentureBeat：您簡(jiǎn)要提到了隱私。您可能已經(jīng)意識(shí)到，對(duì)于如何存儲(chǔ)和使用來(lái)自語(yǔ)音助理的錄制命令存在一些擔(dān)憂。Bixby已經(jīng)提供了一種刪除錄音的方法，但團(tuán)隊(duì)會(huì)考慮引入新命令或應(yīng)用內(nèi)設(shè)置，以便更容易刪除這些數(shù)據(jù)嗎?

Cheyer：當(dāng)然 - 我們對(duì)所有這些事情持開(kāi)放態(tài)度。隱私是一個(gè)重要且多方面的問(wèn)題。就我個(gè)人而言，不僅僅是我的聲音用于在某處調(diào)整特定的語(yǔ)音識(shí)別模型。我更關(guān)心的是助理在語(yǔ)義層面上做了什么 - 它對(duì)我的了解以及為什么它向我展示了某些信息。

但不同的用戶會(huì)擔(dān)心不同的事情。您必須提供多種方法讓用戶控制公司擁有的數(shù)據(jù)，以及他們?nèi)绾问褂眠@些數(shù)據(jù)。

需要注意的一點(diǎn)是，我們已經(jīng)控制了Bixby學(xué)習(xí)基礎(chǔ)平臺(tái)能力的內(nèi)容。我舉一個(gè)例子：使用Bixby，開(kāi)發(fā)人員可以選擇使用機(jī)器學(xué)習(xí)來(lái)處理來(lái)自用戶的請(qǐng)求。如果我向比克斯比詢問(wèn)波士頓的天氣情況，可能并不明顯，但我指的是“波士頓”實(shí)際上是一種偏好。大多數(shù)人會(huì)選擇馬薩諸塞州的波士頓，但居住在德克薩斯州的人可能會(huì)選擇德克薩斯州的波士頓。不得不反復(fù)指定你想要的波士頓是多么煩人，這就是為什么Bixby可以用來(lái)了解全球和本地餐館，產(chǎn)品和騎車(chē)等方面的偏好。

我們?cè)?ldquo;理解”頁(yè)面中向用戶展示了這些知識(shí)。他們會(huì)看到Bixby猜測(cè)他們上次詢問(wèn)天氣時(shí)他們的意思是馬薩諸塞州的波士頓。如果他們不這樣做，他們就能夠更新它或明確表示他們不希望Bixby知道這些信息。他們總是能夠全面了解已知的內(nèi)容以及如何在非常精細(xì)的級(jí)別上使用它們。

VentureBeat：你會(huì)說(shuō)這種程度的定制和個(gè)性化是Bixby的強(qiáng)項(xiàng)之一嗎?

謝耶：是的。在較高的層面上，競(jìng)爭(zhēng)對(duì)手為開(kāi)發(fā)人員提供的大多數(shù)是語(yǔ)音識(shí)別和語(yǔ)言理解，但這就是它。從那里，開(kāi)發(fā)人員必須硬連線每個(gè)用例并手動(dòng)編碼接下來(lái)發(fā)生的一切，無(wú)論是查詢映射服務(wù)器以確定用戶所指的“波士頓”。

Bixby是一個(gè)完全不同的平臺(tái)，每個(gè)被問(wèn)到用戶的問(wèn)題都經(jīng)過(guò)機(jī)器學(xué)習(xí)過(guò)程。市場(chǎng)上任何競(jìng)爭(zhēng)對(duì)手都沒(méi)有其他平臺(tái)可以做到這一點(diǎn)。我們有一個(gè)AI工具，對(duì)于開(kāi)發(fā)人員提出的每個(gè)用例，它將編寫(xiě)代碼并負(fù)責(zé)組裝，調(diào)用不同的API，將信息從一個(gè)API轉(zhuǎn)換為另一個(gè)API，與用戶交互以及學(xué)習(xí)來(lái)自互動(dòng)。所有這些都是免費(fèi)的平臺(tái)。這種類(lèi)型的學(xué)習(xí) - 我們稱(chēng)之為動(dòng)態(tài)程序生成 - 在隱私和安全方面有很多好處。它可以提供更豐富的體驗(yàn)并節(jié)省大量的開(kāi)發(fā)時(shí)間。

我認(rèn)為另一件令人興奮的關(guān)于Capsule方法的是開(kāi)發(fā)人員可以在多個(gè)設(shè)備上使用相同的Capsule。他們不需要用于電視的膠囊，用于冰箱的不同膠囊，以及用于電話的第三膠囊。當(dāng)他們構(gòu)建Capsule時(shí)，Capsule是支持所有語(yǔ)言和所有設(shè)備的Capsule。我們有這個(gè)新的Bixby Views系統(tǒng)，它是公開(kāi)可用的，因此開(kāi)發(fā)人員可以使用最豐富的組件調(diào)色板構(gòu)建多模式圖形體驗(yàn)。并且還有自動(dòng)轉(zhuǎn)換功能，這樣未經(jīng)修改的膠囊就可以在手表這么小的東西上運(yùn)行，就像The Wall TV一樣大，以及介于兩者之間的所有東西。

大多數(shù)其他助手的主要用途是與這些助手一起開(kāi)箱即用的內(nèi)置服務(wù)。盡管第三方創(chuàng)建了數(shù)以萬(wàn)計(jì)的技能或行動(dòng)，但由于各種原因，第三方開(kāi)發(fā)人員的使用率很低。

我們與Bixby一起致力于為第三方開(kāi)發(fā)商提供盡可能多的能力和重點(diǎn)。這確實(shí)是我們獲勝的長(zhǎng)期計(jì)劃 - 擁有一個(gè)充滿活力的生態(tài)系統(tǒng)，其中大部分業(yè)務(wù)和大部分用戶流量都流向第三方。

VentureBeat：三星最近宣布了Bixby Routines，它學(xué)會(huì)了搶先推出應(yīng)用程序和設(shè)置的習(xí)慣。您是否有任何更新可以分享Routines或任何其他可能很快就會(huì)出現(xiàn)在Bixby上的預(yù)測(cè)功能?

Cheyer：三星不僅收購(gòu)了Viv Labs的技術(shù)，還收購(gòu)了SmartThings [2014年8月]，而SmartThings所做的一件事就是它通過(guò)SmartThings Cloud管理復(fù)雜的例程。所以已經(jīng)存在，并且我認(rèn)為Bixby和SmartThings之間的現(xiàn)有集成將會(huì)持續(xù)增強(qiáng) - 這是需要尋找的東西。

Bixby框架中的單個(gè)用例(例如預(yù)訂航班)被分解為大約60個(gè)不同的自動(dòng)生成的步驟，這些步驟以交互方式執(zhí)行。如果您考慮Routines，它只是將不同的步驟一起改變 - 基礎(chǔ)技術(shù)已經(jīng)在Capsule開(kāi)發(fā)中使用。請(qǐng)求仍然主要是Capsule特有的，因此跨封裝功能有限。一旦我們?cè)谧匀徽Z(yǔ)言方面打開(kāi)它，執(zhí)行和動(dòng)態(tài)程序生成功能就已經(jīng)存在。

VentureBeat：公平地說(shuō)，助手的關(guān)鍵吸引力在于他們?nèi)绾螣o(wú)縫地命令家用設(shè)備。我很想知道Bixby團(tuán)隊(duì)如何考慮第三方設(shè)備集成，以及他們投入時(shí)間和資源以使這些交互更強(qiáng)大的領(lǐng)域。

Cheyer：對(duì)我而言，Bixby今年的一個(gè)重大宣告將是設(shè)備足跡。去年，Bixby 2.0出現(xiàn)在一部手機(jī)上，但三星正積極致力于將新的Bixby向至少一個(gè)Bixby按鈕的每個(gè)智能手機(jī)向后移動(dòng)，有些甚至沒(méi)有Bixby按鈕。因此，擁有Bixby的設(shè)備數(shù)量將在手機(jī)尺寸上顯著增加。三星今天也開(kāi)始在家庭中心冰箱，智能電視以及未來(lái)的Galaxy Home揚(yáng)聲器上運(yùn)送Bixby，而且還有很多很多設(shè)備我都不會(huì)談?wù)摻衲甑腂ixby。

我想當(dāng)你回顧今年年底時(shí)，你會(huì)看到Bixby幾乎到處都是。如你所知，三星擁有大約10億臺(tái)設(shè)備的設(shè)備，該公司有記錄稱(chēng)，到2020年，他們銷(xiāo)售的所有設(shè)備都將連接起來(lái)。他們投入巨資使Bixby成為無(wú)處不在的控制界面。

VentureBeat：談到無(wú)處不在，我們是否可以期待在不久的將來(lái)在第三方設(shè)備上看到Bixby?開(kāi)發(fā)商和制造商最終能否將Bixby添加到他們的設(shè)備中?

Cheyer： 當(dāng)三星收購(gòu)Viv時(shí)，這對(duì)我來(lái)說(shuō)非常重要。我們一直致力于將助手作為網(wǎng)絡(luò)和移動(dòng)設(shè)備的重要生態(tài)系統(tǒng) - 一旦您擁有蓬勃發(fā)展的生態(tài)系統(tǒng)并且企業(yè)支持它，助理就不僅僅是設(shè)備功能。您希望在世界上的每個(gè)設(shè)備上獲得它以驅(qū)動(dòng)更多請(qǐng)求并允許用戶從其規(guī)模中受益。

三星向我承諾并公開(kāi)承諾在非三星設(shè)備上運(yùn)送Bixby。今年，我們的工作將集中在數(shù)百萬(wàn)臺(tái)三星設(shè)備上，并為第三方開(kāi)發(fā)商開(kāi)辟市場(chǎng)。明年或很快，我們的意圖絕對(duì)是打開(kāi)Bixby到非三星設(shè)備。