Adam Cheyer：三星与Bixby一起获胜的计划是为第三方开发商提供支持

 
布兰迪斯大学和加州大学洛杉矶分校的校友Adam Cheyer拥有计算机科学和人工智能学位，对数字助理知之甚少。他曾在SRI International的人工智能中心领导了Learns and Organizations(CALO)项目的认知助理项目，该项目旨在将尖端的机器学习技术整合到一个与平台无关的认知助手中。 Cheyer是Siri的创始团队，Siri是苹果公司在2010年以2亿美元收购的同名AI助手技术背后的创业公司。他共同创办了Viv Labs，该公司在花了四年时间开发了一个旨在处理复杂的辅助平台后于2016年隐身起步查询。
三星以大约2.15亿美元的价格于2016年10月收购了Viv，并且不久之后，Cheyer及其同事要求将其创业公司的技术应用于公司的Bixby助手，该助手于2017年3月与三星Galaxy S8和S8 +一起推出。他们的工作成果–Bixby 2.0–于2017年10月在三星的Bixby开发者大会上首次亮相，并于2018年8月在Galaxy Note9上正式推出。
如今，Bixby已在200多个国家和超过5亿台设备上销售，其中包括三星的Family Hub 2.0冰箱，最新一代的智能电视产品系列，以及包括Galaxy S，Galaxy Note和中端Galaxy C在内的智能手机和平板电脑系列。 ，J和A.(今年的某个时候，第一个内置Bixby的智能扬声器–Galaxy Home – 将加入俱乐部。)在功能方面，Bixby已经学会识别成千上万的命令并讲德语，法语，意大利语，英国英语和西班牙语。感谢最新发布的开发人员工具包–Bixby Developer Studio–它支持比以往更多的第三方应用和服务。
但是Bixby团队面临着艰巨的挑战，也许是他们中的主要挑战。市场研究公司Ovum估计，截至2018年11月，6%的美国人使用Bixby，而分别使用Alexa和Google智能助理的人数分别为24%和20%。为了深入了解Bixby的发展以及对未来可能发生的一瞥，VentureBeat今天在布鲁克林举行的Bixby开发者会议之前与Cheyer进行了交谈。
这是我们讨论的轻微编辑的成绩单。
VentureBeat：我想更多地了解Bixby市场，Bixby即将推出的应用程序商店。客户可以期待什么?他们是否必须搜索Bixby应用程序并手动添加它们，或者他们是否能够启动带有触发词和短语的应用程序?
Adam Cheyer：Bixby Marketplace最终将作为Galaxy Store，应用程序商店[Galaxy手机，Samsung Gear可穿戴设备和功能手机]的一部分提供。三星致力于拥有一个可以购买应用，观看面孔和其他物品的地方。此外，您还可以在那里找到胶囊，而开发商在三星的高级开发计划中提供的胶囊将有关键位置。但我认为与市场互动的最酷方式将是通过Bixby本身。
您可以采取多种方法。一个是Bixby Home，这是Galaxy手机主屏幕上最左边的仪表板。在[智能手机]上，您只需点击Bixby按钮并滑动即可查看各种类别的精选胶囊和其他胶囊。
您还可以通过自然语言自动发现Capsules。例如，如果你说“让我乘车前往旧金山”，Bixby会回答“嗯，你现在没有启用任何rideshare供应商，但是这里有几个供应商。”你会被提示尝试[不同的选项]，并决定你是喜欢一个品牌，另一个品牌，或两者兼而有之。如果启用多个，Bixby将默认询问您要使用哪个。
此外，如您所建议，您可以使用名称或短语调用Capsules。例如，你可以说“优步，让我去旧金山。”
VentureBeat：对。因此，最终，开发人员能否为语音体验收费 – 无论是胶囊本身还是胶囊功能?我想象的东西类似于亚马逊的技能内购买，它支持一次性购买和订阅。
谢尔：当然。 Bixby Marketplace的第一个版本将不会出现我称之为“高级胶囊”的内容，这意味着付费应用或订阅应用。但我们正在努力做到这一点，我们很快就会发布一些声明。我们知道世界的内容提供商需要谋生，我们绝对会支持这一点。
Transactional Capsules可以收取费用 – 我们有像Ticketmaster和1-800-Flowers这样的供应商，他们今天接受购买，我们努力降低商业合作伙伴的购买摩擦。如果你已经在三星生态系统的任何地方保存了你的卡片，Bixby就会知道它 – 你只是说“给我妈妈送一些鲜花”，1-800-Flowers Capsule会说“G”
VentureBeat：关于开发者工具的问题，Bixby团队是否研究过亚马逊和谷歌采用的神经声音?我指的是深度神经网络产生的声音，听起来比上一代合成声音更像人类。
Cheyer：我不会宣布任何尚未投入生产的内容，但我会说三星不仅在文本到语音方面具有重要的能力，在语音识别方面也是如此。人工智能正在取得重大进展，神经网络的声音无疑是其中之一。自动语音识别(ASR)中还有很多工作要做 – 我们正在从隐马尔可夫模型方法转变为纯粹的端到端神经网络 – 我们看到ASR模型从云端移到边缘设备，如手机。
我们肯定已经意识到这一切，你可以放心，我们正在努力解决这些问题。
VentureBeat：您简要提到了隐私。您可能已经意识到，对于如何存储和使用来自语音助理的录制命令存在一些担忧。 Bixby已经提供了一种删除录音的方法，但团队会考虑引入新命令或应用内设置，以便更容易删除这些数据吗?
Cheyer：当然 – 我们对所有这些事情持开放态度。隐私是一个重要且多方面的问题。就我个人而言，不仅仅是我的声音用于在某处调整特定的语音识别模型。我更关心的是助理在语义层面上做了什么 – 它对我的了解以及为什么它向我展示了某些信息。
但不同的用户会担心不同的事情。您必须提供多种方法让用户控制公司拥有的数据，以及他们如何使用这些数据。
需要注意的一点是，我们已经控制了Bixby学习基础平台能力的内容。我举一个例子：使用Bixby，开发人员可以选择使用机器学习来处理来自用户的请求。如果我向比克斯比询问波士顿的天气情况，可能并不明显，但我指的是“波士顿”实际上是一种偏好。大多数人会选择马萨诸塞州的波士顿，但居住在德克萨斯州的人可能会选择德克萨斯州的波士顿。不得不反复指定你想要的波士顿是多么烦人，这就是为什么Bixby可以用来了解全球和本地餐馆，产品和骑车等方面的偏好。
我们在“理解”页面中向用户展示了这些知识。他们会看到Bixby猜测他们上次询问天气时他们的意思是马萨诸塞州的波士顿。如果他们不这样做，他们就能够更新它或明确表示他们不希望Bixby知道这些信息。他们总是能够全面了解已知的内容以及如何在非常精细的级别上使用它们。
VentureBeat：你会说这种程度的定制和个性化是Bixby的强项之一吗?
谢耶：是的。在较高的层面上，竞争对手为开发人员提供的大多数是语音识别和语言理解，但这就是它。从那里，开发人员必须硬连线每个用例并手动编码接下来发生的一切，无论是查询映射服务器以确定用户所指的“波士顿”。
Bixby是一个完全不同的平台，每个被问到用户的问题都经过机器学习过程。市场上任何竞争对手都没有其他平台可以做到这一点。我们有一个AI工具，对于开发人员提出的每个用例，它将编写代码并负责组装，调用不同的API，将信息从一个API转换为另一个API，与用户交互以及学习来自互动。所有这些都是免费的平台。这种类型的学习 – 我们称之为动态程序生成 – 在隐私和安全方面有很多好处。它可以提供更丰富的体验并节省大量的开发时间。
我认为另一件令人兴奋的关于Capsule方法的是开发人员可以在多个设备上使用相同的Capsule。他们不需要用于电视的胶囊，用于冰箱的不同胶囊，以及用于电话的第三胶囊。当他们构建Capsule时，Capsule是支持所有语言和所有设备的Capsule。我们有这个新的Bixby Views系统，它是公开可用的，因此开发人员可以使用最丰富的组件调色板构建多模式图形体验。并且还有自动转换功能，这样未经修改的胶囊就可以在手表这么小的东西上运行，就像The Wall TV一样大，以及介于两者之间的所有东西。
大多数其他助手的主要用途是与这些助手一起开箱即用的内置服务。尽管第三方创建了数以万计的技能或行动，但由于各种原因，第三方开发人员的使用率很低。
我们与Bixby一起致力于为第三方开发商提供尽可能多的能力和重点。这确实是我们获胜的长期计划 – 拥有一个充满活力的生态系统，其中大部分业务和大部分用户流量都流向第三方。
VentureBeat：三星最近宣布了Bixby Routines，它学会了抢先推出应用程序和设置的习惯。您是否有任何更新可以分享Routines或任何其他可能很快就会出现在Bixby上的预测功能?
Cheyer：三星不仅收购了Viv Labs的技术，还收购了SmartThings [2014年8月]，而SmartThings所做的一件事就是它通过SmartThings Cloud管理复杂的例程。所以已经存在，并且我认为Bixby和SmartThings之间的现有集成将会持续增强 – 这是需要寻找的东西。
Bixby框架中的单个用例(例如预订航班)被分解为大约60个不同的自动生成的步骤，这些步骤以交互方式执行。如果您考虑Routines，它只是将不同的步骤一起改变 – 基础技术已经在Capsule开发中使用。请求仍然主要是Capsule特有的，因此跨封装功能有限。一旦我们在自然语言方面打开它，执行和动态程序生成功能就已经存在。
VentureBeat：公平地说，助手的关键吸引力在于他们如何无缝地命令家用设备。我很想知道Bixby团队如何考虑第三方设备集成，以及他们投入时间和资源以使这些交互更强大的领域。
Cheyer：对我而言，Bixby今年的一个重大宣告将是设备足迹。去年，Bixby 2.0出现在一部手机上，但三星正积极致力于将新的Bixby向至少一个Bixby按钮的每个智能手机向后移动，有些甚至没有Bixby按钮。因此，拥有Bixby的设备数量将在手机尺寸上显着增加。三星今天也开始在家庭中心冰箱，智能电视以及未来的Galaxy Home扬声器上运送Bixby，而且还有很多很多设备我都不会谈论今年的Bixby。
我想当你回顾今年年底时，你会看到Bixby几乎到处都是。如你所知，三星拥有大约10亿台设备的设备，该公司有记录称，到2020年，他们销售的所有设备都将连接起来。他们投入巨资使Bixby成为无处不在的控制界面。
VentureBeat：谈到无处不在，我们是否可以期待在不久的将来在第三方设备上看到Bixby?开发商和制造商最终能否将Bixby添加到他们的设备中?
Cheyer：当三星收购Viv时，这对我来说非常重要。我们一直致力于将助手作为网络和移动设备的重要生态系统 – 一旦您拥有蓬勃发展的生态系统并且企业支持它，助理就不仅仅是设备功能。您希望在世界上的每个设备上获得它以驱动更多请求并允许用户从其规模中受益。
三星向我承诺并公开承诺在非三星设备上运送Bixby。今年，我们的工作将集中在数百万台三星设备上，并为第三方开发商开辟市场。明年或很快，我们的意图绝对是打开Bixby到非三星设备。