软件测试公司Testlio如何转变为新CEO

早在2017年，KristelKruustük告诉我们她关于创办软件测试公司Testlio的鼓舞人心的故事。
Kruustük和她的丈夫MarkoKruustük于2012年创立了Testlio，并在五年内将其建立成为一家拥有超过一千名自由测试人员的全球测试公司。但在过去的一年里，公司经历了一些重大变革。 Kruustük决定重新调整她的主要热情，测试软件，并成为首席测试官。她还有第一个孩子。
该公司决定聘请其早期投资者之一Steve Semelsberger担任首席执行官。现在，这家总部位于旧金山的团队正在扩大其基地，并为应用程序达到15亿以上的月度测试人员提供测试服务，而2017年9月的每月用户数为6.5亿。该公司也盈利。
Testlio拥有65名员工，可以访问来自100多个国家的4,000名经过验证的自由职业者测试人员。 Kruustük表示，该公司支付的价格高于市场价格，工人的主要枢纽是旧金山，洛杉矶，奥斯汀和爱沙尼亚。客户包括微软，Hotels.com，CBS，NBA和美国运通。
我最近和Kruustük和Semelsberger谈过。她说，她的员工中有40%是女性，公司领导团队中有50%是女性。
GamesBeat：今天的情况如何与标题的变化有什么不同?公司是否已根据您的新任首席执行官进
KristelKruustük：我可以给你一些背景故事。在Testlio的开头，我们通过了TechStars加速器。这就是我们第一次被介绍给Steve Semelsberger，作为TechStars计划的导师之一。在TechStars毕业后，我们保持着非常密切的联系。
去年夏天，当我的联合创始人Marko – 我们将公司建立在一个良好的位置时，我们开始考虑我们的优势和弱点以及我们可以做得更多的地方。最后，我们开始和史蒂夫谈话，史蒂夫刚刚在职业生涯中做出了改变。他是Testlio的投资人，顾问和长期朋友。我们觉得如果有人能担任首席执行官职位，那就是史蒂夫。
这让我有机会专注于我热爱的事情。我作为测试人员开始了公司，现在我真的回到了根，我们的测试网络和我们的测试人员。这太棒了。该公司表现良好。我们现在65人。我们的网络中有数千名测试人员。当我们上次发言时，我们测试的产品涉及大约6.5亿人。现在是15亿。我们成长了公司，而且进展顺利。我对未来的发展感到兴奋。
Steve Semelsberger：自从我六年前第一次见到Kristel和她的联合创始人Marko以来，我一直很喜欢。作为种子轮投资者，我感到非常荣幸和兴奋，然后成为公司的正式顾问。我一直在与Testlio幕后工作多年。去年秋天我做的那一刻，我很高兴进来。 Kristel和Marko以及团队已经做了很多事情。我们正处于推出新平台发展的时期。
我们今年的主题是精神上的成长。我们成长得很好。另外一个数据点是，我们已经变得有利可图。在今年的第一季度和第二季度，我们实现了盈利。第二季度我们的净收入和现金流均为正，同时保持强劲的现金状况。我认为我的工作是建立Kristel和Marko以及团队所做的所有工作，使整个团队能够做他们最喜欢做的事情。
Semelsberger：我会在三个方面解决这个问题。第一个维度，我们看看使用我们客户的应用程序的用户。该业务基本上是一个应用测试业务，一个托管服务。我们为员工，合同和自由测试人员网络以及专有软件提供服务。我们衡量客户应用程序在野外的使用情况。
正如克里斯特尔所说，我们已经从大约6.5亿用户的应用程序用户变成了超过15亿用户。我们还投入了大量的精力和精力让测试人员可以在我们客户需要的地方使用。当我们最后一次与您交谈时，我们有大约1,000名经过验证的测试人员。我们已经提高了使用Testlio验证的标准。与此同时，我们已经成长为大约4,000名经过验证的测试人员，以及我们全球测试网络的约15,000名成员。我们的测试人员遍布全球约100个国家，这使我们能够为客户进行本地化和以位置为中心的测试。
例如，我们与一家非常大的社交媒体公司合作，我们在40个国家/地区设有测试人员。他们结合了功能和语言学测试。我们建立的测试人员团队 – 这个客户大约有80名测试人员 – 也是产品用户和产品推广者。他们了解并热爱我们客户的产品。在Kristel的领导下，我们真的渴望能够在任何地点，任何设备上以任何语言进行测试。
另一方面 – 在获利的同时，我们显着增加了人均收入。我们一直在增加收入。如果你看了我们超过两年的时间，我们的人数就一直保持不变。你最后跟我们说话的时候我们大约有65个人。我们实际做出了一些艰难的决定，并且在一段时间内变得更小，然后在过去的一年里，我们已经成长为大约65名员工。
GamesBeat：当你用不同的语言测试东西时，你是否也发现了文化上不准确的东西?这就是那些称自己为地理学家，顾问的人的工作，他们确保用一种语言的东西在文化方面得到恰当的翻译，并使其技术上准确。
Kruustük：是的，我们这样做。当我们与我们的测试人员合作时，他们就位于这些国家。他们一生都在那里生活，他们正在测试想要本地化的产品。
Semelsberger：举个例子，我们与一家大型房屋租赁市场供应商合作。我们帮助他们进入日本。他们在日本进行了重大推动，大型营销活动以及全新的产品体验。我们在日本的实地测试人员为我们工作，将可用性，语言和功能测试结合起来。
他们发现，当他们在浴室中使用不同版本的不同术语时 – 你可以将浴室称为带淋浴的地方而不是带有厕所的地方，这在日语中很重要。这些是那些让人们了解优秀产品体验并且在文化上适应不同家庭租赁体验的人可以在实地找到的东西。
Kruustük：各种各样的小事都会产生巨大的影响。例如，您在应用中设置日期格式的方式。这一切都很重要。例如，当我们在像沙特阿拉伯这样的地方与一家大型社交媒体公司合作时，我们必须确保在应用程序中未启用相机。要记住一些限制。
GamesBeat：当您进行不同类型的支持时，社交媒体应用程序将与游戏和其他类型的软件有很大不同。
Kruustük：没错。两年前，当我们上次讨论时，我们讨论了游戏行业的测试。游戏玩家可以说是游戏行业的测试者。但是，当我们谈论大型媒体公司时，这是一种完全不同的品味。他们需要确保一切都适用于纽约，芝加哥或埃德蒙顿或其他任何地方的人。在游戏测试方面存在很大差异。
GamesBeat：如果公司想要自己做这件事，那么现在你对Testlio如何更好地做到这一点有什么看法?
Semelsberger：我在德克萨斯州的奥斯汀，在过去的20年左右一直是我的家。我与我们的销售和服务团队密切合作，这些团队主要在美国。我们的客户群中很大一部分在美国，然后我们的服务，工程，产品和后台部门的很大一部分都在欧洲。
我们所做的很多工作都是为了增强内部工作。我们的大多数客户都在内部进行单元测试级别的自动化测试。自动化测试至关重要。从根本上说，工程团队作为客户流程的一部分进行管理。我们带来的是高度突发和灵活的以人为本的测试。我们可以部署大型测试人员团队，通常在相当短的微任务中工作，每个测试窗口一到三个小时。我们可以在非常短的时间内(通常是24小时窗口)为特定的候选版本提供20,30,50,100个测试人员，通常是在关键位置并以关键语言工作。我们可以提供很多反馈。公司可以在投入生产之前决定他们可能想要改变和改进的内容。
这特别适用于本机应用程序。我们的很多客户每月发布两次本机应用程序。他们有一段时间，他们将所有的Web服务和为前端本机应​​用程序完成的所有内容都打包并将其打包。这是他们交付测试的时刻，我们将与我们的全球团队一起开展行动。通过这种有节奏的，可破坏的测试方法，它对我们的客户来说非常有效且经济上有价值。这是外包的演变，非常好地补充了出版商可能在内部做的事情。
GamesBeat：就您可以在整个客户群中收集的数据类型而言，就许多公司共同拥有的问题而言，您获得了哪些见解?您可以通过分析学到什么?
Semelsberger：我们的客户向我们寻求有关我们在测试中发现的内容的信息。这包括某些设备和操作系统的执行情况。他们还向我们寻求有关不同工程和产品团队如何发布优质构建候选人的信息。我们经常与客户中的许多团队合作，我们可以进行跨团队比较和比较评估。
如果我们考虑整体速度和速度，团队从最初的冲刺开始到生产发布所需的时间，以及在该窗口内如何进行有效测试，我们向客户报告质量信息非常重要。我们密切关注报告以解决费率问题。我们做了很多工作来对我们为客户提供的信息进行分类，以便他们可以快速决定立即采取行动的方式，以及他们可能在积压中采取的措施。我们始终与客户密切合作，共同改进流程并提供数据。
我们通过运行报告等方式提供数据，我们将通过电子邮件发送给客户，然后我们的软件中包含一系列仪表板，我们的客户可以进入并查看。然后我们会做季度业务评估，我们主动来到我们的客户，并根据我们看到的一些事情提出建议。关于我们可以改变的想法，关于他们可以改变什么的想法，以及关于我们可以一起改变的事物的想法。
Kruustük：过去两年我们的产品发展很快。我之前谈过可伸缩性将成为我们的挑战之一。我们如何为客户收集重要信息，以便他们更快地发布?移动行业是残酷的。游戏和移动应用程序制造商有数百个竞争对手。切换真的很容易。我们尽可能地收集信息。我们今天的平台实现了这一点，非常棒。