联系我们

面试

12博下载app软件工程师Andrew Stein– Interview Series

mm

更新

 on

Andrew Stein是一位软件工程师,负责领导感知团队 12博下载app Via,12博下载app’自主交付工作。 12博下载app是自动驾驶技术开发公司,是Google的母公司Alphabet Inc的子公司。

最初吸引您使用AI和机器人技术的是什么?

我一直喜欢做那些“did something”从我很小的时候起艺术和手工艺可能很有趣,但是我最大的热情是致力于创作在某种程度上也有用的作品。罗杰斯先生邻居最喜欢的部分是自动化工厂中传送带和执行器的画面,可以看到瓶子或其他产品的填充或组装,贴标签和运输。我是乐高积木和其他建筑玩具的忠实粉丝。然后,由于中学和高中技术学生协会在计算机辅助设计(CAD)竞赛中取得了一些成功,我最终为一家小型创业公司Clipper Manufacturing从事了CAD课余工作。在那儿,我正在为大型机器人分拣机和相关的输送机设备设计工厂布局,以便为零售服装业洗涤和组织衣架式制服。从那里出发,去佐治亚理工学院学习电气工程,在那里我参加了IEEE机器人俱乐部,并参加了一些课程。 计算机视觉。那些最终导致我进入卡内基梅隆大学机器人学院攻读博士学位。从那以后,我在CMU的许多研究生一直是密友,无论是在Anki还是现在在12博下载app。

您之前曾在Anki一家机器人创业公司担任首席工程师。您有机会在Anki从事哪些项目?

我是Anki Cozmo项目的第一位全职员工,在那里我有幸从头开始创建代码存储库,并将产品交付给超过一百万个可爱,逼真的机器人’的家园。这项工作过渡到了我们的下一个产品Vector,这是Cozmo的另一个更高级且功能齐全的版本。我从事这些产品的许多部分的工作,但主要负责计算机视觉的面部检测,面部识别,3D姿势估计,定位和感知的其他方面。我还移植了TensorFlow Lite以在Vector上运行’的嵌入式操作系统并帮助部署 深度学习 可以在机器人上运行的模型进行手和人检测。

我也建了Cozmo’s and Vector’的眼睛渲染系统,这使我有机会与Anki的许多非常有才华和创造力的动画团队特别紧密地合作,这也很有趣。

在2019年,12博下载app从Anki雇用了您和其他十二名机器人专家,以使其自动驾驶技术适应其他平台,包括商用卡车。您对在12博下载app工作的前景的最初反应是什么?

我认识12博下载app的许多现任和前任工程师,当然也知道该公司’作为自动驾驶汽车领域领导者的声誉。我非常喜欢在Anki从事儿童玩具和教育产品开发工作的创造力,但我也很高兴加入一家在社会影响力如此巨大的空间中工作的大型公司,以了解在这种组织规模上如何进行软件开发和安全性和技术复杂程度。

您能讨论一下12博下载app的一天工作对您来说如何吗?

在与12博下载app的其他工程团队密切合作时,我发现并解决卡车方面的特定挑战时,我的大部分职责目前集中于指导和发展我的团队。这意味着我需要花很多时间与我的团队,其他技术负责人以及产品和计划经理会面,因为我们计划采用技术和组织方法来开发和部署称为12博下载app Driver的自动驾驶系统,并将其功能扩展到不断发展的公司卡车队。除此之外,鉴于我们正在积极招聘,我还花费大量时间面试候选人。

与自动驾驶汽车相比,自动驾驶卡车面临着哪些独特的计算机视觉和人工智能挑战?

尽管我们在所有车辆中都采用了相同的核心技术堆栈,但对于卡车,有一些新的注意事项需要我们加以考虑。首先,领域是不同的:与乘用车相比,卡车在高速公路上花费的时间更多,高速公路是高速环境。由于质量大得多,卡车的加速和制动速度比汽车慢,这意味着12博下载app驾驶员需要从很远的地方感知事物。此外,高速公路建设使用不同的标记和标志,甚至可能涉及到道路“错误”侧的中间交叉点。有针对高速公路的法律,例如路过停在路肩上的车辆;而且可能会有许多拥挤的车道可以通行。我们需要克服的另一个挑战是,拖车可能造成更大的盲点。

12博下载app最近开始 测试重型卡车无人驾驶车队 在得克萨斯州,配备训练有素的驾驶员在游戏的这一点上,12博下载app希望从这些测试中学到什么?

我们的卡车在我们运营的区域(AZ / CA / TX / NM)进行测试,以便在高速公路上可能遇到的所有不同类型的情况下获得有意义的经验和数据。该过程将锻炼我们的软件和硬件,使我们能够学习如何继续改进和调整12博下载app驱动程序以适应卡车运输领域。

具体看德克萨斯州:达拉斯和休斯顿是美国最大的货运枢纽的一部分。在这种环境下运行,我们可以在高密度的高速公路和托运人车道上测试12博下载app Driver,进一步了解其他卡车和乘用车驾驶员在这些路线上的行为,并继续完善12博下载app Driver在这些繁忙驾驶区域的反应和响应方式。此外,它还使我们能够在具有独特天气条件的地方进行测试,这可以帮助我们进一步提高该地区的能力。

您能否讨论同时包含传感器数据和标记数据的12博下载app开放数据集,以及共享此有价值数据集对12博下载app的好处?

在12博下载app,我们正在解决存在的一些最困难的问题 机器学习。为了帮助研究社区在机器感知和自动驾驶技术方面取得进步,我们发布了12博下载app开放数据集,该数据集是最大,种类最多的公开可用的完全自动驾驶数据集之一。研究人员可以免费获得 12博下载app.com/open,该数据集由1,950个高分辨率传感器数据段组成,涵盖了从稠密的城市中心到郊区景观的各种环境,以及白天和黑夜,黎明和黄昏,日晒雨淋期间收集的数据。 2020年3月,我们还发起了12博下载app开放数据集挑战赛,为研究社区提供了一种测试其专业知识并了解其他人正在做什么的方法。

您个人认为,该行业达到真正的5级自治需要多长时间?

我们已经对此进行了十多年的研究,因此,我们从该经验中受益,知道该技术将逐步走向世界。无人驾驶技术是如此复杂,由于从硬件传感到机器学习等众多领域的进步,我们已经走到今天的今天。这就是为什么我们一直采用逐步的方法将此技术引入世界的原因。我们认为这是最安全,最负责任的方式,并且我们也从骑手和合作伙伴那里得知他们对我们在社区中安全部署这项技术所采取的这种周到且谨慎的方法表示赞赏。

感谢您的采访,希望了解更多信息的读者可以访问 12博下载app Via.

安东尼·塔迪夫(Antoine Tardif)是 Futurist 他对AI和机器人技术的未来充满热情。他是 BlockVentures.com并已投资了50多个AI和区块链项目。他是的联合创始人 Securities.io 一个专注于数字证券的新闻网站,是unite.AI的创始合伙人。他也是 福布斯技术委员会。