在过去的几年里，Snapchat不断增长的Lenses系列已经成为智能手机支持的增强现实的最佳范例，用户可以毫不费力地在照片中添加特定位置的面部修饰、环境效果和滤镜。现在母公司Snap让创作者在Lens中使用自己提供的机器学习模型，希望这个程序能够激发ML开发者和创意人之间的伙伴关系。
今天的主要变化是Lens Studio的更新，这是一个免费的桌面开发应用程序，用于创建Snapchat的大多数AR过滤器。一个名为SnapML的新功能(独立于IBM的同名训练工具)将使开发人员能够将机器学习模型导入电动镜头，从而扩大Snapchat可以立即识别的真实物体和身体部位的范围。作为这项技术的一个例子，Lens Studio将包括一个由Wannaby开发的新的足部跟踪ML模型，使开发人员能够为足部制作Lens。
对于Snap来说，挑战将是吸引ML开发者进入Lens Creative Library，因为开发者可能不会立即为他们训练有素的神经网络提供明显的商业应用，而Lens的创作者(营销人员)可能只是等待可以跟踪他们的脚的东西，这样他们就可以让人们虚拟地试穿鞋子。Snapeitan的Eitan Pilipski告诉VentureBeat，该公司将“推动创作者与ML开发人员建立联系，这样他们就可以一起构建体验”，这样双方就可以专注于自己的优势，而不是试图融入对方不舒服的渠道。
除了Wannaby，包括CV2020、视觉滤镜制造商Prisma和几位未透露姓名的Lens创作者在内的开发人员也在开发基于SnapML的滤镜。Lens Studio还增加了新的手势模板，以及“面部地标”和“面部表情”，在某些情况下可以改善面部跟踪。此外，面向用户的Snapchat应用程序将扩展其“扫描”功能，使其能够识别90%的所有已知植物和树木、近400种狗、包装食品标签和路易威登标志，以及SoundHound集成，使用户仅使用语音命令即可找到相关镜头。
Snap还在预览一项新功能，即本地镜头，它将“很快”允许用户在社区中共享持久的增强现实内容。Local Lenses承诺创建一个大规模的点云来识别一个区域中的多个建筑。这是该公司之前地标功能的延伸，用于绘制整个城市街区，像Immersal和Scape(现为脸书所有)等公司都在追求同样的愿景。与主要专注于地图和营销应用的竞争对手不同，Snap计划让用户使用数字内容来改变社区的外观。
虽然这项功能背后的技术很吸引人，但考虑到当前关于“黑人的命也是命”运动的社会动荡，Snap今天推广这项功能的方式有些尴尬。该公司表示，Snapchat用户将能够“用彩色油漆装饰附近的建筑”，这些颜色将对朋友可见。虽然它的样本视频更像是任天堂的Splatoon，而不是世嘉的Jet Set Radio，但它使用了大量多彩的喷溅，而不是书面文字，但我们必须检查Local Lenses是仅用于积极的目的，还是正在朝着类似ar涂鸦的步骤发展。随着抗议的继续，真实的城市正在发生什么。
标签：