爱思助手

为研发 iPadOS 14 “随手写” 功能,苹果曾在世界各地找人写字

用于苹果平板电脑产品的系统iPadOS 14的目前已经发布,其中一项主要更新是名为“随手写(Scribble)”的功能。该功能可自动将Apple Pencil的手写内容转换为文本内容。


为研发 iPadOS 14 “随手写” 功能,苹果曾在世界各地找人写字


近日,苹果公司软件工程高级副总裁克雷格·费德里希(Craig Federighi)在接受《大众机械》Popular Mechanics 采访时,谈到了有关该功能工作原理。


iPadOS 14“随手写”功能让Apple Pencil手写笔迹变成文本输入,并应用在很多地方,例如Safari浏览器的地址栏或Messages消息中的信息。并且,苹果设备会自动将这种手写内容会转换为文本,就像打字一样。这不仅意味Apple Pencil有了新用途,还可让用户不必在键盘和Apple Pencil之间来回输入切换,尤其是靠在沙发上拿着平板浏览这种场景。


Craig向《大众机械》提到这个功能时候解释说,随手写功能的基础是数据收集。在功能开发过程中,苹果找到了世界各地的人们,并让他们使用Apple Pencil写东西:


“为理解手写笔划,我们必须进行数据收集。我们在世界各地找人并让他们写东西。给他们一支笔,让他们快速书写,缓慢书写,倾斜书写。(以便收集)所有这些变化的数据。”


该方法不同于扫描和分析现有笔迹的这种相对传统简单方法。Craig认为,对苹果公司的技术而言,仅靠静态的方式(也就是写完扫描来收集数据)是不够的。他们需要查看构成每个字的或字母笔画。 ”如果你了解笔画以及笔画如何写出来的,则可以用来消除所写内容的歧义。”


与苹果产品的大多数机器学习功能一样,所有这些处理都是在设备上完成的,而不会借助网络,这带来了另一种挑战。Craig说:“现在必须在设备本地上实时进行识别。这意味着设备的计算能力必须足够使其在本地执行该级别的计算处理。”


从这个案例中,我们能看见苹果公司的创新之处和他们习惯的做事方式。手写识别并不是什么新功能,尤其对中国用户来说,多年前黑白手机就经历过,但苹果的不同之处,正在于他们的数据识别/收集方式,是通过动态方式收集,他们收集的是人们手写时候的笔触,而不是常规的手写痕迹;另外是关于隐私的保护,他们并没有使用更高效的云端识别方式,而是将数据处理放在本地,相比云端,这种方式显然难度更高,但也相对安全,并且不会收到网络不佳的干扰。


特别声明:本文版权归文章作者所有,仅代表作者观点,不代表爱思助手观点和立场。本文为第三方用户上传,仅用于学习和交流,不用于商业用途,如文中的内容、图片、音频、视频等存在第三方的知识产权,请及时联系我们删除。