触屏也能盲打？AI已经学会像人类一样在手机上打字！

---

  新智元报道  

来源：TechXplore

编辑：好困

某「小众品牌」推出的全键盘手机 

自从苹果推出iPhone之后，触摸屏幕一瞬间就成为了手机的标配。

而在使用触屏时，完全是在依靠眼睛去引导手指打字，或者检查拼写错误。从某种意义上来说，这是一个并不简单的协同任务。

不过，AI现在已经学会了用人类的方式在手机触屏上打字。没想到吧！

人类在手机上打字时，眼睛和手指的移动

为了理解人们在触摸屏上的打字方式，阿尔托大学和芬兰人工智能中心（FCAI）的研究人员创建了一个AI模型来预测人们的打字方式。

论文：https://userinterfaces.aalto.fi/touchscreen-typing/resources/touchscreen_typing_as_optimal_adaptation.pdf

项目：https://github.com/aditya02acharya/TypingAgent

这项研究通过强化学习模型来分析并模拟人类在打字时眼睛和手指的运动方式。

像人类一样，AI会在打字时会产生错误，发现错误，并在之后纠正错误。

AI出现拼写错误，并进行检测和更正。其中，蓝色和绿色分别代表眼睛和手指的运动轨迹。

AI模型还可以预测人们如何适应输入方式的变化，例如，使用新的带拼写检查键盘或是不同设计的键盘时，打字输入的风格会发生什么变化。

AI模拟使用带拼写检查的键盘时，眼睛和手指的移动。其中，蓝色和绿色分别代表眼睛和手指的运动轨迹。

「以前，主要是从手指如何移动的角度来理解触摸屏打字。现在通过AI的应用，我们可以更真实地预测人们在手机上打字的方式。」Jussi Jokinen博士说。

AI模型和人类在输入相同的一句话时的手指移动和眼睛注视位置的热图（heat map）。左：AI模拟的结果；右：人类打字的结果。

其中，绿色表示眼睛的位置，蓝色表示手指的位置， 阴影越深，说明注视时间就越长，移动的次数越频繁。

模型由四个不同的代理组成：监督控制，引导，视觉和校对。

这三个子任务代理与任务环境（移动设备）交互：引导代理可以按键盘的按键并观察当前手指的位置。校对代理会观察输入的文本并检查是否存在错误。

为了模拟有限的可视范围，在引导和校对之间共享视觉，从而限制了这些代理同时进行观察的能力。 

策略（

关注公众号：拾黑（shiheibook）了解更多

[广告]赞助链接：

四季很好，只要有你，文娱排行榜：https://www.yaopaiming.com/
让资讯触达的更精准有趣：https://www.0xu.cn/