iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性

智能化的功能又来了!这就是 10.0 中新增加的 AI 人工智能技术 -“智能视觉识别技术”,简称 CVA,应用人工智能技术来进一步提升 RPA 对界面的可操作性。

那具体能做什么我们往下看⬇️

直接上图,上图之后可能大家就有点概念了,这是应用在“拾取”和“操作”功能方面的一个智能技术,拾取界面按 F11 即可开启“CV”拾取模式
iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性

当然这个拾取模式并不是第一优先的选择,而是在正常情况下不能进行拾取操作的时候,可以使用该拾取模式(注意需要联网),比如无法拾取的元素、图片,也可以对远程桌面中的界面进行处理操作!

iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性

它是基于视觉识别进行操作的,拾取时设计器会识别出快照结果,再基于智能视觉解析技术在图片内进行细粒度拾取,并生成控件查找路径和视觉查找路径,而在程序运行时,会根据使用者设定需求自动对界面进行视觉识别,以完成相关自动化的操作,同时也兼容并支持偏移的方式进行自动化操作。


以 QQ 登录为例(因为大家都知道 QQ 登录界面拾取不了的),我们来简单看下如何操作:

第一步,在普通拾取状态下,先将蓝色的拾取框确定你要拾取的元素的外层框体上
iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性

第二步,按下 F11 键切换为“CV 拾取”模式,此时会联网进行 CV 解析过程,并识别出快照结果
iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性

第三步,解析完成后,再次移动鼠标对框体内的需要操作的元素进行拾取
iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性

第四步,拾取完之后就可以了,自动生成控件查找路径和视觉查找路径,以及拾取元素在解析图片中的偏移量。当然,也支持通过修正偏移量来变更点击位置
iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性

这么牛气的功能,让大家操作就是这么简单!
iS-RPA 10.0 前瞻系列(10) - 人工智能技术提升界面可操作性