使用AISense在虚拟机上更快地构建和自动化机器人程序产品见解萨巴米尔扎2020年8月4日，星期二785个视图6分钟阅读标签：人工智能智能自动化RPA公司机器人过程自动化（roboticprocessautomation，RPA）是一种非常理想的自动化技术，它与应用程序无关，可以像人类一样跨业务系统工作。RPA可以自动化涉及现代基于web的应用程序和遗留技术的过程。人类通过屏幕与业务应用程序进行可视化交互，并通过计算机键盘进行物理交互。RPA机器人可以通过直接访问应用程序并将应用程序的用户界面（UI）的元素分解为对象来模拟人机交互-识别这些对象在屏幕上的位置，然后将规则和操作与这些对象关联起来以执行任务。但是，如果应用程序只能通过虚拟机（VM）而不能直接访问直接交互，那么会发生什么情况？如果UI不断变化或者应用程序在不断变化呢？一个实用而强大的人工智能（AI）应用可以解决这些挑战。这就是AISense的自动化所在。这是一个基于机器学习（ML）的安全屏幕录制器，可以无缝地在所有场景中实现自动化。AISense的设计不仅可以模拟人类对UI的感知和交互方式，还可以从用户和UI之间的每一次交互中学习，以适应可能发生的复杂性或变化。在虚拟环境中实现自动化的现代AI和ML技术企业通常使用虚拟机或环境为其员工提供对业务应用程序的访问。与虚拟UI交互的一种常见方式是使用Citrix Systems，这是一种支持移动工作方式的云计算服务。随着远程工作人员的增加，Citrix在许多公司中扮演着至关重要的角色，因为安全原因，应用程序只能远程访问。在这种情况下，Citrix服务器会不断地向用户设备上安装或访问的客户端发送实时应用程序的屏幕截图或图像。这使得基于对象的自动化不可行，并且特定于应用程序的方法不可伸缩，因为作为恒定图像流的对象不是静态的，并且会创建复杂的UI。当基于对象的自动化失败、不可靠或用户与复杂的用户界面交互时，AISense将提供帮助。因为AISense ML模型是在数千个图像和数百万个UI控件示例上训练的，所以记录器可以有效地精确地识别这些图像中所有唯一的控件和对象。这使客户能够自动化流程和工作流，从而减少在虚拟机中构建和自动化所花费的时间。跟上用户界面的变化随着应用程序用户界面变得越来越先进，为了适应更快的发布周期，自动化记录器必须快速自动地发展。在应用程序UI可能会不断更改并重新排列屏幕上的对象的情况下，AISense可以识别应用程序中的项目，而不考虑其排列方式，从而允许您正确地识别相应应用程序中的所有对象。这确保了任何现有的bot都不需要任何修改，即使在业务应用程序发生更改时也是如此。工作原理AISense是使用现代ML模型和体系结构（deep neural networks）以及我们自己的专有技术构建的，这些技术利用这种范式来建模复杂应用程序接口的独特性质。AISense ML模型非常精确，但计算效率非常高，可以在个人计算机上使用的实用CPU上运行—不需要强大而昂贵的GPU。AISense是作为一个自学习架构构建的，并且随着每次用户交互的进行而不断改进。为了不断改进ML模型，我们的用户可以选择限制反馈机制，只返回元数据，从图像中删除所有敏感信息，以保护用户隐私。此过程允许我们在内部重新创建模拟原始应用程序UI映像的映像，而不会侵犯您的隐私。艾森斯与其他所有录音机的区别是什么？答案是灵活性。使用旧式记录器时，您可能仅限于自动执行少量控件，或仅限于特定的浏览器或分辨率。使用AISense，您可以在任何浏览器上以任何分辨率录制。无论您是在业务流程外包（BPO）办公室或呼叫中心，并且经常需要遵守不同解决方案的系统，AISense都会使流程无缝。除了支持更多分辨率和不受浏览器限制之外，AISense还引入了对附加控件的额外支持，如图像按钮、从描述或标签读取文本、滚动等。这使得AISense能够解决一个典型的自动化问题，即由于分辨率、浏览器或操作系统的机器配置发生变化，在一个用户的机器上构建的机器人程序无法在其他机器上可靠地工作。改善体验随着应用程序用户界面变得越来越复杂，用户可以通过使用AISense避免令人沮丧的机器人执行体验。例如，如果您正在构建一个机器人程序以在Salesforce Lightning UI中创建销售线索，则可以在不同浏览器（如Google Chrome、Internet Explorer、Firefox或Microsoft Edge）上部署该机器人程序，而无需对脚本进行任何更改。此外，相同的bot将能够在salesforceclassicui中成功运行，其中UI元素以不同的布局呈现，同样不需要任何脚本更改。AISense为客户提供了在其各自应用程序中正确识别所有对象所需的弹性。自动化动态应用程序AISense的另一个与众不同之处在于它能够自动化动态应用程序，其中UI元素不仅改变了它们在屏幕上的位置，而且还可以根据业务流程中正在处理的数据在屏幕上引入新的UI元素。此功能现在可用。无论您使用的是遗留应用程序、通过Citrix公开的应用程序，还是通过远程桌面协议（RDP）访问应用程序，AISense都可以通过降低创建自动化所需的技术复杂性来构建更多的机器人程序。AISense是一个理想的解决方案，对于那些与缺乏准确识别对象能力的记录器斗争的用户来说，AISense常常导致基于对象的自动化失败。借助AISense的人工智能功能，用户可以受益于其对分辨率、缩放和UI更改的弹性支持，以及具有闭环反馈的用户友好和基于web的界面，以减少虚拟机构建和自动化所花费的时间。亲自体验艾森斯。艾斯特里分享这个：57分享