OpenAdapt开源框架：使用大型多模式模型自动化桌面工作流

OpenAdapt 是一个开源平台，利用机器学习实现 GUI 自动化。它可以记录人类演示、训练模型，并部署可在任何软件上操作的代理，支持人力资源、法律、保险、医疗、金融、物流、药房等各行业的自动化任务。该平台采用多模态模型进行自动化，省去提示工程、脚本编写或脆弱选择器的需求，并内置 PII/PHI 清洗功能，确保敏感数据安全。 一个命令即可安装所需的一切，平台可在 Intel 与 Apple Silicon Mac 上运行。用户界面简洁，命令如 'openadapt capture start' 用于开始录制任务，'openadapt doctor' 用于检查系统。该平台支持快速迭代模式，便于开发与调试，其生态系统包含官方基准、CLI 与基准查看器，可用于重播并检查代理失败。 基于 uv 工具（一个高速的 Python 包管理器），OpenAdapt 提供了一种简单高效的方式来创建可在各行各业和软件系统中使用的自动化代理。 OpenAdapt 仍在开发中，被视为 alpha 版软件，意味着它不提供任何保修。 若想了解更多关于 OpenAdapt 的信息并开始使用它，用户可以访问该项目的 GitHub 页面，并阅读关于如何安装和使用该平台的文档。 OpenAdapt 是一款在各行业和软件系统中自动化任务的前景工具，其开源特性使得开发者和研究者能够轻松参与并定制平台。