// 01 PC Agent-E 是什么
PC Agent-E是由上海交通大学与 GAIR 实验室联合开发的高效计算机使用智能体训练框架，旨在通过少量高质量的人类演示数据，训练出具备强大计算机操作能力的 AI 智能体。该项目已在 GitHub 开源，并在多个基准测试中取得了领先的性能表现。
🧠 PC Agent-E 是什么？
PC Agent-E 是一个高效的 AI 训练框架，专为培养具备人类级计算机操作能力的智能体而设计。它通过创新的数据增强方法，利用少量人类演示数据，生成丰富的训练样本，从而显著提升智能体在实际操作中的表现。
🚀 如何使用 PC Agent-E？
获取代码：访问 GitHub 仓库 下载项目代码。
安装依赖：根据项目提供的说明，安装所需的依赖环境。
准备数据：使用提供的工具收集或加载人类操作轨迹数据。
训练模型：运行训练脚本，利用增强后的数据训练智能体模型。
评估性能：在提供的基准测试环境中评估模型的操作能力。
🔧 主要功能
高效的数据增强：通过“Trajectory Boost”技术，从少量人类轨迹中生成多样化的训练样本。
思维过程建模：重建人类操作中的思维过程，提升模型的决策能力。
跨平台泛化能力：在不同操作系统上均表现出良好的适应性。
开源资源丰富：提供完整的代码、模型和数据，方便研究和应用。
⚙️ 技术原理
PC Agent-E 的核心在于其四个关键组件：
轨迹收集（Trajectory Collection）：使用 PC Tracker 工具收集人类操作轨迹，包括任务描述、屏幕截图和操作动作。
思维重建（Thought Completion）：利用 Claude 3.7 Sonnet 模型，重建人类在每一步操作中的思维过程。
轨迹增强（Trajectory Boost）：基于现有轨迹，生成多样化的替代操作，构建丰富的训练数据。
智能体训练（Agent Training）：使用增强后的数据，训练具备强大操作能力的智能体模型。
该框架采用 ReAct 范式，结合视觉和语言信息，提升模型的推理和操作能力。
🎯 应用场景
自动化办公：自动完成文档编辑、数据分析等任务，提高办公效率。
软件测试：模拟用户操作，发现软件中的错误和问题，提升软件质量。
教育辅助：作为虚拟助教，帮助学生完成计算机操作任务，提供即时指导。
辅助残障人士：提供辅助操作功能，方便残障人士使用计算机。
跨平台兼容：在不同操作系统之间迁移和执行任务，实现无缝切换。
📂 项目地址
GitHub 仓库：https://github.com/GAIR-NLP/PC-Agent-E
HuggingFace 模型库：https://huggingface.co/henryhe0123/PC-Agent-E
