Agent-S

Agent-S 是一个像人类一样使用计算机的开放式代理框架，它通过统一的代理-计算机接口实现与计算机的自主交互。该系统允许 AI 代理通过屏幕截图观察计算机屏幕，使用大型多模态模型（LMM） 规划行动，通过基于接地坐标的交互执行操作，通过记忆系统从过去的经验中学习