很多朋友在 GitHub 上问我,OpenClaw 框架到底和 LangChain 有什么本质区别?一句话总结:我们是专为『控制物理机』而生的。这不仅是框架的差异,更是理念的降维打击。
1. 告别脆弱的 DOM 解析:多模态视觉接管
传统自动化极度依赖 DOM 树或者操作系统底层的 Accessibility API。但在 LobsterAI 中,我们直接引入了轻量级端侧 VLM。Agent 通过截屏获取上下文,直接『看懂』哪里是按钮、哪里是输入框。这意味着,哪怕是十年前用 Delphi 写的、完全没有 API 的内部财务系统,它也能像人眼一样精准定位并操作。
2. Local-First:数据不出域的底层逻辑
我们重写了整个意图解析引擎,将其压缩到了 150MB 的内存占用中,使其可以流畅运行在普通的 M1 芯片甚至是轻薄本上。为什么非要这么做?因为当你让 Agent 读取公司财报时,任何云端调用都是违规的。通过本地量化模型(如 Llama-3-8B-Instruct-GGUF),我们实现了 100% 的数据物理隔离。
实战案例:财务小王每周五都要登录一个非常古老的银行网银系统(只支持 IE 浏览器,完全没有 API)下载流水。借助 LobsterAI 的视觉引擎,Agent 直接打开 IE,识别出那个像素极低的『下载报表』按钮并精准点击。随后,它调用内置的 Python 数据清洗 Skill,把乱码的 CSV 格式化为标准的 Excel 透视表,最后通过企微发给主管。全流程 0 人工干预。
5. Gatekeeper 权限门控系统
让 AI 拥有删除文件或发送邮件的权限是极其危险的。因此我们在底层植入了 Gatekeeper 模块。每一次敏感的系统调用(如 os.remove 或 requests.post)都会被拦截,并在屏幕上弹出一个确认框。你可以清晰地看到 Agent 想要做什么、甚至它的推理思考链(Chain of Thought),只有你点头,动作才会执行。
代码是冰冷的,但工具是有温度的。我们希望 OpenClaw 框架能成为连接 LLM 算力与真实物理世界的桥梁。如果你在实战中写出了有意思的 Skill,非常欢迎向我们的官方插件库提交 PR,让全世界的开发者都能用到你的心血之作。