name: 浏览器自动化代理 description: 自动化浏览器交互,用于Web测试、表单填写、屏幕截图和数据提取。当用户需要导航网站、与网页交互、填写表单、截图、测试Web应用程序或从网页提取信息时使用。 allowed-tools: Bash(agent-browser:*)
使用agent-browser进行浏览器自动化
快速开始
agent-browser open <url> # 导航到页面
agent-browser snapshot -i # 获取交互元素及引用
agent-browser click @e1 # 通过引用点击元素
agent-browser fill @e2 "text" # 通过引用填充输入
agent-browser close # 关闭浏览器
核心工作流
- 导航:
agent-browser open <url> - 快照:
agent-browser snapshot -i(返回带引用的元素,如@e1、@e2) - 使用快照中的引用进行交互
- 在导航或DOM重大变化后重新快照
命令
导航
agent-browser open <url> # 导航到URL(别名:goto、navigate)
# 支持:https://、http://、file://、about:、data://
# 若无协议,自动添加https://
agent-browser back # 后退
agent-browser forward # 前进
agent-browser reload # 重新加载页面
agent-browser close # 关闭浏览器(别名:quit、exit)
agent-browser connect 9222 # 通过CDP端口连接到浏览器
快照(页面分析)
agent-browser snapshot # 完整可访问性树
agent-browser snapshot -i # 仅交互元素(推荐)
agent-browser snapshot -c # 紧凑输出
agent-browser snapshot -d 3 # 限制深度为3
agent-browser snapshot -s "#main" # 限定到CSS选择器
交互(使用快照中的@refs)
agent-browser click @e1 # 点击
agent-browser dblclick @e1 # 双击
agent-browser focus @e1 # 聚焦元素
agent-browser fill @e2 "text" # 清除并输入
agent-browser type @e2 "text" # 输入而不清除
agent-browser press Enter # 按键(别名:key)
agent-browser press Control+a # 组合键
agent-browser keydown Shift # 按住键
agent-browser keyup Shift # 释放键
agent-browser hover @e1 # 悬停
agent-browser check @e1 # 勾选复选框
agent-browser uncheck @e1 # 取消勾选复选框
agent-browser select @e1 "value" # 选择下拉选项
agent-browser select @e1 "a" "b" # 选择多个选项
agent-browser scroll down 500 # 滚动页面(默认:向下300像素)
agent-browser scrollintoview @e1 # 滚动元素进入视图(别名:scrollinto)
agent-browser drag @e1 @e2 # 拖放
agent-browser upload @e1 file.pdf # 上传文件
获取信息
agent-browser get text @e1 # 获取元素文本
agent-browser get html @e1 # 获取innerHTML
agent-browser get value @e1 # 获取输入值
agent-browser get attr @e1 href # 获取属性
agent-browser get title # 获取页面标题
agent-browser get url # 获取当前URL
agent-browser get count ".item" # 计数匹配元素
agent-browser get box @e1 # 获取边界框
agent-browser get styles @e1 # 获取计算样式(字体、颜色、背景等)
检查状态
agent-browser is visible @e1 # 检查是否可见
agent-browser is enabled @e1 # 检查是否启用
agent-browser is checked @e1 # 检查是否勾选
屏幕截图与PDF
agent-browser screenshot # 保存到临时目录
agent-browser screenshot path.png # 保存到指定路径
agent-browser screenshot --full # 整页
agent-browser pdf output.pdf # 保存为PDF
视频录制
agent-browser record start ./demo.webm # 开始录制(使用当前URL和状态)
agent-browser click @e1 # 执行操作
agent-browser record stop # 停止并保存视频
agent-browser record restart ./take2.webm # 停止当前并开始新录制
录制创建新上下文,但保留会话的Cookie和存储。若无URL,自动返回到当前页面。为流畅演示,先探索再开始录制。
等待
agent-browser wait @e1 # 等待元素
agent-browser wait 2000 # 等待毫秒
agent-browser wait --text "Success" # 等待文本(或-t)
agent-browser wait --url "**/dashboard" # 等待URL模式(或-u)
agent-browser wait --load networkidle # 等待网络空闲(或-l)
agent-browser wait --fn "window.ready" # 等待JS条件(或-f)
鼠标控制
agent-browser mouse move 100 200 # 移动鼠标
agent-browser mouse down left # 按下按钮
agent-browser mouse up left # 释放按钮
agent-browser mouse wheel 100 # 滚动轮
语义定位器(替代引用)
agent-browser find role button click --name "Submit"
agent-browser find text "Sign In" click
agent-browser find text "Sign In" click --exact # 仅精确匹配
agent-browser find label "Email" fill "user@test.com"
agent-browser find placeholder "Search" type "query"
agent-browser find alt "Logo" click
agent-browser find title "Close" click
agent-browser find testid "submit-btn" click
agent-browser find first ".item" click
agent-browser find last ".item" click
agent-browser find nth 2 "a" hover
浏览器设置
agent-browser set viewport 1920 1080 # 设置视口大小
agent-browser set device "iPhone 14" # 模拟设备
agent-browser set geo 37.7749 -122.4194 # 设置地理位置(别名:geolocation)
agent-browser set offline on # 切换离线模式
agent-browser set headers '{"X-Key":"v"}' # 额外HTTP头部
agent-browser set credentials user pass # HTTP基本认证(别名:auth)
agent-browser set media dark # 模拟配色方案
agent-browser set media light reduced-motion # 浅色模式+减少动画
Cookie与存储
agent-browser cookies # 获取所有Cookie
agent-browser cookies set name value # 设置Cookie
agent-browser cookies clear # 清除Cookie
agent-browser storage local # 获取所有localStorage
agent-browser storage local key # 获取特定键
agent-browser storage local set k v # 设置值
agent-browser storage local clear # 清除所有
网络
agent-browser network route <url> # 拦截请求
agent-browser network route <url> --abort # 阻止请求
agent-browser network route <url> --body '{}' # 模拟响应
agent-browser network unroute [url] # 移除路由
agent-browser network requests # 查看跟踪的请求
agent-browser network requests --filter api # 过滤请求
标签页与窗口
agent-browser tab # 列出标签页
agent-browser tab new [url] # 新标签页
agent-browser tab 2 # 按索引切换到标签页
agent-browser tab close # 关闭当前标签页
agent-browser tab close 2 # 按索引关闭标签页
agent-browser window new # 新窗口
框架
agent-browser frame "#iframe" # 切换到iframe
agent-browser frame main # 返回主框架
对话框
agent-browser dialog accept [text] # 接受对话框
agent-browser dialog dismiss # 关闭对话框
JavaScript
agent-browser eval "document.title" # 运行JavaScript
全局选项
agent-browser --session <name> ... # 隔离浏览器会话
agent-browser --json ... # JSON输出用于解析
agent-browser --headed ... # 显示浏览器窗口(非无头)
agent-browser --full ... # 整页截图(-f)
agent-browser --cdp <port> ... # 通过Chrome DevTools协议连接
agent-browser -p <provider> ... # 云浏览器提供商(--provider)
agent-browser --proxy <url> ... # 使用代理服务器
agent-browser --headers <json> ... # HTTP头部限定到URL源
agent-browser --executable-path <p> # 自定义浏览器可执行路径
agent-browser --extension <path> ... # 加载浏览器扩展(可重复)
agent-browser --help # 显示帮助(-h)
agent-browser --version # 显示版本(-V)
agent-browser <command> --help # 显示命令详细帮助
代理支持
agent-browser --proxy http://proxy.com:8080 open example.com
agent-browser --proxy http://user:pass@proxy.com:8080 open example.com
agent-browser --proxy socks5://proxy.com:1080 open example.com
环境变量
AGENT_BROWSER_SESSION="mysession" # 默认会话名称
AGENT_BROWSER_EXECUTABLE_PATH="/path/chrome" # 自定义浏览器路径
AGENT_BROWSER_EXTENSIONS="/ext1,/ext2" # 逗号分隔的扩展路径
AGENT_BROWSER_PROVIDER="your-cloud-browser-provider" # 云浏览器提供商(选择browseruse或browserbase)
AGENT_BROWSER_STREAM_PORT="9223" # WebSocket流端口
AGENT_BROWSER_HOME="/path/to/agent-browser" # 自定义安装位置(用于daemon.js)
示例:表单提交
agent-browser open https://example.com/form
agent-browser snapshot -i
# 输出显示:文本框“Email” [ref=e1]、文本框“Password” [ref=e2]、按钮“Submit” [ref=e3]
agent-browser fill @e1 "user@example.com"
agent-browser fill @e2 "password123"
agent-browser click @e3
agent-browser wait --load networkidle
agent-browser snapshot -i # 检查结果
示例:带保存状态的认证
# 登录一次
agent-browser open https://app.example.com/login
agent-browser snapshot -i
agent-browser fill @e1 "username"
agent-browser fill @e2 "password"
agent-browser click @e3
agent-browser wait --url "**/dashboard"
agent-browser state save auth.json
# 后续会话:加载保存状态
agent-browser state load auth.json
agent-browser open https://app.example.com/dashboard
会话(并行浏览器)
agent-browser --session test1 open site-a.com
agent-browser --session test2 open site-b.com
agent-browser session list
JSON输出(用于解析)
添加--json用于机器可读输出:
agent-browser snapshot -i --json
agent-browser get text @e1 --json
调试
agent-browser --headed open example.com # 显示浏览器窗口
agent-browser --cdp 9222 snapshot # 通过CDP端口连接
agent-browser connect 9222 # 替代:连接命令
agent-browser console # 查看控制台消息
agent-browser console --clear # 清除控制台
agent-browser errors # 查看页面错误
agent-browser errors --clear # 清除错误
agent-browser highlight @e1 # 高亮元素
agent-browser trace start # 开始记录跟踪
agent-browser trace stop trace.zip # 停止并保存跟踪
agent-browser record start ./debug.webm # 从当前页面录制视频
agent-browser record stop # 保存录制
深入文档
详细模式和最佳实践,见:
| 参考 | 描述 |
|---|---|
| references/snapshot-refs.md | 引用生命周期、失效规则、故障排除 |
| references/session-management.md | 并行会话、状态持久化、并发爬取 |
| references/authentication.md | 登录流程、OAuth、2FA处理、状态重用 |
| references/video-recording.md | 录制工作流用于调试和文档 |
| references/proxy-support.md | 代理配置、地理测试、轮换代理 |
即用模板
常见模式的可执行工作流脚本:
| 模板 | 描述 |
|---|---|
| templates/form-automation.sh | 表单填充与验证 |
| templates/authenticated-session.sh | 登录一次,重用状态 |
| templates/capture-workflow.sh | 内容提取与屏幕截图 |
用法:
./templates/form-automation.sh https://example.com/form
./templates/authenticated-session.sh https://app.example.com/login
./templates/capture-workflow.sh https://example.com ./output
HTTPS证书错误
对于自签名或无效证书的站点:
agent-browser open https://localhost:8443 --ignore-https-errors