搜索结果: "爬虫"

4.5

ChromeDevTools代理技能Skill chrome-devtools

这是一个用于浏览器自动化和网页调试的技能,通过Puppeteer实现自动化截图、性能分析、网络监控和Web爬虫功能,适用于Web开发测试和优化。关键词包括浏览器自动化、Puppeteer、Chrome DevTools、网页测试、性能监控、网络流量分析、JavaScript调试。

4.5

网页搜索Skill web-search

网页搜索技能允许用户通过 DuckDuckGo 搜索引擎快速检索网络上的实时信息、验证事实、查找文档和解答问题,返回标题、URL 和摘要片段,适用于信息获取、知识管理和数据验证场景。关键词:网页搜索,DuckDuckGo,信息检索,实时数据,SEO优化,网络爬虫,事实核查。

4.5

Playwright浏览器自动化Skill browsing-with-playwright

Playwright浏览器自动化技能是一个基于Playwright MCP的网页自动化工具,支持网站导航、表单填写、元素点击、截图和数据提取等功能。适用于网页抓取、UI测试、自动化测试、数据采集、网页爬虫和浏览器交互自动化等场景。关键词:浏览器自动化、Playwright、网页抓取、UI测试、数据采集、自动化测试、网页爬虫、表单提交、截图工具。

4.5

ActionbookScraperSkill actionbook-scraper

Actionbook Scraper技能是一个自动化网页数据抓取工具,能够使用Actionbook验证的选择器生成和验证网络爬虫脚本,自动修正错误,确保数据抓取的准确性和效率。

4.5

PuppeteerSkill puppeteer

Puppeteer是一款由Google开发的Node.js库,用于自动化控制无头Chrome或Chromium浏览器。它主要用于网页爬虫、自动化测试、PDF生成和网页截图。通过模拟用户操作,Puppeteer可以高效地处理动态网页内容,是前端开发、测试和DevOps领域的强大工具。

4.5

浏览器自动化助手Skill agent-browser

浏览器自动化助手是一款功能强大的网页自动化测试与数据提取工具。它支持自动化导航、表单填写、元素交互、截图录屏、网络监控等操作,广泛应用于Web应用测试、数据抓取、UI自动化、回归测试等场景。核心功能包括:浏览器控制、元素定位、交互模拟、状态管理、性能调试。关键词:浏览器自动化、网页测试、数据提取、UI测试、自动化脚本、Web爬虫、回归测试、端到端测试。

4.5

网络存档Skill web-archiving

这个技能涉及使用各种工具和方法来保存和检索网页内容,适用于新闻、研究和法律目的。包括Wayback Machine、Archive.today、ArchiveBox等服务的集成,以及Python代码实现,用于网页存档、历史访问和数据保存。关键词:网页存档、网络爬虫、数据保存、历史访问、法律证据、Python编程、API集成。

4.5

ZyteAPI自动化Skill zyte-api-automation

此技能通过 Rube MCP 和 Composio 工具包,自动化 Zyte API 任务,实现高效的网页数据提取和工作流管理。关键词:Zyte API, Rube MCP, Composio, API 自动化, 数据工程, 网页爬虫。

4.5

SiteArchitectureSkill site-architecture

这项技能涵盖了使网站内容能够被搜索引擎和AI爬虫发现的技术基础,包括优化robots.txt、站点地图、元标签、核心网页指标等,以提高网站的可发现性和搜索引擎排名。

4.5

浏览器自动化文档发现技能Skill browser-discovery

这是一个用于自动化浏览器操作以发现和抓取网页文档的技能。当网站使用JavaScript动态渲染内容导致传统curl工具失效时,该技能能自动检测可用的浏览器工具(如Antigravity、Cursor、Playwright),执行页面导航、等待JS渲染,并提取结构化数据。适用于JS渲染网站文档抓取、动态内容采集和自动化测试场景。关键词:浏览器自动化、JS渲染、文档发现、网页抓取、Playwright、Antigravity、Cursor、动态内容采集、自动化测试、爬虫工具。

4.5

网页数据抓取器Skill web-scraper

网页数据抓取器是一款基于CSS选择器的自动化工具,专门用于从网站高效提取结构化数据。支持分页抓取、速率控制防止被封,可输出JSON等多种格式。适用于数据采集、市场分析、竞品监控等场景。关键词:网页爬虫、数据抓取、HTML解析、自动化采集、CSS选择器、分页抓取、数据提取工具。

4.5

SEO处理技能Skill seo-handler

SEO处理技能是一个针对Next.js框架的搜索引擎优化管理工具。它专注于站点地图管理、元数据配置、结构化数据生成、服务器端渲染优化和爬虫控制,旨在提升网站在Google、百度等搜索引擎中的排名和可见性。核心功能包括自动生成站点地图、优化OpenGraph标签、注入JSON-LD结构化数据、配置ISR缓存策略以及管理robots.txt文件。适用于前端开发者、SEO工程师和网站管理员,帮助实现技术SEO的最佳实践。