搜索结果: "爬虫"
网络浏览器自动化Skill web-browser
网络浏览器自动化技能,基于 Chrome/Chromium 的 CDP 协议,提供网页导航、表单交互、JavaScript 执行、内容抓取、屏幕截图、UI 验证和性能基准测试功能,适用于前端开发、自动化测试和性能优化。关键词:浏览器自动化、Chrome CDP、网页测试、性能基准、JavaScript、爬虫、UI 验证。
智能网页爬虫Skill smart-web-scraper
基于 Playwright 智能爬取网页内容,内置绕过 Cloudflare 等反爬机制的能力,提供简单模式和隐身模式两种方案应对不同反爬强度,输出网页标题、文本内容和截图。关键词:网页爬虫、反爬虫、Cloudflare绕过、Playwright、动态渲染、网页截图、JavaScript渲染。
SEO优化Skill seo
这个技能专注于技术SEO、页面优化和结构化数据,基于Lighthouse SEO审计和Google搜索指南,帮助提高网站的搜索引擎可见性和排名。包括爬虫控制、XML站点地图、URL结构、HTTPS安全、标题标签优化、元描述、图像SEO、内部链接策略、结构化数据(如JSON-LD)实施、移动SEO和国际SEO优化,旨在提升网站在搜索引擎中的表现和用户访问体验。适用于网站开发、内容管理和数字营销领域。
Firecrawl网页抓取工具Skill firecrawl-web
Firecrawl Web 技能是一个专业的网页数据抓取与处理工具,提供网页内容获取、屏幕截图、结构化数据提取、网络搜索和文档站点爬取功能。支持 Markdown 格式输出、JSON 模式数据提取、批量文档爬取,适用于数据采集、内容分析、信息监控和文档学习等场景。关键词:网页抓取、数据提取、网络爬虫、内容采集、API 集成、结构化数据、文档爬取、信息检索。
AIsaTavily搜索工具Skill aisa-tavily
AIsa Tavily 搜索工具是一个专为AI智能体设计的网络搜索接口,通过调用Tavily API并经由AIsa的统一网关进行优化,能够快速、精准地抓取和返回网络上的相关信息。它支持常规搜索和深度研究模式,并能针对新闻等特定主题进行过滤,同时提供从指定URL提取内容的功能。该工具旨在提升AI代理在信息检索、数据分析和内容生成等任务中的效率和准确性。关键词:AI搜索,Tavily API,网络爬虫,信息检索,AI智能体,数据提取,AIsa网关。
塔维利网络搜索Skill tavily-search
塔维利网络搜索工具是一个基于Tavily API的智能搜索技能,主要用于实时信息检索、问题解答和主题研究。它能够快速获取最新的网络信息,验证事实准确性,并提供全面的背景资料。关键词:实时搜索、信息检索、网络爬虫、数据验证、研究工具、Tavily API、智能搜索、最新资讯。
Cloudflare浏览器渲染自动化Skill cloudflare-browser-rendering
这个技能用于通过Cloudflare的浏览器渲染API实现无头浏览器自动化,包括截图捕获、PDF生成、网页内容提取和自动化测试。它支持多种集成方式,如REST API、Workers绑定(使用Puppeteer或Playwright)、MCP服务器和AI驱动的自动化,适用于网页爬虫、数据提取、应用测试和AI代理控制。关键词:浏览器自动化、截图、PDF生成、网页爬虫、Cloudflare Workers、无头浏览器、自动化测试、AI驱动。
网络爬虫Skill web-scraper
网络爬虫技能用于抓取网页内容并转换为干净的 Markdown 格式,适用于自动化数据提取、文章阅读和信息收集。包含关键词如 Web 抓取、HTML 转换、Markdown、数据爬取、网页解析和自动化脚本。
网页抓取器Skill web-scraper
这是一个用于自动化从网页中提取和处理数据的技能。它支持使用CSS选择器和XPath进行智能解析,并内置了速率限制和错误处理机制,确保抓取过程高效、稳定且符合规范。适用于数据采集、竞品分析、价格监控、新闻聚合等场景。关键词:网页抓取,数据提取,HTML解析,自动化工具,网络爬虫,数据采集,信息提取,Puppeteer,Cheerio。
营销AI搜索优化Skill marketing-ai-search-optimization
本技能专注于AI搜索与答案引擎优化(GEO),通过技术设置如爬虫控制和内容策略,提升网站在ChatGPT、Perplexity、Gemini、Google AI概述等平台的可见性。包括构建查询库、优化页面结构和测量模型份额,旨在让内容更易被AI助手引用和检索,从而驱动流量和增长。关键词:AI搜索优化、GEO、爬虫控制、引用策略、内容优化、SEO、可见性提升。
Cloudflare浏览器渲染技能Skill cloudflare-browser-rendering
这个技能是关于使用Cloudflare Browser Rendering服务进行浏览器自动化。它支持通过Puppeteer或Playwright工具在Cloudflare Workers上实现屏幕截图、PDF生成、网页抓取、自动化测试等任务。适用于开发者和企业,用于构建高效、可扩展的云原生应用。关键词:浏览器渲染, Cloudflare, Puppeteer, Playwright, 屏幕截图, PDF生成, 网页抓取, 浏览器自动化, Serverless, 无头浏览器, 网络爬虫
Twitter数据抓取工具Skill twscrape
twscrape是一个专业的Python库,专门用于Twitter/X社交媒体数据抓取和爬虫开发。通过GraphQL API实现高效数据采集,支持多账号轮换管理、异步并行操作、代理配置和会话持久化。适用于社交媒体监控、舆情分析、用户行为研究、趋势挖掘和大规模数据收集场景。关键词:Twitter爬虫、社交媒体数据采集、Python数据抓取、账号轮换、GraphQL API、异步爬虫、数据挖掘、舆情监控。