数据科学 Skill技能列表

数据血缘技能Skill lineage

4.5

此技能用于生成任务依赖关系图(数据血缘),通过分析SQL变换文件中的依赖关系,可视化数据血缘,支持多种输出格式如DOT、SVG、PNG、JSON,便于数据工程和数据治理。关键词:数据血缘、任务依赖、SQL分析、数据可视化、数据工程。

摄取技能Skill ingest

4.5

摄取技能是一个数据处理命令,用于从指定文件路径直接加载数据到数据域的表中。适用于程序化或API驱动的数据摄取场景,支持ETL开发、数据工程、数据治理等。关键词:数据摄取、文件加载、ETL工具、数据管道、数据处理、量化金融、证券投资。

YML到DDL技能Skill yml2ddl

4.5

yml2ddl技能是一个数据工程工具,用于从Starlake YAML定义自动生成SQL DDL(数据定义语言)语句,支持BigQuery、Snowflake、PostgreSQL等多种目标数据仓库。它通过类型映射简化数据库表结构的创建和管理,提升数据管道开发效率,适用于数据仓库建设和数据治理场景。关键词:SQL DDL, YAML, 数据仓库, 数据工程, 数据库管理, ETL开发, Starlake。

文化审查技能Skill cultural-review

4.5

文化审查技能是一个专注于评估软件代码、功能特性与内容是否符合文化敏感性及原住民数据主权OCAP框架(所有权、控制权、访问权、持有权)合规性的专业指南。它提供详细的检查清单、敏感度分级标准、审批工作流程和风险标识,帮助开发者和组织在涉及原住民知识、故事和数据的项目中,确保技术实现尊重文化传统、保护数据主权并满足伦理要求。关键词:文化审查,原住民数据主权,OCAP框架,文化敏感性,数据伦理,合规检查,软件开发伦理,数据治理,原住民知识保护。

X社交媒体数据分析报告生成器Skill x-report-generator

4.5

X社交媒体数据分析报告生成器是一款基于Playwright浏览器自动化技术的专业工具,专门用于爬取X平台(原Twitter)的真实数据,进行深度数据统计分析,并自动生成精美的可视化HTML报告,支持导出为高清图片。该工具适用于社交媒体数据分析、竞品监测、舆情分析、营销效果评估等场景,提供关键词搜索、用户分析、情感分析、热门标签统计等核心功能。

仿真实验设计师Skill simulation-experiment-designer

4.5

仿真实验设计师是一个专注于高效设计和分析仿真实验的专业技能。它提供了一套完整的实验设计、方差缩减、优化和敏感性分析工具,用于系统仿真、场景分析和性能优化。关键词:仿真实验设计、实验设计DOE、拉丁超立方抽样、方差缩减技术、响应曲面建模、敏感性分析、仿真优化、统计检验、元模型拟合、场景分析。

天气查询APISkill weather

4.5

这个技能提供全球天气查询API,用于获取当前天气状况和多日天气预报,支持通过城市名称查询,可返回温度、降水概率、风速、湿度等详细气象数据。适用于旅行规划、户外活动、事件安排等场景。关键词:天气API、天气预报、气象数据、城市查询、温度预测、降水概率、风速湿度、SEO优化。

智能网页爬虫Skill smart-web-scraper

4.5

基于 Playwright 智能爬取网页内容,内置绕过 Cloudflare 等反爬机制的能力,提供简单模式和隐身模式两种方案应对不同反爬强度,输出网页标题、文本内容和截图。关键词:网页爬虫、反爬虫、Cloudflare绕过、Playwright、动态渲染、网页截图、JavaScript渲染。

RingLead数据去重Skill ringlead-dedup

4.5

RingLead 数据去重技能是一个专注于企业CRM数据治理的自动化工具。它通过智能算法实现重复记录检测与合并、数据标准化清洗、以及线索与客户账户的精准匹配。核心功能包括模糊匹配、数据质量评分、自动合并规则执行,旨在提升销售数据完整性、优化线索分配流程并增强客户关系管理效率。关键词:CRM数据去重,数据质量平台,线索匹配,数据清洗,RingLead集成,销售自动化,数据治理。

BigQueryCLI数据查询技能指南Skill bigquery

4.5

本技能指南详细介绍了如何使用BigQuery命令行工具(bq)进行数据仓库查询和元数据检查,特别针对Monzo公司的数据分析项目。内容涵盖INFORMATION_SCHEMA元数据查询、数据敏感性处理、表结构检查、行数统计、模式匹配等核心功能,适用于数据工程师、分析师和开发人员进行安全高效的数据探索和验证工作。关键词:BigQuery CLI, bq命令, 数据仓库查询, INFORMATION_SCHEMA, 元数据检查, 数据敏感性, 表结构分析, 数据工程工具, Google Cloud, 数据分析工作流

数据工程师Skill data-engineer

4.5

数据工程技能专注于构建和管理可扩展的数据管道、数据仓库和流处理系统,用于数据提取、转换、加载(ETL)和数据分析基础设施,支持数据质量监控、大数据处理和数据建模。关键词:数据工程、ETL、数据仓库、大数据、数据管道、Apache Airflow、Apache Spark、数据分析。

数据湖平台Skill data-lake-platform

4.5

数据湖平台技能用于构建和操作生产级数据湖与数据湖屋,涵盖数据摄取、转换、存储、查询和服务,支持批处理、流式处理和治理功能,关键词:数据湖、数据湖屋、数据工程、大数据、分析平台、数据治理、摄取、转换、存储、查询。