数据科学 Skill技能列表
数据迁移专家Skill data-migration-expert
数据迁移专家技能专注于确保数据库迁移、数据回填和模式变更中的数据完整性。通过验证ID映射、检查交换值、确保回滚安全性和制定验证计划,防止数据损坏。适用于涉及ID映射、列重命名或数据转换的任何迁移。关键词:数据迁移、数据完整性、数据库迁移、验证映射、回滚安全。
图表生成器Skill chart-generator
图表生成技能用于从数据创建各种类型的图表和可视化,支持多种图表库和格式(如Matplotlib、Seaborn、Chart.js、Plotly),适用于数据分析和可视化任务,关键词包括数据可视化、图表生成、数据分析、Python图表、交互式可视化。
数据工程师Skill data-engineer
数据工程技能专注于构建和管理可扩展的数据管道、数据仓库和流处理系统,用于数据提取、转换、加载(ETL)和数据分析基础设施,支持数据质量监控、大数据处理和数据建模。关键词:数据工程、ETL、数据仓库、大数据、数据管道、Apache Airflow、Apache Spark、数据分析。
数据血缘技能Skill lineage
此技能用于生成任务依赖关系图(数据血缘),通过分析SQL变换文件中的依赖关系,可视化数据血缘,支持多种输出格式如DOT、SVG、PNG、JSON,便于数据工程和数据治理。关键词:数据血缘、任务依赖、SQL分析、数据可视化、数据工程。
邓白氏数据Skill dun-bradstreet-data
邓白氏数据技能是一个商业数据集成工具,用于企业信息查询、邓氏编码匹配、公司层级映射、财务风险评估和行业分类。它通过调用D&B Direct+ API,为CRM系统、销售团队和风控部门提供权威的企业画像数据,以提升客户数据质量、优化线索评分、辅助信用决策和实现精准的区域与行业细分。关键词:邓白氏,DUNS编码,企业数据,信用风险,公司层级,行业分类,CRM集成,数据丰富化。
电子书文本提取器Skill ebook-extractor
这是一个Python工具技能,用于从EPUB、MOBI和PDF电子书中提取纯文本,支持自动化转换和分析,适用于数据处理、文本挖掘、电子书阅读和自动化处理。关键词:电子书提取、文本转换、Python脚本、数据处理、自动化工具、电子书分析。
YML到DDL技能Skill yml2ddl
yml2ddl技能是一个数据工程工具,用于从Starlake YAML定义自动生成SQL DDL(数据定义语言)语句,支持BigQuery、Snowflake、PostgreSQL等多种目标数据仓库。它通过类型映射简化数据库表结构的创建和管理,提升数据管道开发效率,适用于数据仓库建设和数据治理场景。关键词:SQL DDL, YAML, 数据仓库, 数据工程, 数据库管理, ETL开发, Starlake。
OBT设计优化器Skill OBTDesignOptimizer
OBT设计优化器是一款专注于数据仓库单一大表(One Big Table)模式设计与优化的专业工具。该技能通过智能分析源模型结构和查询模式,提供列选择优化、反规范化策略、分区聚类设计等核心功能,帮助用户在存储性能与查询效率之间找到最佳平衡点。适用于大数据分析、商业智能报表、数据仓库建设等场景,支持Snowflake、BigQuery、Redshift等主流云数据平台。
队列分析器Skill cohort-analyzer
队列分析器是一款专注于商业数据分析的技能工具,用于深入分析客户队列、收入留存、生命周期价值(LTV)和客户获取成本(CAC)等关键指标。它通过构建收入队列矩阵、绘制留存曲线、跟踪LTV/CAC趋势,帮助企业评估客户质量、洞察业务健康状况和单位经济学的演变。适用于风险投资、财务分析、业务增长和客户成功等场景。关键词:队列分析、收入留存、LTV/CAC、客户生命周期价值、留存曲线、单位经济学、风险投资分析、业务健康度评估。
SQL查询写作技能Skill query-writing
此技能专注于SQL查询的编写和执行,覆盖从基础单表查询到高级多表JOIN和聚合操作,适用于数据分析、数据工程和数据库管理领域,关键词:SQL查询、数据分析、数据库、数据工程、商业智能。
BigQueryCLI数据查询技能指南Skill bigquery
本技能指南详细介绍了如何使用BigQuery命令行工具(bq)进行数据仓库查询和元数据检查,特别针对Monzo公司的数据分析项目。内容涵盖INFORMATION_SCHEMA元数据查询、数据敏感性处理、表结构检查、行数统计、模式匹配等核心功能,适用于数据工程师、分析师和开发人员进行安全高效的数据探索和验证工作。关键词:BigQuery CLI, bq命令, 数据仓库查询, INFORMATION_SCHEMA, 元数据检查, 数据敏感性, 表结构分析, 数据工程工具, Google Cloud, 数据分析工作流
数据架构Skill architecting-data
数据架构技能提供设计现代云原生数据平台的战略指导,涵盖存储范式选择、数据建模方法、数据网格实施、开放表格式应用等。关键词:数据架构、数据平台、存储范式、数据建模、数据网格、数据治理、现代数据堆栈、奖章架构、Apache Iceberg、dbt、数据工程。