数据科学 Skill技能列表
数据血缘技能Skill lineage
此技能用于生成任务依赖关系图(数据血缘),通过分析SQL变换文件中的依赖关系,可视化数据血缘,支持多种输出格式如DOT、SVG、PNG、JSON,便于数据工程和数据治理。关键词:数据血缘、任务依赖、SQL分析、数据可视化、数据工程。
X社交媒体数据分析报告生成器Skill x-report-generator
X社交媒体数据分析报告生成器是一款基于Playwright浏览器自动化技术的专业工具,专门用于爬取X平台(原Twitter)的真实数据,进行深度数据统计分析,并自动生成精美的可视化HTML报告,支持导出为高清图片。该工具适用于社交媒体数据分析、竞品监测、舆情分析、营销效果评估等场景,提供关键词搜索、用户分析、情感分析、热门标签统计等核心功能。
OBT设计优化器Skill OBTDesignOptimizer
OBT设计优化器是一款专注于数据仓库单一大表(One Big Table)模式设计与优化的专业工具。该技能通过智能分析源模型结构和查询模式,提供列选择优化、反规范化策略、分区聚类设计等核心功能,帮助用户在存储性能与查询效率之间找到最佳平衡点。适用于大数据分析、商业智能报表、数据仓库建设等场景,支持Snowflake、BigQuery、Redshift等主流云数据平台。
金融科技工程师Skill fintech-engineer
金融科技工程师专注于设计和实施金融技术系统,包括双分录账簿、高精度财务计算、支付处理架构和监管合规性。关键词包括:支付系统、账簿架构、财务计算、PCI合规性、银行API集成。
YML到DDL技能Skill yml2ddl
yml2ddl技能是一个数据工程工具,用于从Starlake YAML定义自动生成SQL DDL(数据定义语言)语句,支持BigQuery、Snowflake、PostgreSQL等多种目标数据仓库。它通过类型映射简化数据库表结构的创建和管理,提升数据管道开发效率,适用于数据仓库建设和数据治理场景。关键词:SQL DDL, YAML, 数据仓库, 数据工程, 数据库管理, ETL开发, Starlake。
队列分析器Skill cohort-analyzer
队列分析器是一款专注于商业数据分析的技能工具,用于深入分析客户队列、收入留存、生命周期价值(LTV)和客户获取成本(CAC)等关键指标。它通过构建收入队列矩阵、绘制留存曲线、跟踪LTV/CAC趋势,帮助企业评估客户质量、洞察业务健康状况和单位经济学的演变。适用于风险投资、财务分析、业务增长和客户成功等场景。关键词:队列分析、收入留存、LTV/CAC、客户生命周期价值、留存曲线、单位经济学、风险投资分析、业务健康度评估。
文化审查技能Skill cultural-review
文化审查技能是一个专注于评估软件代码、功能特性与内容是否符合文化敏感性及原住民数据主权OCAP框架(所有权、控制权、访问权、持有权)合规性的专业指南。它提供详细的检查清单、敏感度分级标准、审批工作流程和风险标识,帮助开发者和组织在涉及原住民知识、故事和数据的项目中,确保技术实现尊重文化传统、保护数据主权并满足伦理要求。关键词:文化审查,原住民数据主权,OCAP框架,文化敏感性,数据伦理,合规检查,软件开发伦理,数据治理,原住民知识保护。
Python多目标优化Skill python-multiobjective-optimization
这个技能专注于在Python中实现多目标优化,用于同时优化多个冲突目标,发现Pareto前沿,适用于数据分析、机器学习、工程优化和量化金融等场景。它提供专家指导,涵盖Pareto最优性、进化算法(如NSGA-II、NSGA-III、MOEA/D)、标量化方法、Pareto前沿分析,并使用pymoo、platypus和DEAP库进行实现。关键词包括多目标优化、Pareto前沿、NSGA-II、进化算法、Python优化、数据建模。
图表生成器Skill chart-generator
图表生成技能用于从数据创建各种类型的图表和可视化,支持多种图表库和格式(如Matplotlib、Seaborn、Chart.js、Plotly),适用于数据分析和可视化任务,关键词包括数据可视化、图表生成、数据分析、Python图表、交互式可视化。
摄取技能Skill ingest
摄取技能是一个数据处理命令,用于从指定文件路径直接加载数据到数据域的表中。适用于程序化或API驱动的数据摄取场景,支持ETL开发、数据工程、数据治理等。关键词:数据摄取、文件加载、ETL工具、数据管道、数据处理、量化金融、证券投资。
架构探索技能Skill schema-exploration
这个技能用于探索和理解数据库结构,包括列出表、获取列信息、映射表关系等,帮助数据分析师、数据库管理员和开发者优化数据查询和管理。关键词:数据库探索、架构分析、SQL工具、数据工程、数据可视化。
BigQueryCLI数据查询技能指南Skill bigquery
本技能指南详细介绍了如何使用BigQuery命令行工具(bq)进行数据仓库查询和元数据检查,特别针对Monzo公司的数据分析项目。内容涵盖INFORMATION_SCHEMA元数据查询、数据敏感性处理、表结构检查、行数统计、模式匹配等核心功能,适用于数据工程师、分析师和开发人员进行安全高效的数据探索和验证工作。关键词:BigQuery CLI, bq命令, 数据仓库查询, INFORMATION_SCHEMA, 元数据检查, 数据敏感性, 表结构分析, 数据工程工具, Google Cloud, 数据分析工作流