数据科学 Skill技能列表

源编码技能Skill source-coding

4.5

该技能专注于信息论中的源编码问题,提供解决策略和工具,包括霍夫曼编码、算术编码、率失真理论等,用于优化数据压缩和编码效率。关键词:源编码,信息论,数据压缩,编码理论,熵。

时间线生成器Skill chrono-flow

4.5

根据JSON数据生成精美的交互式时间线HTML页面,支持多种布局和自定义主题,适用于里程碑、历史记录等场景。关键词:时间线、可视化、HTML生成、历程图。

JSON画布技能Skill json-canvas

4.5

JSON画布技能用于创建和编辑符合JSON Canvas Spec 1.0的画布文件(.canvas),支持文本、文件、链接和组节点,以及边连接,适用于思维导图、流程图、项目看板等可视化场景。关键词包括JSON画布、可视化、思维导图、流程图、Obsidian、文件格式、数据可视化。

渐变维度实现生成器Skill SCDImplementationGenerator

4.5

渐变维度实现生成器是一款自动化数据建模工具,专门用于跨平台生成渐变维度(SCD)实现方案。该工具支持SCD类型1/2/3/4/6,可自动生成MERGE语句、dbt快照配置、代理键管理和历史跟踪优化代码。适用于数据仓库、ETL开发、维度建模和商业智能场景,帮助数据工程师高效实现数据历史版本管理和变更跟踪。关键词:渐变维度,SCD,数据建模,数据仓库,ETL开发,历史跟踪,维度建模,代理键,dbt,数据工程

WAP数据安全摄取技能Skill wap-ingestion

4.5

WAP数据安全摄取技能是一种基于写-审计-发布模式的数据工程解决方案,专门用于从AWS S3云存储安全导入数据到bauplan数据平台。该技能通过临时分支隔离、数据质量检查、原子性合并等机制,确保数据加载过程的安全可靠,防止脏数据污染生产环境。适用于金融风控、企业数据仓库、ETL流程、数据湖管理等场景,支持Parquet、CSV、JSONL等多种数据格式的安全摄取。

DataMigrationScriptsSkill data-migration-scripts

4.5

创建安全、可逆的数据库迁移脚本,用于模式变更、数据迁移和转换,支持零停机部署。

DatabaseMonitoringSkill database-monitoring

4.5

数据库性能监控与健康检查指南,包含监控指标、查询优化、告警配置等关键实践。

DatabasePerformanceDebuggingSkill database-performance-debugging

4.5

通过查询分析、索引优化和执行计划审查来调试数据库性能问题,识别并修复慢查询。

数据库分片Skill database-sharding

4.5

这项技能涉及数据库的水平扩展,包括分片策略、一致性哈希、分片键选择和跨分片查询模式等关键技术,用于解决大型数据库的扩展性和性能问题。

SQL查询优化Skill sql-query-optimization

4.5

SQL查询优化是一项技术,用于分析和优化数据库查询,提高查询性能,减少执行时间。关键词包括:性能瓶颈、索引策略、查询重写、EXPLAIN分析、批量操作。

AI-ML数据科学工程套件Skill ai-ml-data-science

4.5

这个技能提供了一个完整的端到端数据科学和机器学习工程工作流程,将原始数据和业务问题转化为可生产化的验证模型。它涵盖了数据探索、特征设计、模型选择、性能评估、SQL变换和MLOps实践,特别强调现代特征存储、自动化重训练和漂移监控。关键词:数据科学、机器学习、特征工程、模型评估、MLOps、SQLMesh、预测建模、可重复性。

ClickHouse高性能分析模式与优化Skill clickhouse-io

4.5

本技能专注于 ClickHouse 数据库的高性能分析模式、查询优化和数据工程最佳实践,适用于大规模数据分析工作负载。关键词包括 ClickHouse、数据分析、查询优化、数据仓库、ETL、物化视图、性能监控、OLAP、列式存储。