数据工程 Skill技能列表

数据库迁移管理Skill database-migration-management

4.5

这个技能涉及数据库迁移和架构版本控制,包括在PostgreSQL和MySQL中进行迁移框架设置、执行数据转换、添加或删除表和列、索引创建和优化、迁移测试和验证、回滚计划和执行以及多环境部署。

提取BigQuery架构Skill extract-bq-schema

4.5

此技能用于直接从Google BigQuery数据集中提取表架构,并将其转换为Starlake YAML配置文件。适用于数据工程、ETL开发和数据仓库构建,提升元数据管理效率。关键词:BigQuery、架构提取、Starlake、YAML、数据工程、ETL、数据仓库、元数据。

SQL查询优化编写Skill data-write-query

4.5

这个技能用于根据自然语言描述,编写针对特定SQL方言优化的查询,遵循最佳实践。它帮助用户高效进行数据提取和分析,提升数据库查询性能。关键词:SQL查询,数据编写,优化,数据分析,数据库,数据工程,ETL开发。

流处理窗口设计器Skill StreamProcessingWindowingDesigner

4.5

流处理窗口设计器是一款专注于为实时数据流处理系统设计优化窗口策略的专业工具。它提供窗口类型选择、水印策略配置、延迟数据处理、触发机制优化等核心功能,帮助用户构建高效、可靠的流处理管道。关键词:流处理、窗口策略、水印机制、实时计算、数据聚合、状态管理、延迟处理、触发配置、流式架构、事件时间处理。