数据工程 Skill技能列表
Kafka流管理Skill kafka-streaming
这个技能用于管理和监控Kafka流处理平台，包括主题创建、消费者组状态检查、延迟分析、broker健康评估等。适用于数据工程师、DevOps工程师和系统管理员，帮助优化数据流管道和确保系统稳定性。关键词：Kafka, 流管理, 主题管理, 消费者组, 延迟监控, broker健康, 数据工程, 消息队列。
弹性搜索Skill elasticsearch
提供关于Elasticsearch的全面指导，帮助用户掌握索引创建、数据搜索、聚合分析、映射配置和集群管理等核心功能。适用于开发搜索应用、进行大数据分析或管理分布式搜索系统。关键词：Elasticsearch, 搜索, 索引, 聚合, 映射, 集群管理, 数据分析。
DataMigrationScriptsSkill data-migration-scripts
创建安全、可逆的数据库迁移脚本，用于模式变更、数据迁移和转换，支持零停机部署。
SQL查询优化Skill sql-query-optimization
SQL查询优化是一项技术，用于分析和优化数据库查询，提高查询性能，减少执行时间。关键词包括：性能瓶颈、索引策略、查询重写、EXPLAIN分析、批量操作。
数据库设计专家Skill database-designer
数据库设计专家技能是一套综合工具和知识体系，用于构建和优化现代数据库系统。关键词包括数据库架构、性能优化、数据迁移、索引策略、规范化设计。
JSON转换器技能Skill json-transformer
JSON转换器技能是一个用于处理JSON数据的工具，支持解析、验证、转换、合并、提取等高级操作，广泛应用于数据工程、后端开发和数据分析领域，方便数据处理和API集成。关键词：JSON处理、数据转换、数据分析、数据清洗、编程工具、API数据、格式转换、数据提取。
阶段技能Skill stage
阶段技能用于将数据文件从登陆区移动到待处理区，执行解压缩和确认文件处理，是数据摄取管道的第一步，确保数据准备就绪供后续加载。关键词：数据阶段化、ETL、数据工程、ACK文件处理、数据管道、数据摄取、文件管理。
提取BigQuery架构Skill extract-bq-schema
此技能用于直接从Google BigQuery数据集中提取表架构，并将其转换为Starlake YAML配置文件。适用于数据工程、ETL开发和数据仓库构建，提升元数据管理效率。关键词：BigQuery、架构提取、Starlake、YAML、数据工程、ETL、数据仓库、元数据。
增量模型策略选择器Skill IncrementalModelStrategySelector
增量模型策略选择器是一款用于数据工程和ETL开发的专业工具。它能够根据数据源特征（如更新模式、数据量、频率）和平台环境，智能选择和配置最优的增量数据处理策略（如追加、合并、删除后插入）。该工具专注于提升数据转换管道的效率和性能，通过优化分区裁剪、唯一键配置、回看窗口和迟到数据处理等关键参数，确保数据仓库和BI报表的数据新鲜度与准确性。关键词：增量模型，数据工程，ETL开发，dbt配置，数据转换，分区优化，数据仓库，策略选择。
数据协调器技能Skill data-orchestrator
数据协调器技能负责管理和协调数据管道任务，包括ETL/ELT流程、数据验证、质量保证、管道监控等，确保数据质量标准达标，并进行特征工程和分析协调。
RSS聚合器Skill rss-aggregator
RSS聚合器技能，通过Python脚本自动抓取和汇总多个RSS订阅源的最新内容，提供结构化更新信息，适用于信息聚合、数据分析和自动化报告。关键词：RSS聚合、数据抓取、信息汇总、自动化更新、Python脚本。
数据库索引策略Skill database-indexing-strategy
本技能涉及数据库索引策略的设计和实施，包括索引创建、查询性能优化、索引类型选择、复合和部分索引设计、索引维护和监控等，旨在提高数据库查询效率和数据完整性。