查询专家技能用于掌握和优化SQL及NoSQL数据库查询，生成高效查询、分析性能、设计索引并解决慢查询问题。关键词：数据库查询、SQL优化、性能分析、索引设计、查询调试、NoSQL、EXPLAIN计划、聚合管道、GraphQL、ETL开发。

这是一套完整的数据工程指挥中心方法论，涵盖设计、构建、运营和扩展数据管道及基础设施。不依赖任何外部依赖，纯粹依靠代理技能。关键词包括数据架构评估、数据建模、管道设计模式、数据质量框架、性能优化、数据治理与目录、管道监控与告警、测试策略、成本优化、操作手册、高级模式。

数据协调器技能负责管理和协调数据管道任务，包括ETL/ELT流程、数据验证、质量保证、管道监控等，确保数据质量标准达标，并进行特征工程和分析协调。

NeMo Curator 是 NVIDIA 推出的 GPU 加速数据整理工具，专为大规模语言模型（LLM）训练数据准备而设计。它支持文本、图像、视频、音频等多模态数据，提供模糊去重（比 CPU 快 16 倍）、质量过滤（30+ 启发式）、语义去重、PII 脱敏、NSFW 检测等功能，显著提升数据处理效率并降低成本。适用于 AI 研究人员、数据工程师和开发者，用于高效清理和优化训练数据集，关键词包括 GPU 加速、数据整理、LLM 训练、去重、过滤、多模态、RAPIDS、NVIDIA。

该技能用于在数据加载流程中检查landing或pending区域的文件可用性，确保文件就绪后触发加载，适用于数据工程、ETL开发和自动化编排，关键词：文件检查、数据加载、编排、ETL、数据仓库、预加载。

增量模型策略选择器是一款用于数据工程和ETL开发的专业工具。它能够根据数据源特征（如更新模式、数据量、频率）和平台环境，智能选择和配置最优的增量数据处理策略（如追加、合并、删除后插入）。该工具专注于提升数据转换管道的效率和性能，通过优化分区裁剪、唯一键配置、回看窗口和迟到数据处理等关键参数，确保数据仓库和BI报表的数据新鲜度与准确性。关键词：增量模型，数据工程，ETL开发，dbt配置，数据转换，分区优化，数据仓库，策略选择。

本技能是Bauplan数据工程平台的详细指南，用于创建和管理数据管道项目。它涵盖了从项目初始化、DAG（有向无环图）设计、SQL/Python模型编写、到严格模式验证和物化策略的全流程。核心功能包括：数据管道开发、ETL/ELT流程构建、数据转换模型（SQL/Python）、数据质量检查、I/O下推优化、分支安全管理以及自动化工作流。适用于数据工程师、数据分析师和开发人员构建可维护、高性能的数据处理流水线。

PDF处理技能用于通过编程方式提取PDF文档中的文本和表格，创建、合并、分割PDF文件，以及填充表单。适用于文档自动化处理、数据提取和分析，常用于数据工程和软件开发场景。在股票量化交易中，此技能可辅助处理财务报告和交易文档，提取关键数据进行分析。关键词：PDF处理，文档提取，Python库，数据工程，自动化处理，量化交易，数据提取。

通过索引、高效查询和执行计划分析提高数据库查询性能，减少响应时间和数据库负载。

数据库优化技术是一系列用于提升数据库查询性能、降低资源消耗、确保数据高效访问的方法和策略。关键词包括查询优化、索引策略、连接池、缓存策略、数据库维护等。

这是一个专注于数据库架构与运维的技能，用于数据库设计、模式构建、Supabase配置、RLS策略实施、数据迁移、查询优化、数据建模和运维监控。适合数据工程师、数据库管理员和开发人员使用。关键词：数据库架构、运维工程师、Supabase、数据工程、查询优化、RLS策略、数据建模、迁移。

该技能专注于信息论中的源编码问题，提供解决策略和工具，包括霍夫曼编码、算术编码、率失真理论等，用于优化数据压缩和编码效率。关键词：源编码，信息论，数据压缩，编码理论，熵。