Zarr Python 是一个用于云存储的分块 N 维数组库，支持压缩、并行 I/O 和与 NumPy、Dask、Xarray 的集成，专为大规模科学计算和数据处理而设计。关键词：数据存储、并行计算、云计算、科学计算、大数据处理、Python 库。

这项技能提供全面的指导，用于设计健壮、可扩展的数据库架构，适用于SQL和NoSQL数据库。无论是从头开始构建还是演进现有架构，此框架确保数据完整性、性能和可维护性。

该技能通过Rube MCP和Composio自动化Scrapfly网页抓取任务，提供工具发现、连接管理和执行功能，优化数据采集流程。关键词：Scrapfly自动化，Rube MCP，Composio，网页抓取，数据采集，自动化工具，数据工程。

这是一个用于将数据从文件（如Parquet、JSON）加载到Elasticsearch索引的工具，支持自定义映射、文档ID和时间戳索引命名，适用于数据工程和ETL流程，方便数据集成与处理。关键词：Elasticsearch, 数据加载, Parquet, JSON, 映射, 文档ID, 时间戳索引, ETL, 数据工程。

此 Starlake compare 技能用于数据工程项目的版本对比，生成差异报告，支持 Git 集成、文件路径和标签比较，便于审查 schema 更改、配置更新和发布管理。关键词包括 Starlake、比较、差异报告、schema 变化、数据工程、Git 版本控制、ETL 开发、数据治理，提升项目管理效率。

JSON转换器技能是一个用于处理JSON数据的工具，支持解析、验证、转换、合并、提取等高级操作，广泛应用于数据工程、后端开发和数据分析领域，方便数据处理和API集成。关键词：JSON处理、数据转换、数据分析、数据清洗、编程工具、API数据、格式转换、数据提取。

数据迁移规划器是一款用于系统间数据迁移的专业工具，提供完整的迁移解决方案。它涵盖数据迁移规划、模式映射、ETL管道设计、数据验证和回滚策略。支持从Salesforce到HubSpot CRM、MySQL到PostgreSQL等多种系统迁移场景。包含数据发现、模式映射、ETL流程、验证测试和切换计划五个阶段，确保数据迁移的安全可靠。适用于企业系统升级、数据仓库迁移、云迁移等场景。关键词：数据迁移，ETL管道，模式映射，数据验证，迁移规划，系统迁移，数据工程，迁移策略，数据治理，迁移操作手册

数据管道架构师技能专注于设计和实现高效、可靠的数据管道，涵盖ETL/ELT流程、编排工具、错误处理和数据质量验证，确保数据从源到目标的顺畅流动。关键词：数据管道、ETL、ELT、数据工程、架构设计、数据质量、编排、数据仓库。

提供关于Elasticsearch的全面指导，帮助用户掌握索引创建、数据搜索、聚合分析、映射配置和集群管理等核心功能。适用于开发搜索应用、进行大数据分析或管理分布式搜索系统。关键词：Elasticsearch, 搜索, 索引, 聚合, 映射, 集群管理, 数据分析。

本技能涉及数据库索引策略的设计和实施，包括索引创建、查询性能优化、索引类型选择、复合和部分索引设计、索引维护和监控等，旨在提高数据库查询效率和数据完整性。

这个技能专注于ClickHouse数据库的使用，包括表设计模式、查询优化、数据插入策略、物化视图、性能监控和常见分析查询。适用于数据工程师和数据分析师，优化大规模数据分析工作负载，提高查询效率和实时处理能力。关键词：ClickHouse，数据工程，数据分析，查询优化，数据仓库，OLAP。

PostgreSQL高级模式技能专注于数据库性能优化、复杂查询处理、索引策略和数据库设计。包含有效的索引创建、查询优化技巧、窗口函数、CTEs、JSON操作、分区、物化视图等高级功能。适用于后端开发人员、数据工程师和数据库管理员，提升PostgreSQL数据库的效率和可扩展性。关键词：PostgreSQL, 数据库优化, 性能调优, 查询优化, 索引策略, 数据库设计。