数据科学 Skill技能列表
PredictItSkill predictit
这个技能提供PredictIt政治预测市场的只读API集成,允许用户搜索市场、查看详细信息和价格数据。适用于量化金融策略开发、数据分析和预测建模。关键词:PredictIt、预测市场、政治市场、API集成、只读访问、量化金融、数据分析。
Mermaid图表Skill mermaid-diagrams
Mermaid图表是一种使用Mermaid语法创建各种图表和可视化的技能,适用于流程图、序列图、类图、实体关系图、甘特图等,方便软件文档编写、数据可视化和项目规划。关键词:Mermaid、图表、可视化、流程图、序列图、类图、数据可视化。
JSON与CSV数据转换Skill json-and-csv-data-transformation
这个技能用于在JSON、CSV等数据格式之间进行转换,支持过滤、提取、映射、扁平化嵌套结构和聚合操作。适用于数据处理工作流,如API响应处理、ETL流程、数据清洗和报表生成,提升数据分析和集成效率。关键词:JSON转换, CSV转换, 数据过滤, 数据扁平化, ETL, 数据处理, 数据工程, API集成。
DAG部署技能Skill dag-deploy
DAG部署技能专用于自动化部署生成的DAG文件到目标目录,如Airflow DAGs文件夹,支持清理和文件组织,优化数据管道管理,适用于数据工程、ETL开发和DevOps场景,提升数据工作流效率。
映射可视化框架Skill mapping-visualization-scaffolds
这个技能用于创建视觉映射,通过图表、概念地图和架构蓝图文档化复杂系统的关系、依赖和结构,适用于系统理解、知识组织、流程文档化和战略可视化。关键词:映射可视化、系统架构、数据可视化、信息架构、概念地图、依赖图。
数据库优化器Skill database-optimizer
数据库优化器是一个专业的数据库性能调优工具,专注于查询优化、索引设计、执行计划分析和数据库配置调优。支持PostgreSQL、MySQL、MongoDB、Redis等主流数据库系统,通过系统化方法解决慢查询、高负载、连接超时等性能问题,实现亚秒级响应和最优资源利用率。关键词:数据库优化、查询性能调优、索引策略、执行计划分析、数据库配置、慢查询优化、OLTP性能、数据库监控、容量规划、水平扩展。
DatabaseLockingStrategiesSkill DatabaseLockingStrategies
数据库锁定策略是用于管理共享数据并发访问的机制,确保数据完整性,防止多个事务同时以可能造成不一致的方式修改相同数据。关键概念包括并发控制、锁定类型(共享锁定、独占锁定)、锁定粒度(行级、页面级、表级锁定)以及多版本并发控制(MVCC)。此技能涉及数据库事务、锁定机制、隔离级别和死锁处理等。
数据库优化技术Skill DatabaseOptimizationTechniques
数据库优化技术是一系列用于提升数据库查询性能、降低资源消耗、确保数据高效访问的方法和策略。关键词包括查询优化、索引策略、连接池、缓存策略、数据库维护等。
日志解析与导入SOPSkill "self/import/file_path"
此技能是定义和执行日志解析的标准操作程序(SOP),用于处理Apache、Nginx、Syslog、JSON和自定义等多种日志格式,通过数据类和LogEntry类表示解析后的日志条目。它帮助用户标准化日志处理流程,提高数据解析效率,便于数据收集和分析。关键词:日志解析、SOP、文件导入、Apache日志、Nginx日志、Syslog、JSON日志、自定义日志、数据工程、数据类、LogEntry。
数据迁移专家Skill data-migration-expert
此技能用于数据库迁移过程中的数据完整性和安全性验证,确保数据无损坏。通过检查ID映射、交换值、回滚策略等,防止迁移错误。关键词:数据迁移、数据库安全、完整性验证、ID映射检查、回滚安全、迁移审查。
数据完整性守护者Skill data-integrity-guardian
数据完整性守护者是一个专注于数据库迁移安全、数据完整性验证和隐私合规的技能。它用于审查数据库迁移、验证数据约束、确保事务完整性和隐私要求合规,以保护数据免于丢失或损坏。关键词:数据库安全,数据迁移,完整性检查,隐私合规,数据治理,ACID属性。
ZarrPython数据存储库Skill zarr-python
Zarr Python 是一个用于云存储的分块 N 维数组库,支持压缩、并行 I/O 和与 NumPy、Dask、Xarray 的集成,专为大规模科学计算和数据处理而设计。关键词:数据存储、并行计算、云计算、科学计算、大数据处理、Python 库。