数据科学 Skill技能列表
数据完整性守护者Skill data-integrity-guardian
数据完整性守护者是一个专注于数据库迁移安全、数据完整性验证和隐私合规的技能。它用于审查数据库迁移、验证数据约束、确保事务完整性和隐私要求合规,以保护数据免于丢失或损坏。关键词:数据库安全,数据迁移,完整性检查,隐私合规,数据治理,ACID属性。
研究技能Skill research
这个技能帮助用户研究预测市场,提供基础率分析、解决规则查询和历史类比功能,用于市场预测和数据分析。关键词:市场研究、基础率、解决规则、历史数据、预测分析、量化金融、数据科学
PredictItSkill predictit
这个技能提供PredictIt政治预测市场的只读API集成,允许用户搜索市场、查看详细信息和价格数据。适用于量化金融策略开发、数据分析和预测建模。关键词:PredictIt、预测市场、政治市场、API集成、只读访问、量化金融、数据分析。
JSONCanvas技能Skill json-canvas
JSON Canvas技能用于创建和编辑JSON Canvas文件(.canvas),这些文件在Obsidian等应用程序中用于构建无限画布,支持文本、文件、链接和组节点,以及它们之间的连接,适用于思维导图、流程图、项目板等可视化场景。关键词:JSON Canvas, Obsidian, 画布, 思维导图, 流程图, 数据可视化, 文件格式
源编码技能Skill source-coding
该技能专注于信息论中的源编码问题,提供解决策略和工具,包括霍夫曼编码、算术编码、率失真理论等,用于优化数据压缩和编码效率。关键词:源编码,信息论,数据压缩,编码理论,熵。
作业技能Skill job
starlake作业技能是用于运行数据处理作业的命令行工具,作为transform命令的别名,支持运行指定作业及其递归依赖,适用于数据工程和ETL开发场景。关键词:starlake, 作业, transform, 数据处理, ETL, 命令行, 数据转换, 数据仓库, 自动化任务。
连接加载技能Skill cnxload
此技能用于将Parquet、CSV或JSON文件直接加载到JDBC数据库表,提供快速数据导入功能,支持多种数据库驱动和并行写入选项,适用于数据集成、ETL开发和数据仓库场景,关键词包括:数据加载、JDBC、Parquet、CSV、JSON、数据库连接、ETL、批量处理。
时间序列数据库技术Skill using-timeseries-databases
时间序列数据库技术用于高效存储和查询时间戳数据,如金融交易数据、物联网传感器、监控指标和日志。该技能涉及数据库选择(包括TimescaleDB、InfluxDB、ClickHouse、QuestDB)、连续聚合、降采样(LTTB算法)和保留策略优化,适用于构建实时仪表板、监控系统、物联网平台和金融应用。关键词:时间序列数据库、数据存储、查询优化、数据库技术、降采样、连续聚合。
网页抓取技能Skill using-web-scraping
这个技能使用头less Chrome和DuckDuckGo进行网页抓取和搜索,专注于可靠导航、提取结构化文本、遵守robots.txt和速率限制。用于收集公开网页内容以进行摘要、元数据提取或链接发现。关键词:网页抓取、数据收集、Playwright、DuckDuckGo、自动化、数据提取、SEO优化。
PyMC贝叶斯建模Skill pymc-bayesian-modeling
这个技能用于使用PyMC进行贝叶斯建模,包括构建层次模型、MCMC采样(NUTS)、变分推断、模型比较(如LOO和WAIC)、后验检查等,适用于概率编程和统计推断。关键词:贝叶斯建模, PyMC, 概率编程, MCMC, 变分推断, 模型比较, 数据科学, 预测建模。
仪器数据到Allotrope转换器Skill instrument-data-to-allotrope
该技能用于将实验室仪器输出的文件(如PDF、CSV、Excel、TXT)转换为标准化的Allotrope Simple Model (ASM) JSON格式或扁平化的2D CSV,以支持数据标准化,便于集成到LIMS系统、数据湖或下游分析。功能包括自动检测仪器类型、生成完整的ASM JSON、扁平化CSV和可导出的Python解析代码,适用于数据工程团队。关键词:仪器数据转换,Allotrope格式,数据标准化,LIMS系统,数据工程,Python解析,实验室数据管理,ASM JSON,扁平化CSV。
DatabaseMigrationsSkill DatabaseMigrations
数据库迁移是用于模式演变和数据转换的数据库迁移策略和工具,它们帮助团队以受控、可复现的方式发展数据库结构,同时维护数据完整性并最小化停机时间。