机器学习 Skill技能列表
Kaggle学习者Skill kaggle-learner
Kaggle学习者技能是一个专为机器学习和数据科学领域设计的工具,用于提取和应用Kaggle竞赛的获胜方案知识。它覆盖NLP、计算机视觉、时间序列、表格数据和多模态等机器学习领域,提供前排方案详细技术分析、代码模板和最佳实践,帮助用户学习先进技术、优化项目、提升机器学习技能。关键词:Kaggle, 机器学习, 竞赛, 获胜方案, 知识提取, 技术分析, 代码模板, SEO学习工具。
机器学习实验跟踪器Skill ml-experiment-tracker
这个技能提供机器学习实验的系统化指导,专注于跟踪、版本控制和可重现性实践,帮助开发者高效管理模型开发过程。关键词:机器学习、实验跟踪、MLflow、Weights & Biases、DVC、可重现性、模型版本控制、数据版本控制。
模型等效性审核器Skill model-equivariance-auditor
模型等效性审核器是一个用于验证机器学习模型是否正确实现对称性(等效性)的技能。它提供系统化的测试方法、层间分析和调试指导,帮助开发者检测和修复模型中的对称性错误,确保模型训练和预测的一致性。关键词:模型等效性、审核、验证、调试、对称性、机器学习、深度学习、AI测试。
parallel-patternsSkill parallel-patterns
GPU并行算法设计模式与实现,包括并行归约、扫描/前缀和、直方图、并行排序、流压缩等高效算法
senior-ml-engineerSkill senior-ml-engineer
高级机器学习工程师技能,专注于生产中模型的部署、MLOps流程构建以及大型语言模型的集成。涵盖模型部署、特征存储、漂移监控、RAG系统和成本优化。
向量搜索模式Skill VectorSearchPatterns
向量搜索模式是一种利用向量嵌入和数据库进行语义搜索的技术,它通过将文本或图像转换为向量,然后在高维空间中测量向量之间的相似性来工作。这项技术适用于需要基于内容含义而非关键词进行搜索的场景,如语义文档搜索、产品推荐、问题回答等。关键词包括向量嵌入、语义搜索、相似性比较、机器学习模型。
模型优化Skill ModelOptimization
模型优化技能涉及一系列技术,用于在保持准确度的同时减小机器学习模型的大小、提高推理速度。关键技术包括量化、剪枝、知识蒸馏等,旨在实现模型的高效部署。
特征工程优化器Skill FeatureEngineeringOptimizer
特征工程优化器是一款专注于提升机器学习模型效果的AI工具,通过自动化分析、筛选和优化特征工程流水线,实现特征重要性评估、相关性检测、编码策略推荐、特征新鲜度与版本管理,确保特征存储配置的高效与准确,适用于批量、实时及流式数据处理场景,助力数据科学家和机器学习工程师构建高性能、低延迟的AI应用。关键词:特征工程,机器学习,特征优化,特征存储,AI模型,数据预处理,特征重要性,相关性分析,实时特征,A/B测试。
DataPreprocessingSkill DataPreprocessing
数据预处理技能涵盖了从原始数据转换为适合机器学习模型训练的格式的全过程,包括数据清洗、特征工程、归一化、编码分类变量等关键步骤。
模型评估Skill model-evaluation
本技能用于全面评估机器学习模型的性能、公平性和可靠性,涵盖指标计算、验证策略、训练调试、超参数调优、LLM评估、A/B测试和生产监控,以确保模型质量和可靠性。关键词:模型评估,机器学习,指标,公平性,A/B测试,生产监控。
机器学习管道工作流程Skill ml-pipeline-workflow
这个技能提供了构建端到端机器学习操作(MLOps)管道的全面指导,涵盖从数据准备到模型训练、验证、部署和监控的全生命周期。它适用于自动化ML工作流、提高模型可复现性和生产部署效率。关键词包括:MLOps、管道编排、数据准备、模型训练、验证、部署、自动化、机器学习。
RayTrain分布式训练Skill ray-train
Ray Train 是一个分布式训练框架,用于在多节点集群上编排机器学习训练任务,支持PyTorch、TensorFlow和HuggingFace,内置超参数调优、容错和弹性扩展功能,适用于大规模模型训练和分布式超参数搜索。关键词:分布式训练,机器学习,PyTorch,TensorFlow,HuggingFace,超参数调优,容错,弹性扩展,多节点,Ray Tune。