数据科学 Skill技能列表
数据建模Skill data-modeling
数据建模是设计数据库模式、数据仓库和数据分析系统的核心技能,涵盖维度建模、星型模式、数据保险库等技术,用于优化数据存储和查询性能,支持操作型和分析型数据处理。关键词:数据建模,数据库设计,数据仓库,OLAP,OLTP,维度建模,星型模式,数据保险库。
数据流设计Skill data-flow
数据流设计技能用于根据需求描述设计和实施数据管道架构,包括数据源集成、转换处理、目标系统部署,支持批处理、流处理、Lambda、Kappa等多种模式,适用于数据仓库、数据湖、机器学习、商业智能等应用场景。关键词:数据管道、ETL、流处理、数据架构、数据工程、Spark、Flink、Kafka、数据湖仓。
数据架构Skill data-architecture
数据架构技能专注于现代数据平台设计,包括数据湖、数据湖屋、数据仓库和数据网格等模式的选用与实施,涉及数据存储策略、架构权衡和治理。关键词:数据架构、数据湖、数据湖屋、数据网格、数据平台设计、数据存储策略、ACID事务、数据治理。
Python科学计算技能Skill pycse
pycse 是一个 Python 库,用于科学和工程计算,提供自动计算置信区间和预测边界的回归分析、模型拟合、ODE 求解和缓存功能。简化数据分析和预测建模流程,提高效率,关键词:Python, 科学计算, 回归分析, 置信区间, 预测建模, 模型拟合, ODE, 缓存。
Python绘图与可视化Skill python-plotting
这个技能专注于使用Python进行数据可视化,涵盖matplotlib、seaborn和plotly三个主要库。matplotlib用于创建静态、高质量的图形,适合出版物;seaborn提供简洁的统计可视化,便于数据分析;plotly支持交互式图形和仪表板,适合Web应用和探索性分析。内容包括绘图类型、自定义选项、最佳实践和库选择指南,帮助用户有效传达数据见解。关键词:数据可视化、Python绘图、matplotlib、seaborn、plotly、统计图形、交互图、数据沟通。
Python优化Skill python-optimization
Python优化技能提供数学优化在Python中的全面指导,包括问题分类、库选择(如scipy、pyomo、cvxpy、GEKKO)、求解器配置和实现模式,适用于线性规划、二次规划、非线性规划、混合整数规划、凸优化和全局优化问题。关键词:Python优化,数学优化,scipy,pyomo,cvxpy,GEKKO,线性规划,非线性规划,优化算法,参数估计。
Python多目标优化Skill python-multiobjective-optimization
这个技能专注于在Python中实现多目标优化,用于同时优化多个冲突目标,发现Pareto前沿,适用于数据分析、机器学习、工程优化和量化金融等场景。它提供专家指导,涵盖Pareto最优性、进化算法(如NSGA-II、NSGA-III、MOEA/D)、标量化方法、Pareto前沿分析,并使用pymoo、platypus和DEAP库进行实现。关键词包括多目标优化、Pareto前沿、NSGA-II、进化算法、Python优化、数据建模。
可视化检查Skill visualization-check
可视化检查是一个用于审查数据可视化图表清晰度的技能,通过上下文无关的智能代理作为天真读者,确保图表在无额外上下文中能清晰传达核心信息。适用于R或Python绘图脚本的迭代优化,关键词包括数据可视化、图表审查、可视化最佳实践、R脚本、Python脚本和上下文无关审查。
TRIPOD+AI合规检查技能Skill tripod-check
这个技能用于审计预测模型和临床AI手稿,对照TRIPOD+AI检查表进行评估,确保模型的透明报告、合规性和公平性。关键词:TRIPOD+AI, 预测模型, 临床AI, 审计, 合规检查, 机器学习, 深度学习, 透明报告, 医疗保健, 数据科学。
SQL开发Skill sql
SQL开发是一种专注于使用结构化查询语言进行数据库管理的技能,包括编写高效查询、优化执行计划、设计数据库模式和索引策略。它支持复杂操作如窗口函数、公共表表达式和递归查询,广泛应用于数据工程、后端开发和数据分析领域。关键词:SQL、数据库、查询优化、模式设计、数据工程、ETL、数据仓库。
数据工程师Skill data-engineer
数据工程技能专注于构建和管理可扩展的数据管道、数据仓库和流处理系统,用于数据提取、转换、加载(ETL)和数据分析基础设施,支持数据质量监控、大数据处理和数据建模。关键词:数据工程、ETL、数据仓库、大数据、数据管道、Apache Airflow、Apache Spark、数据分析。
数据库技能Skill databases
该技能专注于MongoDB和PostgreSQL数据库的管理与操作,涵盖数据建模、查询编写、性能优化、索引管理、数据库迁移、备份恢复策略等关键方面。适用于数据库管理员、后端开发者和数据工程师,提升数据库处理效率和系统稳定性。关键词:MongoDB, PostgreSQL, 数据库管理, 查询优化, 数据建模, 性能调优