MLOps-Basics开源项目 – MLOps基础教程

AI Copilot是一个集成在本地Jupyter Notebook中的协作助手，能够与图表进行对话，帮助用户不依赖于GitHub Copilot或其他AI代码生成扩展。

etcd是一个分布式键值存储系统，主要用于配置共享和服务发现，具有高可用性和强一致性。

NeuralKG是一个基于PyTorch Lightning开发的知识图谱表示学习框架，集成了多种知识图谱表示学习模型。它支持传统知识图谱表示学习模型、基于图神经网络的知识图谱表示学习模型以及基于规则的知识图谱表示学习模型。NeuralKG采用模块化设计，便于个性化和维护，能够高效、可扩展地进行知识图谱表示学习任务。

该项目演示了如何使用HuggingFace和DeepSpeed对EleutherAI的GPT-Neo模型进行微调，以生成Netflix电影描述，整个过程仅需47行代码，便于实现高效的文本生成。

handcalcs是一个基于Jupyter Notebook的Python库，能够将Python代码直接渲染成LaTeX格式的公式展示出来。它使得数学计算过程变得像手写公式一样直观清晰，适用于科学研究、工程设计和数据分析。handcalcs通过展示数值替换过程，使得计算更易于手动验证。

这是一个非常通用且功能丰富的模板，专为快速且可扩展的机器学习实验流程设计。它集成了PyTorch Lightning、Hydra、Optuna和Weights & Biases，能够显著提升深度学习工作流的效率，并提供灵活的配置管理、超参数优化、实验跟踪与可视化等功能。

Qwak是一个综合性的AI平台，旨在简化机器学习模型的开发、部署和管理。该平台支持各种规模的AI项目，从通用AI和大型语言模型到经典机器学习，提供统一的环境，使用户能够高效地将想法转化为可扩展的AI应用。无论是初创企业还是大型企业，Qwak都提供必要的工具和基础设施，帮助推动AI项目的进展，避免复杂的集成和基础设施管理带来的麻烦。

simplicial-embeddings 是一个基于 Pytorch Lightning 的自监督学习库，专注于视觉表示学习。它提供了多种自监督学习方法，并集成了 Pytorch Lightning 的易扩展性和集成性。该库还包含预训练模型，便于快速部署和应用。

etcd是一个分布式键值存储系统，主要用于配置共享、服务发现和分布式锁等场景，提供高可用性和一致性的数据存储。

该项目是一个生成AI对话热力图的脚本，可以帮助用户查看与AI对话的频率，提供了便捷的可视化方式，支持多种数据输入，便于用户理解和分析对话行为。

Graviti是一个数据平台，帮助公司和团队管理数据集，通过数据可视化提升协作效率，并通过MLflow实现数据版本控制。

在单个Jupyter Notebook中，实现从零开始训练一个小型GPT风格的解码器语言模型。涵盖了从文本分词、位置编码、自注意力机制到模型训练和推理的完整过程。同时每一步还有详细的讲解。读者可以通过该项目深入理解GPT模型的内部机制、训练流程等。

这是一个简单的Python包，旨在让用户在Jupyter Notebook中预览和开发Streamlit应用，提供了交互式组件和实时更新功能，便于与现有的Jupyter工作流集成。

LLaMA-O1 是一个大型推理模型框架，专为 PyTorch 和 HuggingFace 设计，支持训练、推理和评估。它集成了蒙特卡洛树搜索（MCTS）、自我对弈强化学习、PPO 和类似 AlphaGo Zero 的双策略范式，适用于大型语言模型的开发和应用。

Juno是一款专为数据科学家和开发人员设计的AI工具，通过实时代码建议、自动调试和代码优化，显著提高Python在Jupyter Notebooks中的工作效率，简化复杂的编码任务，特别适用于数据分析和机器学习等计算密集型工作。