Figure AI官网 – 具身大模型的创新应用

Figure AI刚刚重磅发布其端到端具身大模型HELIX，旨在推动具身智能的发展。该模型通过融合世界模型的视频预训练和结合强化学习的后期训练，提供了多个功能以支持各类智能任务。

Figure AI的特点:

1. 端到端具身大模型
2. 融合世界模型的视频预训练
3. 结合强化学习的后期训练

Figure AI的功能:

1. 用于具身智能任务
2. 支持视频数据的预训练
3. 实现强化学习优化

相关导航

Hora开源项目 – 在模拟器中训练RL策略并部署于机械手

Hora是一个在模拟器中训练强化学习策略，并将其直接部署到真实世界机械手的项目，完全不依赖视觉或触觉输入，旨在实现高效的机械手操作。

Ncritic-rl开源项目 – 通过强化学习提升语言模型表现

critic-rl是一个通过强化学习教语言模型学会批判的项目，旨在让AI模型在无人监督下自我提升。该项目显著提升了语言模型在代码生成等任务中的表现，并具有模型无关性，适用于多种模型和任务。

ML-Papers-of-the-Week开源项目 – 每周更新的机器学习顶级论文库

该项目提供每周更新的机器学习领域内顶级论文，涵盖多个研究方向，并为用户提供论文摘要和关键点，支持用户提交和推荐优秀论文。

NDeepSeek R1开源项目 – 从零构建高效推理模型

DeepSeek R1 是一个从零开始构建的高效推理模型项目。它使用 Qwen 作为基础模型，通过 GRPO 算法进行初步训练，并结合 Supervised Fine-Tuning (SFT) 和改进的强化学习方法，显著提升了模型的推理能力和语言一致性。项目提供了全流程的代码实现、详细的训练过程描述和手绘流程图，使得即使是初学者也能轻松上手。

Awesome Reinforcement Learning for Cyber Security开源项目 – 强化学习在网络安全中的应用资源汇总

这是一个专注于应用于网络安全的强化学习资源的精心整理列表，包含研究论文、实用实现和相关工具，旨在帮助研究人员和开发者在这一领域获得最新的信息和技术支持。

Awesome-LLM-Robotics开源项目 – 聚焦于LLM与机器人技术的研究

这是一个综合性列表，涵盖使用大型语言/多模态模型在机器人和强化学习领域的论文，包含论文、代码及相关网站。

NGenRL开源项目 – 多模态基础世界模型

GenRL是一个多模态基础世界模型，旨在为通用具身智能体提供支持。它能够将语言和视频提示嵌入到具身领域，通过解码模型的潜在状态序列来可视化预期行为，进而训练智能体执行任务。该项目适用于强化学习和多模态任务的研究，是开发具身智能体的基础模型。

O1-CODER开源项目 – 专注编程任务的模型复现项目

一个专注于编程任务的O1模型复现项目，结合强化学习(RL)和蒙特卡洛树搜索(MCTS)来增强模型的系统思维能力，包含测试用例生成器(TCG)和自弈强化学习两大核心组件，旨在生成更高效和逻辑性强的代码

AI4Finance开源项目 – 金融领域的强化学习与大语言模型应用

该团队专注于金融领域的强化学习（RL）和大语言模型（LLM）的应用，提供数据收集和量化分析的工具和资源。

Efficient World Models with Context-Aware Tokenization开源项目 – 高效世界模型与上下文感知分词

该项目专注于利用上下文感知分词来构建高效的世界模型，旨在提升智能体的学习与表现。

Pokemon Red RL开源项目 – 使用强化学习玩Pokemon Red

通过强化学习算法，自动玩Pokemon Red，并优化游戏策略，支持自定义训练和测试环境，同时提供数据可视化功能以分析训练结果。

DeepScaleR开源项目 – 让强化学习平民化

DeepScaleR旨在为大语言模型（LLMs）提供强大的性能提升，仅用1.5B参数就超越了7B参数模型的性能。该项目完全开源，包括训练脚本、模型、数据集和日志，特别适用于参与AIME 2024竞赛的模型。

NAwesome-RL-based-LLM-Reasoning开源项目 – 强化学习提升大模型推理能力

这是一个专注于通过强化学习（RL）提升大语言模型（LLM）推理能力的资源库。它旨在帮助研究人员和开发者快速掌握RL与LLM结合的最新进展，并提供解决如何通过RL提升LLM推理能力的实用资源。资源库汇集了最新的相关论文、幻灯片和开源项目，涵盖多种RL方法和LLM推理优化技巧，同时提供丰富的学习资源和实践案例，助力学习者和实践者深入理解并应用RL与LLM的结合。