9月15日·北大对齐团队独家解读：OpenAI o1开启「后训练」时代强化学习新范式

26 0 0

9月15日·周日 AI工具和资源推荐

AI智库导航-aiguide.cc为您提供最新的AI新闻资讯和最新的AI工具推荐，在这里你可以获得用于营销的AI聊天机器人、AI在商业管理中的应用、用于数据分析的AI工具、机器学习模型、面向企业的AI解决方案、AI在商业客户服务中的应用、AI和自动化工具等。

北大对齐团队独家解读：OpenAI o1开启「后训练」时代强化学习新范式

OpenAI最近发布的o1模型在数学、编程和长期规划等领域取得了显著进步，标志着“后训练”时代强化学习的新范式。o1模型通过构建庞大的逻辑数据集和类似AlphaGo的MCTS与RL方法，实现了问题与答案间更紧密的联系。其技术核心在于强化学习的搜索与学习机制，利用LLM的推理能力，迭代式地产生合理推理过程，并将其融入训练过程。o1的成功展示了后训练扩展律（Post-Training Scaling Laws）的潜力，预示着未来AI能力提升将更多依赖于后训练阶段的强化学习训练和推理阶段的思考计算量。来源：微信公众号【机器之心】

陶哲轩实测OpenAI o1：能当研究生使唤

著名数学家陶哲轩提前体验了OpenAI的满血版o1模型，并对其在数学问题解答上的能力给予了高度评价。在测试中，o1成功识别并应用了克莱姆定理解决了一个措辞模糊的数学问题，其答案的准确性和条理清晰度均令人满意。陶哲轩形容，使用o1的感觉就像是在指导一个“平庸无奇但又有点小能力的研究生”，尽管模型在自主产生关键概念上仍有局限，但在提供足够提示的情况下，能够达到甚至超越研究生水平的表现。这一评价引发了社区的广泛讨论，许多研究者分享了他们使用大型语言模型在数学研究中的积极经验，认为随着模型的不断进步，其在数学研究领域的实用性将大幅提升。来源：微信公众号【量子位】

华为诺亚方舟实验室推出ToolACE：革新AI工具调用数据合成

华为诺亚方舟实验室联合中科大等机构的研究人员，提出了ToolACE——一个创新的AI工具调用数据合成框架。该框架能够自动化生成高准确性、高复杂性、高多样性的工具调用数据，极大地推动了大语言模型在工具调用能力上的发展。ToolACE通过自进化合成过程构建了一个包含26,507个多样化API的API库，并通过多智能体交互生成复杂对话，结合规则和模型的双层数据质检流程确保数据的准确性。基于ToolACE合成数据微调的Llama 3.1模型，在开源工具调用榜单BFCL中取得了优异的成绩，展现了其在提升AI工具调用能力上的巨大潜力。来源：微信公众号【机器之心】

MagicLab展示多功能人形机器人，技能涵盖咖啡拉花与工业应用

中国机器人公司MagicLab最近展示了其先进的人形机器人，这款机器人不仅能够进行高精度的咖啡拉花，还能在工业环境中执行任务，如分发夜宵、领路、甚至遛狗。该机器人是全球首个实现自主咖啡拉花的人形机器人，展现了其在服务行业的巨大潜力。MagicLab专注于研发通用机器人技术和AI技术，其产品线包括仿生四足机器人、工业四足机器人和通用人形机器人，旨在覆盖家庭、工业和商业等多个场景。公司正致力于将3C场景的落地应用商业化，并预计年底在产线开展试运行，以提高生产效率并减少人工干预。MagicLab的长期目标是开发出能够在家庭环境中提供陪伴、家务帮助和养老服务的M3级别人形机器人，以及最终实现物理世界的Siri——M4级别的通用机器人。来源：微信公众号【量子位】

Chai Discovery发布Chai-1，引领分子结构预测新突破

AI生物技术初创公司Chai Discovery发布了新型多模态基础模型Chai-1，该模型在分子结构预测领域超越了AlphaFold3，创造了新的性能记录。Chai-1能够统一预测蛋白质、小分子、DNA、RNA及共价修饰等，显著提高了与药物发现相关的任务的成功率。Chai-1模型通过Web界面免费提供使用，并可用于商业应用如药物发现。Chai Discovery由来自OpenAI、Meta FAIR和Google X等顶尖AI和生物技术组织的专家组成，其目标是使生物学像工程一样可预测，以加速新药的研发进程。Chai-1的发布不仅标志着该公司在AI驱动的生物学研究领域的重大进展，也为未来生物学研究和工程提供了新的可能性。来源：微信公众号【机器之心】