1月3日

美图AI视觉大模型MiracleVision（奇想智能）将向公众开放

1月2日，美图公司自研AI视觉大模型MiracleVision(奇想智能)通过《生成式人工智能服务管理暂行办法》备案，将面向公众开放。美图AI视觉大模型MiracleVision(奇想智能)于2023年6月内测，为美图秀秀、美颜相机、Wink、美图设计室、WHEE、美图云修等知名影像与设计产品提供AI模型能力的同时，也帮助美图公司搭建起由底层、中间层和应用层构建的人工智能产品生态。自面世以来，MiracleVision(奇想智能)持续迭代，目前已升级至4.0版本，除全面应用于美图旗下产品，还在逐步助力电商、广告、游戏、动漫、影视五大行业。多年来，美图始终围绕着“美”来搭建业务和服务用户，积累了大量的美学认知，如今也把这种美学认知融入MiracleVision(奇想智能)，并将其用于诠释中国美学，推动中国传统文化数字化。凭借强大的技术能力、完善的美学评估体系和丰富的落地场景， MiracleVision(奇想智能)在2023年多次斩获大模型相关奖项。截至目前，在通过备案的国内大模型当中，美图公司MiracleVision(奇想智能)是唯一专注视觉领域的大模型，也是福建省唯一通过备案的大模型。来源：微信公众号【美图公司】

微软将对Surface系列进行重大升级 AI成为核心卖点

2023年，微软发布了Surface Hub、Surface Laptop Studio、Surface Laptop Go和Surface Go系列产品的更新，主要是规格微调和价格上涨，但并未发布全新的Surface Pro或Surface Laptop。此次升级改进了外观设计、增加了新功能，并搭载英特尔第14代芯片和高通骁龙X系列芯片。毕马威计划在5年内向微软的人工智能和云服务领域投资20亿美元。Surface Pro和Surface Laptop将首次同时推出两种版本，分别搭载英特尔和ARM芯片。两款产品还都将采用新一代神经处理单元（NPU）芯片。其中ARM设备具体采用的是定制版高通骁龙X系列芯片。微软内部将采用高通定制版芯片的新一代ARM设备称为“CADMUS”个人电脑。这些设备是专门为代号哈德逊谷(Hudson Valley)的新版Windows系统打造的，拥有丰富的人工智能体验。微软宣称CADMUS个人电脑能媲美搭载苹果硅芯片的Mac产品，电池续航时间、性能和安全性都不相上下。据悉，新一代Surface Pro和Surface Laptop将成为首批搭载CADMUS的个人电脑，为2024年晚些时候发布新版Windows系统打前站。来源：微信公众号【EEPW】

无需额外训练提升模型30%性能！DeepMind科学家点赞MIT博士生实习成果

一个来自MIT博士生的惊人发现：只需对Transformer的特定层进行一种非常简单的修剪，即可在缩小模型规模的同时显著提高模型性能。效果主要体现在文本理解任务上，最高可达30%。这在3个模型（LLama2、GPT-J和Roberta）和8个不同数据集上都得到了验证（包含认知推理、世界知识等）。除了文本理解，它也适用于强化学习。当然，更重要的是，这个操作只需在模型训练完成之后进行，不需要额外的参数和数据。该方法全称“ Layer-Selective Rank Reduction”，简称“LASER”。这是一种选择性地去除LLM权重矩阵高阶组件（components）的干预措施，操作就在Transformer模型的特定权重矩阵和层中进行。研究发现，即使完全去除90%以上，模型性能一般也不会下降。具体而言，LASER通过rank-k近似来替换Transformer模型中的特定权重矩阵（W），有时仅减少包含前1%组件的矩阵，也能达到不错的效果。一个单步LASER干预措施包含三个参数：类型（T）、层号（ℓ ）和降秩（ρ，全称rank reduction）。这些值组合在一起描述哪个矩阵将被其低阶近似所取代，以及近似的程度。其中参数类型对我们将要干预的矩阵进行分类，而矩阵W来自MLP和注意力层。层号表示我们要介入的层（第一层从0开始索引）。比如Llama-2有32层，因此ℓ ∈｛0，1，2，···31｝。最后，ρ∈[0，1）描述在进行低秩近似时应该保留最大秩的分数。来源：微信公众号【量子位】