1月19日

书生·浦语2.0正式开源，回归语言建模本质，综合性能领先开源社区

1月17日，书生·浦语2.0（InternLM2）发布会暨书生·浦源大模型挑战赛启动仪式在上海举行。上海人工智能实验室与商汤科技联合香港中文大学和复旦大学正式发布新一代大语言模型书⽣·浦语2.0（InternLM2）。InternLM2的核心理念在于回归语言建模的本质，致力于通过提高语料质量及信息密度，实现模型基座语言建模能力获得质的提升，进而在数理、代码、对话、创作等各方面都取得长足进步，综合性能达到同量级开源模型的领先水平。InternLM2是在2.6万亿token的高质量语料上训练得到的。沿袭第一代书生·浦语（InternLM）的设定，InternLM2包含7B及20B两种参数规格及基座、对话等版本，满足不同复杂应用场景需求。秉持“以高质量开源赋能创新”理念，上海AI实验室继续提供InternLM2免费商用授权。联合团队提出了新一代的数据清洗过滤技术，主要发展了以下几个方面的技术方法：多维度数据价值评估：基于文本质量、信息密度等维度对数据价值进行综合评估与提升；高质量语料驱动的数据富集：利用高质量语料的特征从物理世界、互联网以及语料库中进一步富集类似语料；针对性的数据补齐：针对性补充语料，重点加强现实世界知识、数理、代码等核心能力。来源：微信公众号【阿里云】

阿里巴巴发布Motionshop，用3D虚拟形象无缝替换视频中的人物角色

阿里巴巴1月16日发布了一项专门替换视频中人物角色的技术，可以将人物替换为指定的虚拟角色。
宣传视频的效果看起来相当不错，替换后的3D虚拟形象跟原视频背景融合地非常好，几乎没有违和感。视频分析：首先，系统会对输入的视频进行分析，识别出视频中的人物角色。这通常涉及到运动跟踪和姿势估计，以便确定人物在视频中的位置和动作。3D模型创建：接下来，需要为视频中的每个角色创建或选择一个3D模型。这些模型可以是预先设计的，也可以是根据视频中人物的特定特征定制的。姿态匹配：为了使3D模型的动作与视频中人物的动作相匹配，Motionshop会使用姿态匹配技术。这意味着3D模型的姿势和动作会被调整，以模仿视频中人物的自然运动。渲染和合成：一旦3D模型的姿态与视频中的动作相匹配，系统就会渲染这些模型，并将其合成到原始视频中。这可能涉及到复杂的图像处理技术，以确保新模型与背景和其他视频元素无缝融合。输出：最后，系统会输出一个新的视频，其中原始视频中的人物已被3D虚拟形象所替换。官方提供了演示demo，在线上demo中，可以上传带有人物形象的15秒以内视频，选择一个虚拟形象（目前3D虚拟形象是预设好的，有4种），然后点击“生成视频”，预计十多分钟可以看到效果。来源：微信公众号【元象XVERSE】

Adobe Premiere Pro 接入AI智能音频编辑功能

1月16日，Adobe 为视频剪辑软件 Premiere Pro 接入了全新的 AI 驱动音频编辑功能，可以说是解放剪辑师的双手，减少繁琐的操作，让他们得以专注于创造性的工作。新增的AI功能：使用基于文本的编辑快速创建初步剪辑：自动生成你的文字记录，通过突出显示文本将剪辑添加到时间轴，这个工具可以自动生成文字记录，你只需突出显示文字，就能将相关片段添加到视频时间轴。之后，你可以像编辑文本一样对这些片段进行细化、重新排序和修剪。如果需要进一步完善，可以批量删除所有尴尬的停顿，并使用填充词检测去除那些不需要的废话。语音转文本：语音转文本功能，你只需点击一下即可完成。该功能可以自动生成准确的剧本，支持超过18种语言，能够区分说话者，并创建与视频中的语调和语音模式相匹配的字幕。添加字幕可以使你的视频在不同的社媒平台上更具吸引力，因为许多用户在观看内容时选择关闭声音。增强语音（测试版）：使用AI技术的增强语音（测试版）功能，消除干扰的背景噪音，提高对话质量。来源：微信公众号【AI大模型实验室】