搜索

您的关键词

新闻动态

News updates

元宇宙之问|多国正在虚拟训练场练兵,大模型加速元宇宙落地

发布时间:2024-03-29 浏览次数:75 来源: 澎湃新闻 ∙ 全球智库

近期,IEEE(电气电子工程师学会)调研显示,65%受访者认为,人工智能将成为2024年最重要的技术,并在全球经济发展中广泛应用。年初,GPT-4、PaLM、Llama 2等大模型的爆发,似乎让人们忘却了元宇宙元年的辉煌。

受限于技术、算力的发展,维持短暂热度的元宇宙目前仍是一个初级版本。如何让虚拟世界更加智能化,交互更加真实顺畅,创建更具创意和趣味的空间,还需要技术的迭代升级。作为元宇宙的核心技术之一, AI在用户画像、内容生产、产品(服务)提供、平台构建、人机交互、智能设备等方面扮演着至关重要的角色,可谓是支撑元宇宙世界可持续发展的必杀技。目前,大模型已在自然语言处理、计算机视觉、语音识别等领域取得重大突破,并从硬件提升、增强虚实连接、AI化身、智能化交互体验、个性化服务优化等方面全面创新元宇宙发展模式,正将元宇宙由萌芽探索带入发展落地阶段。 

一、领军企业推动大模型发展,长线布局元宇宙

押注人工智能 彰显Meta的AI+元宇宙雄心

作为元宇宙第一股,虽然Meta的元宇宙项目看似遇冷,从启动至今已累计亏损500亿美元,Meta却仍然坚定对这一前瞻性布局至少投入十年,希望通过人工智能技术与元宇宙的整合,彻底改变用户在虚拟环境中的互动参与方式。Meta认为,对人工智能和硬件领域的持续投入都将成为元宇宙发展的重要基石,并将自身定位为全球用户开发革命性新通信方法和数字体验的领头力量。一方面将 AI 植入存量业务;另一方面抓紧研发 AI Native 应用,如基于 Llama2 平台推出人工智能聊天机器人——Meta AI。

Meta在元宇宙中集成AI的开创性努力为其带来了丰厚回报,凭借Llama开源模型扳回一局,甚至与 OpenAI、微软和谷歌正面对决。Meta公布的最新财报显示,2023年,Meta实现全年营收1349亿美元,较上年增长16%;实现净利润为391亿美元,同比增长 69%。其中,第四季度营收401 亿美元,同比增长 25%。

YUAN (1).jpg

图1 Meta股价变动(2019年至2024年3月12日)
图片来源:MSN财经。

二、企业积极探索AI赋能元宇宙路径

AI建模实现运动追踪 强化虚实链接

为了能在数字世界中实时表示现实世界的人和物,目前主要基于设备的传感器、摄像头或两者的组合在元宇宙中捕获人类活动。然而,这在现实中存在很大的局限性。研究人员表示,目前设备的传感系统往往只能捕获人体某一点的信息,无法模拟非常复杂的活动,而摄像头的追踪系统则在弱光环境和遇到物理障碍物时难以应对。

为此,多年来,研究人员曾尝试将传统追踪方法与WiFi传感相结合,通过发送和接收WiFi数据的无线电信号,采集心跳、追踪呼吸和睡眠模式,甚至可以透过墙壁感知人体,取得了不同程度的成功。然而,WiFi追踪需要使用人工智能模型,大量的标记数据采集非常麻烦。新加坡南洋理工大学研究人员则另辟蹊径,提出一种新颖的无监督多模式HAR(人类活动识别)解决方案MaskFi,可利用未标记的视频和Wi-Fi活动数据建立训练数据库,开展模型训练。在无监督学习范式下,人工智能模型先在较小的数据集上进行预训练,然后进行迭代,直到能够以令人满意的准确度预测输出状态。研究人员表示,MaskFi系统在两个相关基准测试中的准确率约为97%,有望发展成为全新的元宇宙模式的催化剂,助力创造一个可以实时提供1:1真实世界表示的元宇宙。

探索AI化身渲染功能 丰富内容生产

数字化身生成软件商Copresence宣布旗下平台添加了AI化身渲染功能,为大规模B2B部署提供了完整的企业级平台,仅使用智能手机即可实现用户脸部的逼真3D模型生成,从而满足各行业的不同需求。

最新AI化身渲染发布之后,Copresence平台现在拥有两种不同的化身创建方法供用户选择:一是通过计算机图形创建的经典3D资产(CG化身),二是人工智能生成的化身(AI化身),两者各具优势。Copresence CG化身功能多样,可在Blender、Maya等工具中进行编辑,并兼容Unreal Engine、Unity等游戏引擎,满足虚拟世界和游戏行业对用户形象细致化和沉浸式体验的需求,最终让游戏玩家的形象更加真实。

相比之下,Copresence AI化身优先考虑照片真实感和超越“恐怖谷”领域的相似度。Copresence AI化身目前使用专有的神经网络软件在消费类笔记本电脑上以60 FPS的速度实时渲染,并捕捉面部表情的微妙之处,使该解决方案非常适合基于XR的视频会议和涉及实时交互的应用。目前,Copresence CG和AI生成的化身主要具有三个方向应用,一是为游戏开发者创建详细的角色;二是为专业人士和组织在视频会议中无缝集成逼真的化身;三是3D XR环境和空间计算。

YUAN (2).jpg

图2 Copresence的AI 头像渲染
图片来源:Copresence / YouTube。

多国已在AI虚拟训练场练兵

元宇宙技术正在改变各国特种部队的训练方式,被广泛认为是一种很棒的辅助训练手段,帮助部队做好实战准备。在人工智能的加持下,虚拟现实技术几乎可以创造各种训练场景,人工智能生成的敌方部队可以对“战斗”期间发生的事件做出反应,既安全又经济。

在英国,特种部队正在采用虚拟现实技术以助力秘密作战行动。通过运用VR设备,特种兵们将在隧道、洞穴以及城市和乡村等复杂环境中执行虚拟任务,如跳伞、伏击、狙击手袭击或高强度的近距离战斗,清除建筑物中的恐怖分子,等等。在美国,特种作战司令部(包括三角洲部队和海豹突击队)2023年斥资2000万美元购入Havik虚拟现实系统,用于开展“沉浸式移动训练”。成立于2021年,处于种子轮的美国初创公司Combatica,获得英伟达初创加速计划支持,致力于发展面向执法和特种部队的下一代XR培训平台,其设计的XR系统整合了人工智能技术,不需要电池组,士兵也不需要佩戴传感器,几乎可以在任何环境中使用。12名士兵组队可以一起接受长达25分钟的任务训练。目前,该系统被美国武装部队、以色列国防军和几个欧洲国家的军事单位所使用。

YUAN (3).jpg

图3 Combatica的下一代XR培训平台
图片来源:网络。

三、看好AI发展,元宇宙产业生态不断完善

诺基亚进一步明确元宇宙战略

诺基亚刚刚发布的年报着重提出,公司要向元宇宙战略转变,元宇宙在塑造公司发展轨迹和到2030年满足不断变化的消费者需求方面发挥着关键作用,还预测,由于人工智能、机器学习、扩展现实、自动化以及数十亿其他设备的广泛采用,消费者对虚拟现实设备和增强连接解决方案的需求将推动网络流量大幅增长,2022年至2030年,最终用户数据流量预计复合年增长率为22%至25%。为此,诺基亚计划大力投资网络设备和服务,大力发展价值互联网、人工智能、工业5.0、API经济和云连续体等各类生态系统,并积极探索元宇宙,实施人类增强、空间计算和分割处理的元宇宙战略。

2023年6月底,诺基亚在上海正式启动工业元宇宙实验室,与生态合作伙伴一起,为客户打造包括集群通信、视觉识别、IOC、自动化设备、AR/VR、高精定位、工业连接及物联设备在内的本地边缘行业应用方案,推动工业元宇宙的落地与发展。此外,诺基亚正在探索包括情感和认知状态等特征、超越视觉表现的数字孪生技术,提出“MetaHumans”概念,探索其在工业模拟方面的应用,可用于优化工作策略、增强安全措施并提高性能和产量。

YUAN (4).jpg

图4 Nokia与微软HoloLens合作
图片来源:网络。

对标智能生活解决方案商,LG尝试在虚拟空间开展业务

可穿戴XR设备被誉为下一代个人设备,能够突破移动屏幕在沉浸感和直观性方面的限制,显示出大幅拓宽客户互动的潜力。为把握XR商业领域发展机遇,利用2023年底组织重组时机,LG在家庭娱乐业务线内部成立专门的XR部门,以加速在虚拟空间领域开展新业务。在2030年未来愿景中,公司致力于成为智能生活解决方案商,以无缝连接和扩展家庭、商业、移动和虚拟空间等各领域的客户体验。为了实现这一长期目标,2024年2月底,LG正试图加强与全球科技巨头Meta的战略合作,如围绕Meta大语言模型及其在Meta Quest 3和Ray-Ban Meta智能眼镜等设备上集成人工智能,将Meta平台与其电视业务内容/服务整合,在XR领域打造独特的生态系统。

YUAN (5).jpg

图5 LG 推出Micro LED 新品,面对XR虚拟拍摄
图片来源:网络。 

由此可见,元宇宙并未失焦,不仅以Meta为代表的元宇宙领军平台企业、技术服务提供商、硬件制造商都在前仆后继,拥抱最先进的人工智能新兴技术,从不同角度赋能元宇宙发展,中国移动、SK电讯、三星、华为、联想、诺基亚、LG等通信运营商和设备供应商也仍在积极探索其发展潜力,实现双向奔赴。

全球市场对元宇宙发展依然保持乐观预测,Statista估计,2024年,全球元宇宙市场规模将达到744 亿美元,并有望在2024年至2030年间保持年均37.73%的高增长率,未来十年,突破5000亿美元。大模型的加持,赋予元宇宙中的各类角色生成越来越多的能力,结合推动图像生成能力不断迭代,让各类元宇宙的构建成为大模型应用的最佳实践地,为大模型发展提供丰富而多元的场景,元宇宙将有望得到持续突破和优化,更逼真、更流畅、交互更真实,体验更绝妙。

毫无疑问,大模型照亮了元宇宙发展前路,勇者们饱含热情,构筑生态,倾情投入,互助前行。

(蒋媛媛系上海社会科学院应用经济研究所副研究员,经济学博士,持续关注国内外数字经济发展和数字化转型。本专栏以元宇宙之问为主题,求索下一代互联网和数字经济的未来。)


上一篇: 以数智技术创新与重构数字消费五大场景

下一篇: 百余博物馆“掌门人”聚杭州 建言博物馆创新发展

新闻动态

元宇宙之问|多国正在虚拟训练场练兵,大模型加速元宇宙落地

发布时间:2024-03-29 浏览次数:75 来源: 澎湃新闻 ∙ 全球智库

近期,IEEE(电气电子工程师学会)调研显示,65%受访者认为,人工智能将成为2024年最重要的技术,并在全球经济发展中广泛应用。年初,GPT-4、PaLM、Llama 2等大模型的爆发,似乎让人们忘却了元宇宙元年的辉煌。

受限于技术、算力的发展,维持短暂热度的元宇宙目前仍是一个初级版本。如何让虚拟世界更加智能化,交互更加真实顺畅,创建更具创意和趣味的空间,还需要技术的迭代升级。作为元宇宙的核心技术之一, AI在用户画像、内容生产、产品(服务)提供、平台构建、人机交互、智能设备等方面扮演着至关重要的角色,可谓是支撑元宇宙世界可持续发展的必杀技。目前,大模型已在自然语言处理、计算机视觉、语音识别等领域取得重大突破,并从硬件提升、增强虚实连接、AI化身、智能化交互体验、个性化服务优化等方面全面创新元宇宙发展模式,正将元宇宙由萌芽探索带入发展落地阶段。 

一、领军企业推动大模型发展,长线布局元宇宙

押注人工智能 彰显Meta的AI+元宇宙雄心

作为元宇宙第一股,虽然Meta的元宇宙项目看似遇冷,从启动至今已累计亏损500亿美元,Meta却仍然坚定对这一前瞻性布局至少投入十年,希望通过人工智能技术与元宇宙的整合,彻底改变用户在虚拟环境中的互动参与方式。Meta认为,对人工智能和硬件领域的持续投入都将成为元宇宙发展的重要基石,并将自身定位为全球用户开发革命性新通信方法和数字体验的领头力量。一方面将 AI 植入存量业务;另一方面抓紧研发 AI Native 应用,如基于 Llama2 平台推出人工智能聊天机器人——Meta AI。

Meta在元宇宙中集成AI的开创性努力为其带来了丰厚回报,凭借Llama开源模型扳回一局,甚至与 OpenAI、微软和谷歌正面对决。Meta公布的最新财报显示,2023年,Meta实现全年营收1349亿美元,较上年增长16%;实现净利润为391亿美元,同比增长 69%。其中,第四季度营收401 亿美元,同比增长 25%。

YUAN (1).jpg

图1 Meta股价变动(2019年至2024年3月12日)
图片来源:MSN财经。

二、企业积极探索AI赋能元宇宙路径

AI建模实现运动追踪 强化虚实链接

为了能在数字世界中实时表示现实世界的人和物,目前主要基于设备的传感器、摄像头或两者的组合在元宇宙中捕获人类活动。然而,这在现实中存在很大的局限性。研究人员表示,目前设备的传感系统往往只能捕获人体某一点的信息,无法模拟非常复杂的活动,而摄像头的追踪系统则在弱光环境和遇到物理障碍物时难以应对。

为此,多年来,研究人员曾尝试将传统追踪方法与WiFi传感相结合,通过发送和接收WiFi数据的无线电信号,采集心跳、追踪呼吸和睡眠模式,甚至可以透过墙壁感知人体,取得了不同程度的成功。然而,WiFi追踪需要使用人工智能模型,大量的标记数据采集非常麻烦。新加坡南洋理工大学研究人员则另辟蹊径,提出一种新颖的无监督多模式HAR(人类活动识别)解决方案MaskFi,可利用未标记的视频和Wi-Fi活动数据建立训练数据库,开展模型训练。在无监督学习范式下,人工智能模型先在较小的数据集上进行预训练,然后进行迭代,直到能够以令人满意的准确度预测输出状态。研究人员表示,MaskFi系统在两个相关基准测试中的准确率约为97%,有望发展成为全新的元宇宙模式的催化剂,助力创造一个可以实时提供1:1真实世界表示的元宇宙。

探索AI化身渲染功能 丰富内容生产

数字化身生成软件商Copresence宣布旗下平台添加了AI化身渲染功能,为大规模B2B部署提供了完整的企业级平台,仅使用智能手机即可实现用户脸部的逼真3D模型生成,从而满足各行业的不同需求。

最新AI化身渲染发布之后,Copresence平台现在拥有两种不同的化身创建方法供用户选择:一是通过计算机图形创建的经典3D资产(CG化身),二是人工智能生成的化身(AI化身),两者各具优势。Copresence CG化身功能多样,可在Blender、Maya等工具中进行编辑,并兼容Unreal Engine、Unity等游戏引擎,满足虚拟世界和游戏行业对用户形象细致化和沉浸式体验的需求,最终让游戏玩家的形象更加真实。

相比之下,Copresence AI化身优先考虑照片真实感和超越“恐怖谷”领域的相似度。Copresence AI化身目前使用专有的神经网络软件在消费类笔记本电脑上以60 FPS的速度实时渲染,并捕捉面部表情的微妙之处,使该解决方案非常适合基于XR的视频会议和涉及实时交互的应用。目前,Copresence CG和AI生成的化身主要具有三个方向应用,一是为游戏开发者创建详细的角色;二是为专业人士和组织在视频会议中无缝集成逼真的化身;三是3D XR环境和空间计算。

YUAN (2).jpg

图2 Copresence的AI 头像渲染
图片来源:Copresence / YouTube。

多国已在AI虚拟训练场练兵

元宇宙技术正在改变各国特种部队的训练方式,被广泛认为是一种很棒的辅助训练手段,帮助部队做好实战准备。在人工智能的加持下,虚拟现实技术几乎可以创造各种训练场景,人工智能生成的敌方部队可以对“战斗”期间发生的事件做出反应,既安全又经济。

在英国,特种部队正在采用虚拟现实技术以助力秘密作战行动。通过运用VR设备,特种兵们将在隧道、洞穴以及城市和乡村等复杂环境中执行虚拟任务,如跳伞、伏击、狙击手袭击或高强度的近距离战斗,清除建筑物中的恐怖分子,等等。在美国,特种作战司令部(包括三角洲部队和海豹突击队)2023年斥资2000万美元购入Havik虚拟现实系统,用于开展“沉浸式移动训练”。成立于2021年,处于种子轮的美国初创公司Combatica,获得英伟达初创加速计划支持,致力于发展面向执法和特种部队的下一代XR培训平台,其设计的XR系统整合了人工智能技术,不需要电池组,士兵也不需要佩戴传感器,几乎可以在任何环境中使用。12名士兵组队可以一起接受长达25分钟的任务训练。目前,该系统被美国武装部队、以色列国防军和几个欧洲国家的军事单位所使用。

YUAN (3).jpg

图3 Combatica的下一代XR培训平台
图片来源:网络。

三、看好AI发展,元宇宙产业生态不断完善

诺基亚进一步明确元宇宙战略

诺基亚刚刚发布的年报着重提出,公司要向元宇宙战略转变,元宇宙在塑造公司发展轨迹和到2030年满足不断变化的消费者需求方面发挥着关键作用,还预测,由于人工智能、机器学习、扩展现实、自动化以及数十亿其他设备的广泛采用,消费者对虚拟现实设备和增强连接解决方案的需求将推动网络流量大幅增长,2022年至2030年,最终用户数据流量预计复合年增长率为22%至25%。为此,诺基亚计划大力投资网络设备和服务,大力发展价值互联网、人工智能、工业5.0、API经济和云连续体等各类生态系统,并积极探索元宇宙,实施人类增强、空间计算和分割处理的元宇宙战略。

2023年6月底,诺基亚在上海正式启动工业元宇宙实验室,与生态合作伙伴一起,为客户打造包括集群通信、视觉识别、IOC、自动化设备、AR/VR、高精定位、工业连接及物联设备在内的本地边缘行业应用方案,推动工业元宇宙的落地与发展。此外,诺基亚正在探索包括情感和认知状态等特征、超越视觉表现的数字孪生技术,提出“MetaHumans”概念,探索其在工业模拟方面的应用,可用于优化工作策略、增强安全措施并提高性能和产量。

YUAN (4).jpg

图4 Nokia与微软HoloLens合作
图片来源:网络。

对标智能生活解决方案商,LG尝试在虚拟空间开展业务

可穿戴XR设备被誉为下一代个人设备,能够突破移动屏幕在沉浸感和直观性方面的限制,显示出大幅拓宽客户互动的潜力。为把握XR商业领域发展机遇,利用2023年底组织重组时机,LG在家庭娱乐业务线内部成立专门的XR部门,以加速在虚拟空间领域开展新业务。在2030年未来愿景中,公司致力于成为智能生活解决方案商,以无缝连接和扩展家庭、商业、移动和虚拟空间等各领域的客户体验。为了实现这一长期目标,2024年2月底,LG正试图加强与全球科技巨头Meta的战略合作,如围绕Meta大语言模型及其在Meta Quest 3和Ray-Ban Meta智能眼镜等设备上集成人工智能,将Meta平台与其电视业务内容/服务整合,在XR领域打造独特的生态系统。

YUAN (5).jpg

图5 LG 推出Micro LED 新品,面对XR虚拟拍摄
图片来源:网络。 

由此可见,元宇宙并未失焦,不仅以Meta为代表的元宇宙领军平台企业、技术服务提供商、硬件制造商都在前仆后继,拥抱最先进的人工智能新兴技术,从不同角度赋能元宇宙发展,中国移动、SK电讯、三星、华为、联想、诺基亚、LG等通信运营商和设备供应商也仍在积极探索其发展潜力,实现双向奔赴。

全球市场对元宇宙发展依然保持乐观预测,Statista估计,2024年,全球元宇宙市场规模将达到744 亿美元,并有望在2024年至2030年间保持年均37.73%的高增长率,未来十年,突破5000亿美元。大模型的加持,赋予元宇宙中的各类角色生成越来越多的能力,结合推动图像生成能力不断迭代,让各类元宇宙的构建成为大模型应用的最佳实践地,为大模型发展提供丰富而多元的场景,元宇宙将有望得到持续突破和优化,更逼真、更流畅、交互更真实,体验更绝妙。

毫无疑问,大模型照亮了元宇宙发展前路,勇者们饱含热情,构筑生态,倾情投入,互助前行。

(蒋媛媛系上海社会科学院应用经济研究所副研究员,经济学博士,持续关注国内外数字经济发展和数字化转型。本专栏以元宇宙之问为主题,求索下一代互联网和数字经济的未来。)


上一篇: 以数智技术创新与重构数字消费五大场景

下一篇: 百余博物馆“掌门人”聚杭州 建言博物馆创新发展