本文来自蓝衫科技
1 商汤大模型数字人的应用场景有哪些?
“在这个空间里,你可以编辑数字人的周边环境,调整桌椅、花盆等,用于直播带货、讲课和培训等应用,拓展了数字人的功能。”
- 一是如影,可以实现虚拟人物与实物的结合
- 二是数字人可以进行场景建模、直播授课等
- 三是数字人可以在三维空间中进行家具、物品等的编辑
如影和数字人具有空间编辑功能,AIGC主要用于生成秒画和其他应用,通过输入文字和描述词生成图像,如文生图。数字人应用基于录制真人视频,将真人形象合成为数字人,可用于带货直播、讲课和培训等目的。
2 商汤大模型多模态技术的应用与优势在哪里?
- 多模态主要用于自动驾驶领域,整合声音、图片和视频以识别路况及障碍物,解决长尾问题,如路上行人和车标,同时实现半自动化标注等功能
- 多模态技术的主要平台——Aaas与Pass(应用服务提供商)。商汤致力于优化大集群大模型训练,实测加速比达91%,这归功于商汤针对大模型进行了存储、网络和调度方面的全面优化。相比于传统厂商拥有众多产品和插件,商汤更专注于垂直领域的大模型训练优化,尽管产品较少,但优势显著
- 目前,多模态技术尚未完全成熟,仍在探索中。多模态技术的应用范围较广,但仍处于探索阶段
3 商汤大模型的数字化建模与场景应用有哪些?
- 通过与文旅、交通等领域合作,将景点做成旅游的元宇宙形式的虚拟城市
- 通过实时交通的枢纽发现拥堵现象,实现虚拟城市的数字化孪生
- 通过数字人的3D角色编辑功能,可以实现各种侧身或侧身等形式的应用
- 平台AaaS,即通过云平台提供定制化服务,让用户无需购买昂贵的硬件设备即可完成数字化转型
4 商汤大模型怎样与Pass平台结合推出智能交通解决方案?
- 该平台上可以快速完成重复数据的标注工作,从而节省时间
- 与智慧城市、图像采集等应用进行结合,将AIGC技术与智能驾驶、智慧城市等领域进行融合,提升移动能力
- 与智慧城市部门合作,共同推进智能化交通建设
5 商汤大模型在数据采购与使用方面的优势有哪些?
- 商汤云服务提供了算力和智能云平台,双方可以通过整合实现更深度的合作
- 数据分为开源数据和付费数据两种方式,其中免费的数据可以在数据管理平台中下载;而付费的数据则需要通过爬取方式获得。商汤具有半自动化的标注工具对重复的数据进行标注,通过此工具可节省60%-70%的时间
- 商汤云服务与大型模型厂商合作时,可能会采用共享数据共建的方式绕过数据提供商,但这种方式可能存在数据质量问题
6 如何将大型模型和数据集放置到平台中以实现即插即用功能,从而帮助降低自训练这些模型的技术难度?
- 将大模型、数据集等放入平台,实现开箱即用,降低使用难度
- 当前的大模型体系其结构最底层是IDC机房,位于临港的IDC机房规模约为5000P,并正在扩建中,计划扩展到8000P至1万P,当前正在进行扩展以满足算力需求
- 基础设施Sinpas侧重于算力池、金属存储、网络安全和调度等方面,与传统云厂商不同,更偏向于虚拟量模型的优化
- 针对大模型训练进行优化措施,包括调度、存储网络、参数共享等方面的优化,以解决瓶颈问题,确保训练效果