AI+ 交通文旅 ?| 蓝衫科技对话商汤大模型团队

本文来自蓝衫科技与商汤大模型的对话:

 

1 商汤大模型数字人的应用场景有哪些?

"在这个空间里,你可以编辑数字人的周边环境,调整桌椅、花盆等,用于直播带货、讲课和培训等应用,拓展了数字人的功能。"

  • 一是如影,可以实现虚拟人物与实物的结合
  • 二是数字人可以进行场景建模、直播授课等
  • 三是数字人可以在三维空间中进行家具、物品等的编辑

如影和数字人具有空间编辑功能,aigc 主要用于生成秒画和其他应用,通过输入文字和描述词生成图像,如文生图。数字人应用基于录制真人视频,将真人形象合成为数字人,可用于带货直播、讲课和培训等目的

2 商汤大模型多模态技术的应用与优势在哪里?

"多态模主要应用在自动驾驶领域,研发自动化标注模型以减少人工标注时间,覆盖60%到70%的数据,应用于半自动化标注。"

  • 多态模主要用于自动驾驶领域整合声音、图片和视频以识别路况及障碍物,解决长尾问题,如路上行人和车标,同时实现半自动化标注等功能
  • 商汤致力于优化大集群大模型训练,实测加速比达91%,这归功于商汤针对大模型进行了存储、网络和调度方面的全面优化。比于传统厂商拥有众多产品和插件,商汤更专注于垂直领域的大模型训练优化尽管产品较少,但优势显著
  • 目前,多态技术尚未完全成熟,仍在探索中多模态技术的应用范围较广,但仍处于探索阶段

3 商汤大模型的数字化建模与场景应用有哪些?

"三维建模的城市的建模管理可能会需要其他的场景,我们其实还在探索之中,因为东西比较新"

  • 通过与文旅、交通等领域合作,将景点做成旅游的元宇宙形式的虚拟城市
  • 通过实时交通的枢纽发现拥堵现象,实现虚拟城市的数字化孪生
  • 通过数字人的3d角色编辑功能,可以实现各种侧身或侧身等形式的应用
  • AaaS平台,即通过云平台提供定制化服务,让用户无需购买昂贵的硬件设备即可完成数字化转型

4 商汤大模型怎样与 Pass 平台结合推出智能交通解决方案?

"大装置是业务行的底层基座,涵盖智慧城市、智慧生活、智慧医疗、自动驾驶和智慧商业等领域。我们提供算力、模型训练工具和推理平台,成为业务的基础设施,实现与业务的互动和联动。"

  • 该平台上可以快速完成重复数据的标注工作,从而节省时间
  • 与智慧城市、图像采集等应用进行结合,将 aigc 技术与智能驾驶、智慧城市等领域进行融合,提升移动能力
  • 与智慧城市部门合作,共同推进智能化交通建设

5 商汤大模型在数据采购与使用方面的优势有哪些?

"你有什么需求,我们可以去把你的需求了解之后,再去采集数据。 关键在于收数据之后再去帮你去建模,这样的东西去做私有化部署。"

  • 商汤云服务提供了算力和智能云平台,双方可以通过整合实现更深度的合作
  • 数据分为开源数据和付费数据两种方式商汤具有半自动化的标注工具对重复的数据进行标注,通过此工具可节省60%-70%的时间。
  • 商汤云服务与大型模型厂商合作时,可能会采用共享数据共建的方式绕过数据提供商,但这种方式可能存在数据质量问题

6 如何将大型模型和数据集放置到平台中以实现即插即用功能,从而帮助降低自训练这些模型的技术难度?

"提出一个模型,机库把这些模型门槛降低,因为这个东西自己训练还是有一些技术难度,所以我们把它变成一个平台,然后平台里面放一些我们现在已经训练好的大模型。"

  • 将大模型、数据集等放入平台,实现开箱即用,降低使用难度
  • 当前的大模型体系其结构最底层是idc机房,位于临港的idc机房规模约为5000p,并正在扩建中,计划扩展到8000p至1万p,当前正在进行扩展以满足算力需求
  • 基础设施侧重于算力池、金属存储、网络安全和调度等方面,与传统云厂商不同,更偏向于虚拟量模型的优化
  • 针对大模型训练进行优化措施,包括调度、存储网络、参数共享等方面的优化以解决瓶颈问题,确保训练效果

订阅
通知
0 评论
内联反馈
查看所有评论
zh_CN
滚动到顶部