澎湃Logo
下载客户端

登录

  • +1

【聚焦】秒画“繁花”、生成驾驶员健康档案,上海的这些大模型应用进展如何?

2024-01-17 19:21
来源:澎湃新闻·澎湃号·政务
字号

为深入学习宣传贯彻习近平总书记考察上海重要讲话精神,市经济信息化委组织开展“紧跟总书记脚步 走进创新型企业”系列活动,邀请主流媒体走访调研部分上海科技创新成果展参展企业,聆听企业讲述创新产品和背后的故事,展示上海近年产业创新成就和光明前景,增强加快推进上海新型工业化的信心和底气,唱响中国经济光明论。近期,“上海经信委”微信公众号将陆续刊发有关媒体报道,以飨读者。

在大模型的研发应用领域,上海人工智能企业取得哪些新进展?

近日,澎湃新闻记者跟随上海市经信委组织的“紧跟总书记脚步 走进创新型企业”媒体探营采访团,走访了位于上海漕河泾的商汤科技(以下简称“商汤”)AI体验中心,get了不少新技能和新应用。

绘画大模型:输入关键词,5秒生成图像

在AI体验中心内,参观者可以体验到商汤推出的大语言模型以及文生图大模型“秒画SenseMirage”,感受生成式AI给人们生活带来的变化。

“秒画SenseMirage”是一个包含商汤自研作画大模型和便捷的LoRA训练能力、提供第三方社区开源模型加速推理的AI绘画平台,为创作者提供更加便利、完善的内容生产创作工具。“秒画”顾名思义,可在几秒钟时间内迅速生成画作。

△输入描述性词语后生成的一组画面

“赛博朋克少女,一半是机械脸,呈现未来机械科技,冷酷的眼神,霓虹灯光照射在脸庞上,脸部特写镜头……”在现场,一位体验者输入上述这段描述性词语,选好输出分辨率、生产数量后,仅仅等待了5-7秒,一组符合上述特点的人物图像就生成在了屏幕上。

最近,王家卫导演的电视剧《繁花》爆火,有体验者兴致勃勃地在键盘上敲入“繁花 王家卫 夜东京”等字样,点击“立即生成”,5秒钟后,几张图片在众人围观中映入眼帘——夜色下的东京街头灯火阑珊,盛开的樱花树闪现出王家卫镜头下独特的影调和光晕。不过,从“命题作画”的角度来看,与电视剧《繁花》中的夜东京餐厅还不是一回事。

△输入“繁花 王家卫 夜东京”等字样后生成的几张图片

商汤相关人士解释说,对于文生图大模型来说,繁花、夜东京、王家卫还属于特定含义的新词,不过这也难不倒SenseMirage,只需上传几张代表这些词汇的图片或LOGO,秒画大模型就能通过LoRA训练自我学习,掌握这些词汇的内涵,后续再接收到这些指令,就能快速生成“真正你想要”的图片和作品。

△输入“水彩画 湖边露营 一家人 温馨”等词语,“秒画SenseMirage”大模型在几秒钟内创造出来的作品

自动驾驶大模型:推出众多功能

可以形成驾驶员健康档案

记者在探营中了解到,在智能汽车领域,商汤绝影智能车舱、智能驾驶、车路协同等行业应用也已在大模型的加持下不断突破。

比如绝影智能车舱系统目前推出了驾驶员感知、乘员感知、手势感知、健康助手、美颜相机、隔空绘画等众多功能选项,在等红灯的时间内,系统可自动测量驾驶员的心率、血氧饱和度、呼吸频率等数值,长期以往就可形成驾驶员的健康档案,并能在测得异常数据后及时发出预警。

△“绝影”智能车舱系统目前推出了众多功能选项

△“绝影”智能车舱系统可自动测量驾驶员的心率、血氧饱和度、呼吸频率等数值

此外,商汤最新发布了自动驾驶大模型DriveMLM,用户只需将图像、激光雷达信息、交通规则甚至是乘客需求“一股脑”给到它,它就能给出驾驶方案。

AI体验中心内,还展示了一座人工智能计算中心(商汤临港AIDC)的模型,这是亚洲最大的人工智能计算中心之一。该项目位于上海临港新片区,一期投资56亿元,主要建设园区智算大楼与科研行政大楼,用于AI智算中心平台硬件搭建、平台软件、平台管理系统与大模型应用等多方向研发。据介绍,项目占地87亩,整体规划建筑面积13万平方米,截至目前,一期已建成7万平方米。

△AI体验中心内展示了一座人工智能计算中心(商汤临港AIDC)的模型,这是亚洲最大的人工智能计算中心之一

“目前,商汤人工智能计算中心的算力规模高达6800 Petaflops,已有超3万块GPU,远远超出立项规划的3740P算力总量。”体验中心工作人员告诉记者,在支持商汤自身大模型研发的同时,该计算中心也支持外部客户训练大模型和应用部署,强大算力可支撑超过20个千亿级超大模型同时训练。

原标题:《【聚焦】秒画“繁花”、生成驾驶员健康档案,上海的这些大模型应用进展如何?》

阅读原文

    本文为澎湃号作者或机构在澎湃新闻上传并发布,仅代表该作者或机构观点,不代表澎湃新闻的观点或立场,澎湃新闻仅提供信息发布平台。申请澎湃号请用电脑访问http://renzheng.thepaper.cn。

    +1
    收藏
    我要举报

            扫码下载澎湃新闻客户端

            沪ICP备14003370号

            沪公网安备31010602000299号

            互联网新闻信息服务许可证:31120170006

            增值电信业务经营许可证:沪B2-2017116

            © 2014-2024 上海东方报业有限公司

            反馈