复旦大学团队研发“眸思”大模型及“听见世界”App

热搜大全 > 新闻热搜 > 科技热搜 > 正文

复旦大学团队研发“眸思”大模型及“听见世界”App

热搜大全 2024-03-03

IT 之家 3 月 2 日消息,据复旦大学官方公众号,在复旦大学自然语言处理实验室 ( FudanNLP ) 师生的努力下,基于多模态大模型 " 复旦・眸思 " ( MouSi ) 为视障者量身打造的 " 听见世界 "App 上线。

复旦大学团队研发“眸思”大模型及“听见世界”App

这套系统仅需一枚摄像头、一对耳机,就能将画面转化为语言,且支持描绘场景、提示风险等功能。" 听见世界 "App 可为视障者日常生活需求设计三种模式。

街道行走:该模式下," 眸思 " 能够细致扫描道路情况,提示潜在风险。

自由问答:可帮助视障者走进博物馆、艺术馆、公园,捕捉四周景象每个细节,可用声音构建丰富的生活场景,官方演示图显示,该 App 还可实现转述电视画面内容等功能。

寻物:该模式为视障者提供日常物件的寻觅功能,官方称其为 " 可靠管家 "。

复旦大学团队研发“眸思”大模型及“听见世界”App

▲ 图源复旦大学,下同

复旦大学团队研发“眸思”大模型及“听见世界”App复旦大学团队研发“眸思”大模型及“听见世界”App复旦大学团队研发“眸思”大模型及“听见世界”App

据悉,预计今年 3 月," 听见世界 "App 将完成第一轮测试,并在中国一、二线城市和地区同步开启试点,根据算力部署情况进行推广。

IT 之家注:复旦大学自然语言处理实验室(FudanNLP)此前开发了 MOSS 大模型,2023 年 4 月宣布正式开源,成为国内首个插件增强的开源对话语言模型。半年时间后,多模态模型 " 眸思 " 问世。

用户对喜马拉雅的“一台设备一充值”的抱怨引发了网友的吐槽,认为这是一种花式割韭菜行为。

用户对喜马拉雅的“一台设备一充值”的抱怨引发了网友的吐槽,认为这是一种花式割韭菜行为。

科技热搜 喜马拉雅 天猫精灵 手表 设备 韭菜 新闻 资讯 直播 视频 美图 社区 本地 热点 2023-08-07

“遥遥领先”,一个华为热梗的走红

“遥遥领先”,一个华为热梗的走红

科技热搜 华为 芯片 余承东 华为mate 雷蒙 新闻 资讯 直播 视频 美图 社区 本地 热点 2023-09-29

华为 Mate 60 Pro  DXOMARK 影像测试结果出炉:总分157,位列排行榜第 1 名

华为 Mate 60 Pro DXOMARK 影像测试结果出炉:总分157,位列排行榜第 1 名

科技热搜 华为mate google pixel oppo find x iphone 新闻 资讯 直播 视频 美图 社区 本地 热点 2023-11-17

《繁花》:A先生最后一集终于露脸,为何是宝总的模样?

《繁花》:A先生最后一集终于露脸,为何是宝总的模样?

娱乐热点 导演 a股 李产 股市 陈真 新闻 资讯 直播 视频 美图 社区 本地 热点 2024-01-18

韩国女团大尺度造型惹争议,穿着令人费解,成员还有中国人

韩国女团大尺度造型惹争议,穿着令人费解,成员还有中国人

娱乐热点 造型 韩国 尺度 中国人 穿着 新闻 资讯 直播 视频 美图 社区 本地 热点 2024-02-04

曾被卖出19万美元高价!这台初代iPhone太猛了 曾被卖出19万美元高价!这台初代iPhone太猛了