复旦团队助力视障者“听见世界”!
周到上海
2024-03-06 15:08:15
0

原标题:复旦团队助力视障者“听见世界”!

一枚摄像头、一对耳机,便能将画面转化成语言,描绘场景、提示风险,视障者出行生活更加安全、便捷。

日前,在复旦大学自然语言处理实验室(FudanNLP)师生的努力下,基于多模态大模型“复旦·眸思”(MouSi)为视障者量身打造的“听见世界”APP上线。

我国盲人数量有1700多万,但为什么我们极少在街上看到盲人?这是因为他们难以独自跨出家门。“听见世界”APP将成为视障人士的生活助手与智能管家。

“复旦·眸思”(MouSi)官网链接:http://www.mousi.org/,可登录试用体验,打破视觉界限,助力视障者“看见”世界。

“听见世界”APP针对视障者日常的生活需求,设计了三种模式。街道行走模式,它将细致扫描道路情况,告知红绿灯、十字路口、障碍物……提示潜在风险,陪伴视障者安全通行。

自由问答模式。走进博物馆、艺术馆、公园……它能捕捉四周景象的每个细节,用声音构建一个丰富的生活场景。

寻物模式。它像一名可靠的管家,日常物件的寻觅过程变得轻松无压力。

复旦大学自然语言实验室张奇教授表示,“希望‘眸思’能够帮助视障人士走出家门,让他们可以尝试更多工作,为人生书写更多可能。”

据悉,这一项目落地背后,是一支年轻团队的努力。从本科生到博士生共25名复旦学子,以及桂韬等多位教师、专家的加入,才有了如今的成果。

今年上半年,团队将结合AR升级APP内的定位精度细化至亚米级别。下半年,团队希望将“眸思”升级到基于视频的判断。同时,更多模式也正在开发中,比如阅读模式、解说模式等。

据了解,在政府的支持下,团队还计划与NGO组织、智算中心和硬件厂商等开展合作,力争让视障者免费使用产品和相关服务。预计今年3月,“听见世界”APP将完成第一轮测试,并在我国一、二线城市和地区同步开启试点。

来源:上海杨浦

相关内容

热门资讯

金花大厅房卡如何购买的/微信炸... 微信炸金花是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:160470940许多玩家在游戏中会购买房...
推荐一款!牛牛房卡游戏代理海贝... 推荐一款!牛牛房卡游戏代理海贝之城/微信链接房间卡怎么购买Sa9Ix苹果iPhone 17手机即将进...
两秒就懂!微信玩炸金花怎么买房... 微信游戏中心:炸金花房卡,添加微信【71319951】,进入游戏中心或相关小程序,搜索“微信炸金花房...
一分钟了解!金花房间怎么创建蜜... 您好!微信蜜蜂大厅大厅链接获取房卡可以通过以下几种方式购买: 1.微信渠道:(蜜蜂大厅)大厅介绍:...
房卡必备教程“微信上的斗牛怎么... 人皇大厅是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:44346008许多玩家在游戏中会购买房卡来...
我来教你/金花房卡怎么购买鲨鱼... 今 日消息,鲨鱼众娱房卡添加微信33549083 苹果今日发布了 iOS 16.1 正式版更新,简单...
分享!微信群炸金花房间买房卡/... 微信游戏中心:炸金花房卡,添加微信【33699510】,进入游戏中心或相关小程序,搜索“微信炸金花房...
两秒就懂!微信拼三张房卡哪里有... 微信游戏中心:拼三张房卡,添加微信【56001354】,进入游戏中心或相关小程序,搜索“微信拼三张房...
正版授权“微信斗牛房卡怎么来的... 微信斗牛是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:15984933许多玩家在游戏中会购买房卡来...
IA解析/金花房卡批发价麒麟大... 微信游戏中心:麒麟大厅房卡在哪里买打开微信,添加客服微信【88355042】,进入游戏中心或相关小程...
正规平台有哪些,牛牛房卡游戏代... 荣耀乐娱是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:【3329006910】或QQ:332900...
正规平台有哪些,牛牛充值房卡泡... 今 日消息,泡泡娱乐房卡添加微信33549083 苹果今日发布了 iOS 16.1 正式版更新,简单...
房卡必备教程“金花房卡链接怎么... 大圣大厅是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:160470940许多玩家在游戏中会购买房卡...
两秒就懂!微信的炸金花房卡怎么... 微信游戏中心:炸金花房卡,添加微信【66336574】,进入游戏中心或相关小程序,搜索“微信炸金花房...
分享!炸金花好友房卡在哪里买/... 微信游戏中心:炸金花房卡,添加微信【33699510】,进入游戏中心或相关小程序,搜索“微信炸金花房...
我来教你/微信金花房卡怎么弄新... 新天王/老夫子大厅是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:【3329006910】或QQ:3...
两秒就懂!微信玩牛牛房卡链接,... 微信游戏中心:斗牛房卡,添加微信【71319951】,进入游戏中心或相关小程序,搜索“微信斗牛房卡”...
斗牛房间如何开启房卡/微信牛牛... 斗牛是一款非常受欢迎的棋牌游戏,咨询房/卡添加微信:160470940许多玩家在游戏中会购买房卡来享...
ia攻略/游戏推荐斗牛房卡出售... 您好!微信泡泡娱乐大厅链接获取房卡可以通过以下几种方式购买: 1.微信渠道:(泡泡娱乐)大厅介绍:...
两秒就懂!微信群牛牛房卡怎么买... 微信游戏中心:斗牛房卡,添加微信【56001354】,进入游戏中心或相关小程序,搜索“微信斗牛房卡”...