苏州市场研究公司致力于于于成为视障者的一对“眸”

发布日期：2024-03-14 13:48    点击次数：131

　　上海3月2日电 (记者 陈静)只需一枚录像头和一对耳机，画面唐突被升沉成讲话，面目场景、请示风险，让视障者出行更安全、生存更苟简……记者2日获悉，在复旦大学当然讲话处理实验室(FudanNLP)师生的勤劳下苏州市场研究公司，基于多模态大模子“复旦·眸想”(MouSi)为视障者量身打造的“听见寰球”APP上线，将成为视障东说念主士的生存助手与智能管家。

　　2023年上半年，复旦大学当然讲话处理实验室发布了设立MOSS对话式大型讲话模子，被称为中国版的GPT，仅用半年本事多模态模子“眸想”问世。据先容，“眸想”和基于文本的MOSS不同，它唐突相识并识别图片推行，致力于于于成为视障者的一对“眸”。

　　基于“眸想”，“听见寰球”APP为视障者平方生存需求量身打造街说念行走步地、解放问答步地和寻物步地。在街说念行走步地中，“眸想”如一位赤诚的向导。红绿灯、十字街头、破裂物……它能密致扫描说念路情况，请示潜在风险，陪同视障者安全通行“看不见”的漫漫长路。

　　在解放问答步地中，成都“眸想”则像一位贴心的一又友，走进博物馆、艺术馆、公园……捕捉四周景象的每个细节，用声息构建丰富的生存场景，传递每一处平方之好意思。在寻物步地中，“眸想”将成为别称可靠的管家，被移动过的拐杖、最爱口味的牛奶……它不错让视障东说念主士找寻平方物件变得松懈。

　　复旦大学当然讲话处理实验室张奇教悔说：“东说念主工智能发展日眉月异，科技应该要变调更多东说念主的生存，但愿‘眸想’唐突匡助视障东说念主士走披缁门，让他们不错尝试更多责任，苏州市场研究公司为东说念主生书写更多可能。”据先容，该项方针主导者皆是“初出茅屋”的学生们，在组内头脑风暴会上，年青学子总能提倡始创性想法，唐突找到别有肺肠的处理认识。

　　自客岁9月以来，复旦大学当然讲话处理实验室围绕GPT4-v复现多模态大模子，对中枢要害点开展参议，但愿提高单项任务的准确率和强化大模子的学习。为了更好地感受视障者的难处，团队成员模拟信得过情境，蒙眼探索视障者“阴霾”寰球。他们邀请视障东说念主士加入，进一步摸清信得过而具体的需求。

　　在基于几亿张图片考研出“眸想”大模子基础上，针对视障者提倡的各类需求，团队又用上万张图片进行稀奇样本考研，使“眸想”具备唐突适配更多场景的才略。据涌现，本年上半年，团队将采集AR升级APP内的定位精度细化至亚米级别。下半年，团队但愿将“眸想”升级为基于视频的判断。现在，更多步地正在设立中，比如，阅读步地、诠释步地等。

　　据了解，团队计算与NGO组织、智算中心和硬件厂商等开展相助，致力于于于让视障者免费使用产物和有关就业。预测本年3月“听见寰球”APP将完成第一轮测试，在中国一、二线城市和地区同步开启试点苏州市场研究公司，字据算力部署情况进行施行。(完)

• 公司
• 市场研究
• 苏州
• 致力于
• 于于