点击右上角
微信好友
朋友圈
请使用浏览器分享功能进行分享
向善而生的AI助盲，让AI多一点，障碍少一点******
有人说，盲人与世界之间，相差的只是一个黎明。在浪潮信息研发人员的心中，失去视力的盲人不会陷入永夜，科技的进步正在力图给每一个人以光明未来。
AI助盲在人工智能赛道上一直是最热门的话题之一。以前，让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破，更多的失明者正在借助AI提供的感知、理解与交互能力，以另一种方式重新“看见世界”。
新契机：多模态算法或将造福数以亿计失明者
科学实验表明，在人类获取的外界信息中，来自视觉的占比高达70%~80%，因此基于AI构建机器视觉系统，帮助视障患者拥有对外界环境的视觉感知与视觉理解能力，无疑是最直接有效的解决方案。
一个优秀的AI助盲技术，需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展，才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够，以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。
多个模态的交互可以提升AI的感知、理解与交互能力，也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说，多模态算法在AI助盲领域的应用一旦成熟，将能够造福数以亿计的失明者。据世卫组织统计，全球至少22亿人视力受损或失明，而我国是世界上盲人最多的国家，占世界盲人总数的18%-20%，每年新增的盲人数量甚至高达45万。
大挑战：如何看到盲人“眼中”的千人千面
AI助盲看似简单，但多模态算法依然面临重大挑战。
多模态智能算法，营造的是沉浸式人机交互体验。在该领域，盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一，这项研究已经吸引了全球数以万计的视障患者参与，这些患者们上传自己拍摄的图像数据和相匹配的文本问题，形成了最真实的模型训练数据集。
但是在现有技术条件下，盲人视觉问答任务的精度提升面临巨大挑战：一方面是盲人上传的问题类型很复杂，比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。
另一方面，由于盲人的特殊性，很难提取面前物体的有效特征。比如盲人在拍照时，经常会产生虚焦的情况，可能上传的照片是模糊的或者没有拍全，或者没拍到关键信息，这就给AI推理增加了难度。
为推动相关研究，来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”，并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题，然后要求给出相应的答案，解决盲人的求助。
另外，盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说，盲人逛超市，由于商品外观触感相似，很容易犯错，他可能会拿起一瓶醋却询问酱油的成分表，拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效，没法给出有效信息。
最后，针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制，同样也是现阶段的研发难点。
多解法：浪潮信息AI助盲靶向消灭痛点
AI助盲哪怕形式百变，无一例外都是消灭痛点，逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究，只为帮助盲人“看”到愈发精彩的世界。
在VizWiz官网上公布的2万份求助中，盲人最多的提问就是想知道他们面前的是什么东西，很多情况下这些物品没法靠触觉或嗅觉来做出判断，例如 “这本书书名是什么？”为此研发团队在双流多模态锚点对齐模型的基础上，提出了自监督旋转多模态模型，通过自动修正图像角度及字符语义增强，结合光学字符检测识别技术解决“是什么”的问题。
盲人所拍摄图片模糊、有效信息少？研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法，并提出多阶段交叉训练策略，具备更充分的常识能力，低质量图像、残缺的信息，依然能够精准的解答用户的求助。
目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点，在AI助盲领域斩获世界冠军两项、亚军两项。
真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此，研发团队首次提出视觉定位文本去噪推理任务FREC，FREC提供3万图片和超过25万的文本标注，囊括了口误、歧义、主观偏差等多种噪声，还提供噪声纠错、含噪证据等可解释标签。同时，该团队还构建了首个可解释去噪视觉定位模型FCTR，噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议，该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。
在智能交互研究方面上，浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA，同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。
眼球虽然对温度并不敏感，但浪潮信息的研发团队，却在努力让盲人能“看”到科技的温度，也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍，跨越山海。科技的伟大之处不仅仅在于改变世界，更重要的是如何造福人类，让更多的不可能变成可能。当科技成为人的延伸，当AI充满人性光辉，我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意，见证着更加光明宏大的远方。
东西问丨贝尔恩德·迈尔：“欧洲首个中国城”如何与中国结缘？******
中新社柏林2月2日电 题：“欧洲首个中国城”如何与中国结缘？
——专访德国巴伐利亚州迪特福特第一市长贝尔恩德·迈尔
中新社记者 马秀秀
德国巴伐利亚州的迪特福特有“欧洲第一个中国城”之称。那里面积不大，设有中文学校、中国博物馆；那里的人不会中文，却常被人称为“巴伐利亚的中国人”。
迪特福特每年2月都会举办富有中国特色的“狂欢节”。届时，街头巷尾挂起大红灯笼、窗户上贴起“福”字，居民们纷纷装扮成中国人的样子，表演中国式传统节目。
迪特福特如何与万里之遥的中国结缘？当地与中国的交流交往情况如何？为促进中德友好，迪特福特有哪些经验可以分享？迪特福特第一市长贝尔恩德·迈尔(Bernd Mayr)近日接受中新社“东西问”独家专访，就以上话题进行探讨。
现将访谈实录摘要如下：
中新社记者：德国迪特福特被称为“欧洲第一个中国城”。可否介绍下其与中国的渊源？
贝尔恩德·迈尔：这要追溯到中世纪时期。大致在1400年至1450年，那时迪特福特属于艾希施泰特(Eichstätt)教区，所以主教府派税务官到迪特福特收税。当时迪特福特建有城墙，还有两个大城门。当税务官来到迪特福特，居民们紧闭城门，并在城楼上说：“不，我们不交税，因为主教都不关心我们。”在此情况下，税务官不得不离开，并在书中记载此事。在这本流传至今的书中，税务官们表示，迪特福特居民像筑城墙进行防御的中国人一样。这就是当地居民被昵称为“中国人”的由来。
第一次世界大战后，迪特福特逐渐有了“狂欢节”的雏形，那时的表演就有吹奏乐队装扮成中国人的样子；第二次世界大战后，“狂欢节”的庆祝规模不断壮大，迪特福特居民被称作巴伐利亚的“中国人”也为国际熟知。有些孩子从幼儿开始就装扮成“中国人”参与到“狂欢节”活动中。这是当地人保持了几十年的传统：在某个周四，人们都装扮成“中国人”的样子庆祝节日。在“狂欢节”期间，人们将自己视为巴伐利亚的“中国人”。
2019年迪特福特“中国人狂欢节”盛装游行现场。袁金永 供图中新社记者：可否介绍下今年“狂欢节”的特色和亮点？
贝尔恩德·迈尔：今年我们将第一次有一对“皇帝夫妇”参与“狂欢节”表演，以前都只有“皇帝”的角色。届时，“皇帝”和“皇后”会有一个非常庞大的随从队伍。
扮演“皇帝”和“皇后”的是两个迪特福特人，他们两人确实已经结婚。此外，参与表演角色的还有“中国战士”和“中国厨师”等。
今年“狂欢节”将在2月16日周四14时开始，先是进行大游行，然后会有戏台表演，人们可以观看“皇帝”和“皇后”并向他们致敬，之后在所有街巷、酒店等展开狂欢。
2019年迪特福特市“中国人狂欢节”上装扮成皇帝(左二)等中国风情角色的迪特福特市民们。袁金永 供图中新社记者：迪特福特居民到访中国的情况或对中国印象如何？
贝尔恩德·迈尔：事实上，访问中国的迪特福特居民并不多。在2016年的时候，我们访问了南京，当时我们是三十人的代表团。在1999年迪特福特乐队也有三十几人到访过北京。此外，商务人员也会在中国和迪特福特间往返。但总体来看，大多数人还是没有去过中国。
基于我们的“狂欢节”，迪特福特居民与德国其他城市的居民相比，思想更为开放。当然，每年能有中国人到访迪特福特让当地人感到开心。比如，来自中国驻慕尼黑总领馆或慕尼黑孔子学院的代表团来访。对于迪特福特而言，在街道上能看到中国人散步是很正常的事情。
以去年“巴伐利亚中国之夏”活动为例，中国驻慕尼黑总领事童德发一行访问迪特福特，我们和代表团进行了长时间的友好交流，观看了中国舞蹈和音乐表演。虽然迪特福特很小，但我们为德国巴伐利亚与中国的友谊作出了一些贡献，这是众所周知的。我要再次强调，只要我们互相交流，就有机会去理解完全不同的文化。
中新社记者：目前，迪特福特与中国的交流交往情况怎样？
贝尔恩德·迈尔：我们与中国的交流互动会定期进行。诸如，我受邀于1月15日参加了中国驻慕尼黑总领馆的春节招待会。今年的“狂欢节”，总领馆为我们提供了一些帮助，借此我们能够在节庆期间把城市装点成中国风格，这是一个相当美好的故事。
我们一直在尝试让巴伐利亚文化与中国文化这两个完全不同的世界产生连接。我们每年都尝试开展新活动，无论是语言、写作，还是绘画、烹饪课程都得到了极大的支持。当地的文化宫(Kulturhaus)会特别围绕中国主题举行文化日活动，人们可以学汉字、学做中国菜，迪特福特的中餐馆也会参与进来，确实很棒。
2019年，迪特福特“中国人狂欢节”主角“福高帝”将“御厨证书”颁发给在当地经营餐饮业的华人袁金永夫妇。袁金永是德国中餐烹饪联合会会长、迪特福特“七仙镇酒楼”总裁。袁金永 供图迪特福特有两家汽车行业的公司与中国保持着非常密切的业务往来，在中国有大量销售及生产。从这一点来看，我们的伙伴关系非常好，非常积极。
2014年以来，我们与南京市建立了友好城市关系。我计划在2024年带经济界代表团访问南京，对此我非常期待。
中新社记者：为促进中德友好，迪特福特有哪些经验可以分享？
贝尔恩德·迈尔：就我自身而言，我去中国已有十次了，到访过香港、上海、北京、南京等地，并在这些地方受到欢迎。
就像我此前谈到的，互相拜访很重要。我们要试图了解对方国家的文化和结构，不要想当然认为中国作为一个经济强国，可能会做伤害我们的事。与之不同的是，如果没有中国，我们在德国巴伐利亚可能也不会这样富足。
如果其他城市间有类似的伙伴关系，就应该用心经营。要维持这种伙伴关系，就一定要互相拜访，否则这种关系可能会“沉睡”或停止。进行实地交流是最重要的事情，这有助于加深对对方城市的了解。(完)
受访者简介：
贝尔恩德·迈尔(Bernd Mayr)，1968年2月19日出生于迪特福特。自2020年5月起担任迪特福特第一市长。
（文图：赵筱尘 巫邓炎） [责编：天天中] 阅读剩余全文（）  视觉焦点
一分快3地图 |
)