向善而生的AI助盲，让AI多一点，障碍少一点******

　　有人说，盲人与世界之间，相差的只是一个黎明。在浪潮信息研发人员的心中，失去视力的盲人不会陷入永夜，科技的进步正在力图给每一个人以光明未来。

　　AI助盲在人工智能赛道上一直是最热门的话题之一。以前，让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破，更多的失明者正在借助AI提供的感知、理解与交互能力，以另一种方式重新“看见世界”。

　　新契机：多模态算法或将造福数以亿计失明者

　　科学实验表明，在人类获取的外界信息中，来自视觉的占比高达70%~80%，因此基于AI构建机器视觉系统，帮助视障患者拥有对外界环境的视觉感知与视觉理解能力，无疑是最直接有效的解决方案。

　　一个优秀的AI助盲技术，需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展，才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够，以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。

　　多个模态的交互可以提升AI的感知、理解与交互能力，也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说，多模态算法在AI助盲领域的应用一旦成熟，将能够造福数以亿计的失明者。据世卫组织统计，全球至少22亿人视力受损或失明，而我国是世界上盲人最多的国家，占世界盲人总数的18%-20%，每年新增的盲人数量甚至高达45万。

　　大挑战：如何看到盲人“眼中”的千人千面

　　AI助盲看似简单，但多模态算法依然面临重大挑战。

　　多模态智能算法，营造的是沉浸式人机交互体验。在该领域，盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一，这项研究已经吸引了全球数以万计的视障患者参与，这些患者们上传自己拍摄的图像数据和相匹配的文本问题，形成了最真实的模型训练数据集。

　　但是在现有技术条件下，盲人视觉问答任务的精度提升面临巨大挑战：一方面是盲人上传的问题类型很复杂，比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。

　　另一方面，由于盲人的特殊性，很难提取面前物体的有效特征。比如盲人在拍照时，经常会产生虚焦的情况，可能上传的照片是模糊的或者没有拍全，或者没拍到关键信息，这就给AI推理增加了难度。

　　为推动相关研究，来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”，并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题，然后要求给出相应的答案，解决盲人的求助。

　　另外，盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说，盲人逛超市，由于商品外观触感相似，很容易犯错，他可能会拿起一瓶醋却询问酱油的成分表，拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效，没法给出有效信息。

　　最后，针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制，同样也是现阶段的研发难点。

　　多解法：浪潮信息AI助盲靶向消灭痛点

　　AI助盲哪怕形式百变，无一例外都是消灭痛点，逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究，只为帮助盲人“看”到愈发精彩的世界。

　　在VizWiz官网上公布的2万份求助中，盲人最多的提问就是想知道他们面前的是什么东西，很多情况下这些物品没法靠触觉或嗅觉来做出判断，例如 “这本书书名是什么？”为此研发团队在双流多模态锚点对齐模型的基础上，提出了自监督旋转多模态模型，通过自动修正图像角度及字符语义增强，结合光学字符检测识别技术解决“是什么”的问题。

　　盲人所拍摄图片模糊、有效信息少？研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法，并提出多阶段交叉训练策略，具备更充分的常识能力，低质量图像、残缺的信息，依然能够精准的解答用户的求助。

　　目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点，在AI助盲领域斩获世界冠军两项、亚军两项。

　　真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此，研发团队首次提出视觉定位文本去噪推理任务FREC，FREC提供3万图片和超过25万的文本标注，囊括了口误、歧义、主观偏差等多种噪声，还提供噪声纠错、含噪证据等可解释标签。同时，该团队还构建了首个可解释去噪视觉定位模型FCTR，噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议，该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。

　　在智能交互研究方面上，浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA，同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。

　　眼球虽然对温度并不敏感，但浪潮信息的研发团队，却在努力让盲人能“看”到科技的温度，也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍，跨越山海。科技的伟大之处不仅仅在于改变世界，更重要的是如何造福人类，让更多的不可能变成可能。当科技成为人的延伸，当AI充满人性光辉，我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意，见证着更加光明宏大的远方。

青岛大学：用好非遗传统文化宝藏【非遗进高校 探索美育新模式】******

　　“老师，我们又拿金奖啦！‘互联网＋’大赛的！”

　　“老师，我被博物馆录取啦！千人取一个！”……

　　青岛大学美术学院侍锦教授经常为学生们一个个喜讯开心不已。

　　“这要感谢非遗传统文化宝库的赋能！”侍锦对记者说。

　　经过多年非遗进高校的实践，侍锦非遗团队构建了五位一体的非遗美育实践教学模式——博物馆实物教学＋调研场景教学＋互动体验教学＋创新实践教学＋项目大赛教学，美育育人的同时，在非遗推广、成果转化、服务社会等方面作出了积极探索。

　　教室就是博物馆

　　侍锦是一个资深的民间工艺品收藏家。从一个古朴的鱼盘开始，至今他已有了近万件藏品，这是他实物教学的宝库。

　　“这只墨盒的精巧，这匹鲁锦的纹样，只有摸到实物，才能切实感受它们的美。”侍锦对记者说，尝到了非遗实物教学的甜头，他在这条路上坚持了30多年，带领团队创出了非遗“沉浸式实物”教学模式。

　　2019年年底，青岛大学在浮山校区图书馆寸土寸金的四楼辟出1000多平方米，建立了教学型的民间工艺美学馆，开国内高校之先河。侍锦和团队花费30多年心血淘来的万件民间工艺品安放在此，向全校开放。

　　大到千工床、织布机，小到泥老虎、银首饰，气韵饱满的鱼盘、精妙绝伦的柜奁、图腾绚丽的织物，或厚重或轻灵，或热烈或朴拙，美学馆万件藏品，让穿越时空的美扑面而来……

　　每个学子都可以推门而入，领略先人的审美智慧、匠人精神和对美好生活的追求，触摸中华传统文化的根系脉络。

　　这里不仅是一个博物馆，更是学校综合素质教育和美育教育基地。

　　这里是青岛大学的《民间美术》《传统纹样》等专业课的教室：立体“沉浸式”的教学空间，润物无声，触手可及的非遗之美，让中国特色融入学生的血脉；

　　这里是全校通识课《中国传统手工艺鉴赏与实践》的课堂：扎染、活字印刷、布老虎、甲马印画……同学们在实践中深刻感受非遗魅力，提高审美认知；

　　这里是面向校内外的非遗传播大讲堂：剪纸、花鸟字、刺绣、印染、衍纸、焗艺、木版年画和拓印等非遗传承人被请进来做老师，让学生直面民间高手；

　　这里是非遗美育教学的研究中心：田野考察拍摄的图片、搜集的资料、收集的民艺实物、研究数据等构建了系统的课程体系。近年来，获批非遗相关课题立项20余项。

　　非遗滋养，专业课受益

　　近几年，团队所任教专业连续4年有学生考取清华美院研究生。“录取的学生，不仅在于绘画功底和表现技巧强，更因为他们有深厚的文化功底。”

　　非遗的底色，让学生就业优势凸显；陈宇被上海博物馆录取、张玉被滕州市文化馆录取、孙建鹏被青岛市市南文化馆录取……

　　在非遗团队老师的指导下，近几年学生们捧回200多项各类大奖。

　　团队成员彭卫丽副教授的研究生荆兰淇，作为《匠染织梦——齐鲁纺织非遗助力乡村振兴的践行者》项目负责人，刚刚抱回第八届“互联网+”大学生创新创业大赛省赛金奖、国赛铜奖。

　　“老师的悉心指导和非遗元素的优势让我们底气十足。非遗让我受益良多，下一步我会围绕非遗展开自己的毕业研究。”荆兰淇对记者说。

　　高校，担起非遗薪火相传的使命

　　“这些年，我带了50多个研究生，有30多个在学校工作，他们继续在学校传播非遗文化，成为非遗传播的‘点灯人’。”侍锦满面春风。

　　团队的顶梁柱彭卫丽，是侍锦2002届的研究生，在教学、科研成绩斐然的同时，指导学生拿回100多个大赛奖项。

　　“读研究生期间，我接触到非遗，被其无穷的魅力吸引，确立了自己教学与科研的方向。”彭卫丽对记者说，“在非遗文化的滋养下，学生们的品质、技能、创新意识都得到提升，我由衷地高兴。我要把优秀传统文化的接力棒不断地往下传。”

　　很多同学成为非遗发烧友，加入非遗推广的队伍；毕业的学生经常来电话通报自己发现的民间工艺宝贝……

　　依托博物馆，青岛大学担起了非遗美育传播的社会责任。近年来，举办非遗展览20场次，非遗讲座45场次，公益实践体验100余场次……

　　2020年团队受青岛市文旅局委托，全面普查市级以上207项非遗项目，开展“青岛市非物质文化遗产名录手绘图典”项目的普查、调研、书籍设计等工作。

　　2022年，青岛大学民间工艺美学馆获批山东省非遗研究基地，侍锦获“2020山东非遗年度人物”殊荣。

　　非遗，高校美育育人的宝藏

　　“每一件值得留存的非遗工艺品里，都蕴含着制作人的生活态度、工匠精神。所以，非遗是美育也是德育。”侍锦深有感触。

　　借助非遗蕴含的深厚文化内涵，引导学生民族自信、家国精神、正确的价值观，这是非遗团队“崇德尚美”的育人理念。

　　第一节课，同学们要介绍自己家乡的非遗元素；放假时，调研家乡非遗文化。随着课程的深入，越了解越热爱，同学们的文化自信、家国情怀慢慢地培养起来。

　　在西柏坡、沂蒙山等地方调研，让学生接受红色文化熏陶；田野考察采访时，民间工艺传承者的自身经历会给学生上一堂最生动的思政课……

　　侍锦讲授的《民间美术》早已是省级一流课程，课程蕴含的非遗思政内容，提升了课程的含金量。

　　美术学院2017级吴茂林同学的故事，让人看到了非遗美育育人的能量。

　　一入大学，吴茂林便跟随侍锦参与创办云贵印染工作室。连续保持全系双第一成绩的同时，他在百余项大赛中取得优异成绩，是一个勤奋的非遗推广志愿者。

　　身为“全国百名大学生就业创业人物”，他搭建了“非遗+”创新创业团队，公司开得红红火火。毕业后，他却选择去新疆做一名武警。

　　电话中他对记者说：“在走访调研中，沂蒙精神深深震撼了我，更加坚定了我的参军梦。未来，我将用在非遗团队领悟到的努力和严谨去实现更多的价值。”

　　让非遗活起来，服务社会

　　美学馆设立文创工作室，致力于教育研学、文创设计、助力三农，形成“教、研、产、创”一体化实践平台，为非遗的传承和创新发展、成果转化开创了新路径。

　　“你看，就是在馆藏的这款木质食盒的基础上，学生受到启发，为企业开发了一款点心包装盒，获得了大奖。”团队成员田鑫老师介绍说，每年学生的非遗元素毕业设计作品，很多都会受到相关厂家的青睐，直接买走。

　　2021年，美学馆参与组织协办青岛市首届非遗＋文创设计大赛，并推出“青岛非遗礼”“青岛有礼”“英气楼糕点”“植秀堂驻颜面膜”等非遗相关文创产品，推动了地方非遗文化发展。

　　近几年来，非遗团队联合企业、政府等诸多社会力量，组织策划了非遗进乡村、进文旅小镇，打造非遗工作坊、乡村记忆馆、美丽乡村示范基地等十几处，在非遗促进就业增收、助力乡村振兴方面持续发挥作用。

　　青岛大学美院校友、企业家孙亮，积极参与非遗助力乡村振兴，他请来侍锦团队做指导，建设运营“源乡·和溪廿四节气文创村”，为村民和返乡大学生提供创新创业平台。

　　2022年，侍锦带领彭卫丽等团队成员所做的实践成果《教育引领、文化赋能——“非遗+”助力乡村振兴的新范式》，获得两年一届的第五届山东省文化创新奖。

　　山东省政府颁发的这块铜牌挂在美学馆入口，熠熠生辉。

　　中青报·中青网记者 邢婷 来源：中国青年报