向善而生的AI助盲,让AI多一点,障碍少一点******
有人说,盲人与世界之间,相差的只是一个黎明。在浪潮信息研发人员的心中,失去视力的盲人不会陷入永夜,科技的进步正在力图给每一个人以光明未来。
AI助盲在人工智能赛道上一直是最热门的话题之一。以前,让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破,更多的失明者正在借助AI提供的感知、理解与交互能力,以另一种方式重新“看见世界”。
新契机:多模态算法或将造福数以亿计失明者
科学实验表明,在人类获取的外界信息中,来自视觉的占比高达70%~80%,因此基于AI构建机器视觉系统,帮助视障患者拥有对外界环境的视觉感知与视觉理解能力,无疑是最直接有效的解决方案。
一个优秀的AI助盲技术,需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展,才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够,以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。
多个模态的交互可以提升AI的感知、理解与交互能力,也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说,多模态算法在AI助盲领域的应用一旦成熟,将能够造福数以亿计的失明者。据世卫组织统计,全球至少22亿人视力受损或失明,而我国是世界上盲人最多的国家,占世界盲人总数的18%-20%,每年新增的盲人数量甚至高达45万。
大挑战:如何看到盲人“眼中”的千人千面
AI助盲看似简单,但多模态算法依然面临重大挑战。
多模态智能算法,营造的是沉浸式人机交互体验。在该领域,盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一,这项研究已经吸引了全球数以万计的视障患者参与,这些患者们上传自己拍摄的图像数据和相匹配的文本问题,形成了最真实的模型训练数据集。
但是在现有技术条件下,盲人视觉问答任务的精度提升面临巨大挑战:一方面是盲人上传的问题类型很复杂,比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。
另一方面,由于盲人的特殊性,很难提取面前物体的有效特征。比如盲人在拍照时,经常会产生虚焦的情况,可能上传的照片是模糊的或者没有拍全,或者没拍到关键信息,这就给AI推理增加了难度。
为推动相关研究,来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”,并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题,然后要求给出相应的答案,解决盲人的求助。
另外,盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说,盲人逛超市,由于商品外观触感相似,很容易犯错,他可能会拿起一瓶醋却询问酱油的成分表,拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效,没法给出有效信息。
最后,针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制,同样也是现阶段的研发难点。
多解法:浪潮信息AI助盲靶向消灭痛点
AI助盲哪怕形式百变,无一例外都是消灭痛点,逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究,只为帮助盲人“看”到愈发精彩的世界。
在VizWiz官网上公布的2万份求助中,盲人最多的提问就是想知道他们面前的是什么东西,很多情况下这些物品没法靠触觉或嗅觉来做出判断,例如 “这本书书名是什么?”为此研发团队在双流多模态锚点对齐模型的基础上,提出了自监督旋转多模态模型,通过自动修正图像角度及字符语义增强,结合光学字符检测识别技术解决“是什么”的问题。
盲人所拍摄图片模糊、有效信息少?研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法,并提出多阶段交叉训练策略,具备更充分的常识能力,低质量图像、残缺的信息,依然能够精准的解答用户的求助。
目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点,在AI助盲领域斩获世界冠军两项、亚军两项。
真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此,研发团队首次提出视觉定位文本去噪推理任务FREC,FREC提供3万图片和超过25万的文本标注,囊括了口误、歧义、主观偏差等多种噪声,还提供噪声纠错、含噪证据等可解释标签。同时,该团队还构建了首个可解释去噪视觉定位模型FCTR,噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议,该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。
在智能交互研究方面上,浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA,同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。
眼球虽然对温度并不敏感,但浪潮信息的研发团队,却在努力让盲人能“看”到科技的温度,也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍,跨越山海。科技的伟大之处不仅仅在于改变世界,更重要的是如何造福人类,让更多的不可能变成可能。当科技成为人的延伸,当AI充满人性光辉,我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意,见证着更加光明宏大的远方。
第六届平遥国际电影展将于1月14日开幕 产业项目率先发布******
中新网太原1月11日电 (记者 胡健)第六届平遥国际电影展组委会11日对外宣布,本届影展将于1月14日至19日在平遥古城开幕。本届电影展将延续原有节目架构,继续围绕展映、产业、教育、学术四个板块举办相关放映和活动。
今日,电影展率先公布产业板块入围及推荐项目,16个剧本项目、12个制作中的电影项目以及18部具有影视改编潜力的文学作品分别入围“平遥创投”“发展中电影计划”“迁徙计划·从文学到影视”三个产业单元。
16个好故事入围“平遥创投”
本届电影展产业板块常设单元“平遥创投”于2022年6月开始公开项目征集,经过报名及两轮初评审,16个剧本最终从772个报名剧本项目中脱颖而出,入围剧本涵盖家庭、女性、喜剧、悬疑、奇幻、儿童等多种类型题材。
入围项目中不乏诸多行业经验丰富的电影人共同合作的优质项目,如导演、艺术家雎安奇的最新项目《花儿,花儿》,导演袁媛与编剧陈麒凌合作的温情故事《亲爱的美英》,以及田壮壮监制、蒲巴编剧的《寻牛》,王红卫监制、彭泽凌编剧的刑侦故事《刺骨》,吕乐监制、刘星与段婷婷编剧的大湾区女性题材作品《马交城的陌生人》,薛晓路监制、薛宸与夏凡编剧的家庭爱情喜剧《菠萝菠萝蜜》。
入围项目还包括曾凭《星溪的三次奇遇》入围过威尼斯电影节威尼斯日单元及第二届平遥国际电影展的竹原青与设计师、策展人朱砂合作的新作《你比夜色迷人》(原名《木与夜孰长》),《追凶者也》编剧张天辉的新作《硬骨头》,以及董蜚编剧的《最后的鄂温克人》,孔言编剧、讲述90年代石油勘探家属院故事的《晚期浪漫》,茹颖翘、汪彧婧、李崧鸣共同编剧的奇幻公路片《谢里的夏天》,谷泉编剧的女性悬疑故事《橱窗》,罗艳编剧的犯罪悬疑题材作品《九级浪》,周舟编剧的家庭奇幻故事《魔法常在》(原名《哈利与魔法师哈里》),冯轶、刘吉科编剧的奇幻爱情故事《时间的褶皱》和张思庆编剧的家庭题材作品《再兴》等各具风格的剧本作品。
作为“平遥创投荣誉”评审,学者、电影监制、编剧杜庆春,电影出品人、监制、策划陈洁,导演、编剧唐晓白将从16个入围剧本项目中评选出多项荣誉,荣誉得主均可获得现金奖励。
9位推荐人向影视行业推荐18部文学作品
产业板块中,尤其值得关注的是新设单元“迁徙计划·从文学到影视”。本单元由第六届平遥国际电影展与中国作家协会“新时代文学攀登计划”合作设立,由王安忆、刘亮程、田耳、林棹、叶弥、笛安、罗日新等作家创作的18部文学作品最终获得推荐。
推介作品囊括了近年来众多不同类型、不同风格的文学精品创作,体裁以中、长篇小说为主,题材涵盖悬疑、爱情、历史等多个类型,均具有电影或剧集改编潜力。
推介作品由9位推荐委员会成员分别从作品的文学性转化为电影性、文学丰富影视创作、文学拓展影视创作、影视改编可行性等维度出发,从人民文学出版社、中信出版社、译林出版社等中国作家协会“新时代文学攀登计划联席会议”旗下重点文艺类出版单位推荐的近百部文学作品中评估精选得出。
推荐委员会成员包括文学评论家、散文家李敬泽,诗人、学者何向阳,作家、编剧李修文,诗人、批评家杨庆祥,小说家双雪涛,及电影导演、编剧、剪辑、作家程耳,制片人蒋浩,电影监制、编剧王红卫,电影导演、编剧、作家万玛才旦。本单元由诗人、评论家欧阳江河担任策划顾问。
推介作品代表将受邀出席平遥国际电影展,面向影视版权采购机构、版权项目开发机构、制片公司、制片人、编剧、导演、销售商、发行机构等产业人士进行作品推介,并参加电影展相关官方活动。此外,平遥国际电影展将为入围作品提供专门的洽谈空间,为作品代表和影视产业人士提供一对一的洽谈交流机会。
12个电影项目入围“发展中电影计划”
第六届平遥国际电影展产业单元“发展中电影计划”继续精选12个各具风格、尚处于发展之中的优秀电影项目,面向产业界人士、电影节展策划人进行30至60分钟的放映。
制片人、导演余伟国,电影发行人刘歌,策展人、选片人王庆锵将担任发展中电影荣誉评审,将出任本届电影展“发展中电影计划”单元的荣誉评审,从12个发展中电影项目中优选出多项荣誉,荣誉得主均可获得现金奖励。
入围项目包括由关锦鹏监制,蔡杰执导的讲述父女亲情、人生宿命的影片《人海同游》;万玛才旦监制,曾建贵导演的聚焦文化融合下诗意苦难的长片《河州》;由上海国际电影节金爵奖最佳影片《东北虎》导演耿军监制,卓楷罗执导的喜剧《辽河的士》;由纪录片《铁路沿线》导演杜海滨监制,赵昶通执导的影片《一岁一枯荣》;根据班宇同名小说改编、由梁鸣执导、李雪琴主演的影片《逍遥游》。
入围项目中还包括秦潇越执导的聚焦社会变迁中两代人巨大差异的家庭题材影片《巢》;覃牧秋、詹涵淇联合执导的有关两个年轻人“波西米亚式”生活的青春影片《东四十条》;曾入围第61届洛迦诺国际电影节国际竞赛单元的导演潘剑林的新片《父亲的味道》;刘阳执导的青春爱情题材电影《候场》;孙铭执导的讲述主人公通过重复犯罪脱离迷茫、寻找生路的影片《开春》;魏东宸执导的聚焦职业女性爱情的喜剧电影《蚂蚁没问题》;以及康家祥执导的有关张掖山丹军马场和军马命运的剧情片《云淡风轻》。
平遥国际电影展由平遥电影展有限公司与山西传媒学院山西电影学院联合主办,电影展拥有电影展映、产业、学术、教育四大板块,其中产业板块致力于为电影项目和新锐创作人提供产业沟通、资源互动和融资平台,为优秀作品提供孵化机会。目前,《人生大事》《温柔壳》《恋曲1980》《不游海水的鲸》《再团圆》《月光武士》等多个曾于平遥国际电影展产业板块崭露头角的电影项目已于全国发行或已完成后期制作。(完)