点击右上角
微信好友
朋友圈
请使用浏览器分享功能进行分享
向善而生的AI助盲，让AI多一点，障碍少一点******
有人说，盲人与世界之间，相差的只是一个黎明。在浪潮信息研发人员的心中，失去视力的盲人不会陷入永夜，科技的进步正在力图给每一个人以光明未来。
AI助盲在人工智能赛道上一直是最热门的话题之一。以前，让失明者重见光明依靠的是医学的进步或“奇迹”。而随着以“机器视觉+自然语言理解”为代表的多模态智能技术的爆发式突破，更多的失明者正在借助AI提供的感知、理解与交互能力，以另一种方式重新“看见世界”。
新契机：多模态算法或将造福数以亿计失明者
科学实验表明，在人类获取的外界信息中，来自视觉的占比高达70%~80%，因此基于AI构建机器视觉系统，帮助视障患者拥有对外界环境的视觉感知与视觉理解能力，无疑是最直接有效的解决方案。
一个优秀的AI助盲技术，需要通过智能传感、智能用户意图推理和智能信息呈现的系统化发展，才能构建信息无障碍的交互界面。仅仅依靠“一枝独秀”超越人类水平的单模态人工智能比如计算机视觉技术还远远不够，以“机器视觉+自然语言理解”为代表的多模态算法的突破才是正确的新方向和新契机。
多个模态的交互可以提升AI的感知、理解与交互能力，也为AI理解并帮助残障人士带来了更多可能。浪潮信息研发人员介绍说，多模态算法在AI助盲领域的应用一旦成熟，将能够造福数以亿计的失明者。据世卫组织统计，全球至少22亿人视力受损或失明，而我国是世界上盲人最多的国家，占世界盲人总数的18%-20%，每年新增的盲人数量甚至高达45万。
大挑战：如何看到盲人“眼中”的千人千面
AI助盲看似简单，但多模态算法依然面临重大挑战。
多模态智能算法，营造的是沉浸式人机交互体验。在该领域，盲人视觉问答任务成为学术界研究AI助盲的起点和核心研究方向之一，这项研究已经吸引了全球数以万计的视障患者参与，这些患者们上传自己拍摄的图像数据和相匹配的文本问题，形成了最真实的模型训练数据集。
但是在现有技术条件下，盲人视觉问答任务的精度提升面临巨大挑战：一方面是盲人上传的问题类型很复杂，比如说分辨冰箱里的肉类、咨询药品的服用说明、挑选独特颜色的衬衣、介绍书籍内容等等。
另一方面，由于盲人的特殊性，很难提取面前物体的有效特征。比如盲人在拍照时，经常会产生虚焦的情况，可能上传的照片是模糊的或者没有拍全，或者没拍到关键信息，这就给AI推理增加了难度。
为推动相关研究，来自卡内基梅隆大学等机构的学者们共同构建了一个盲人视觉数据库“VizWiz”，并发起全球多模态视觉问答挑战赛。挑战赛是给定一张盲人拍摄的图片和问题，然后要求给出相应的答案，解决盲人的求助。
另外，盲人的视觉问答还会遭遇到噪声干扰的衍生问题。比如说，盲人逛超市，由于商品外观触感相似，很容易犯错，他可能会拿起一瓶醋却询问酱油的成分表，拿起酸奶却询问牛奶的保质期等等。这种噪声干扰往往会导致现有AI模型失效，没法给出有效信息。
最后，针对不同盲人患者的个性化交互服务以及算法自有的反馈闭环机制，同样也是现阶段的研发难点。
多解法：浪潮信息AI助盲靶向消灭痛点
AI助盲哪怕形式百变，无一例外都是消灭痛点，逐光而行。浪潮信息多模态算法研发团队正在推动多个领域的AI助盲研究，只为帮助盲人“看”到愈发精彩的世界。
在VizWiz官网上公布的2万份求助中，盲人最多的提问就是想知道他们面前的是什么东西，很多情况下这些物品没法靠触觉或嗅觉来做出判断，例如 “这本书书名是什么？”为此研发团队在双流多模态锚点对齐模型的基础上，提出了自监督旋转多模态模型，通过自动修正图像角度及字符语义增强，结合光学字符检测识别技术解决“是什么”的问题。
盲人所拍摄图片模糊、有效信息少？研发团队提出了答案驱动视觉定位与大模型图文匹配结合的算法，并提出多阶段交叉训练策略，具备更充分的常识能力，低质量图像、残缺的信息，依然能够精准的解答用户的求助。
目前浪潮信息研发团队在盲人视觉问答任务VizWiz-VQA上算法精度已领先人类表现9.5个百分点，在AI助盲领域斩获世界冠军两项、亚军两项。
真实场景中的盲人在口述时往往会有口误、歧义、修辞等噪声。为此，研发团队首次提出视觉定位文本去噪推理任务FREC，FREC提供3万图片和超过25万的文本标注，囊括了口误、歧义、主观偏差等多种噪声，还提供噪声纠错、含噪证据等可解释标签。同时，该团队还构建了首个可解释去噪视觉定位模型FCTR，噪声文本描述条件下精度较传统模型提升11个百分点。上述研究成果已发表于ACM Multimedia 2022会议，该会议为国际多媒体领域最顶级会议、也是该领域唯一CCF推荐A类国际会议。
在智能交互研究方面上，浪潮信息研发团队构建了可解释智能体视觉交互问答任务AI-VQA，同时给出首个智能体交互行为理解算法模型ARE。该研究成果已发表于ACM Multimedia 2022会议。该研究项目的底层技术未来可广泛应用于AI医疗诊断、故事续写、剧情推理、危情告警、智能政务等多模态交互推理场景。
眼球虽然对温度并不敏感，但浪潮信息的研发团队，却在努力让盲人能“看”到科技的温度，也希望吸引更多人一起推动人工智能技术在AI助盲、AI反诈、AI诊疗、AI灾情预警等更多场景中的落地。有AI无碍，跨越山海。科技的伟大之处不仅仅在于改变世界，更重要的是如何造福人类，让更多的不可能变成可能。当科技成为人的延伸，当AI充满人性光辉，我们终将在瞬息万变的科技浪潮中感受到更加细腻温柔的善意，见证着更加光明宏大的远方。
中新社70年 | 通讯社还能拍电影？******
编者按：
走过70年光辉历程的中国新闻社，在海外新闻文化传播史上创造了许多辉煌业绩，其中有一章是今天已经很少有人了解的电影电视制作。
上世纪50年代到本世纪初，中国新闻社通过南海影业有限公司在海外发行大量自己生产的影视作品，深受欢迎。有许多影片在香港票房长期占据第一位。
本文作者方树勋是中国新闻社电影事业的创始人之一，他生前为我们留下这篇介绍中新社电影电视业务发展状况的文章，虽简略，但珍贵。
1956年，香港华文电影公司的主持人、导演赵一山，希望到内地拍风光纪录片，在当时中侨委的支持下，他们到广东潮汕及海南岛等地，拍名为《月是故乡明》的风光纪录片。反映新中国成立后潮汕和海南岛的风光名胜、人民生活的新貌。片中穿插潮剧《陈三五娘》的片段和海南岛黎族、苗族自治州少数民族的歌舞。接着还拍了舞台纪录片《火烧临江楼》。
嗣后，赵一山希望中侨委能继续支持他们的电影事业，提出由于他们人力有限，希中侨委能组织力量拍片，影片由华文电影公司发行，以这样的方式支持他们。经中侨委领导研究后，此事最后主要由中新社负责筹划。
“十八条好汉”白手起家
中新社不是电影制片厂，拍电影对中新社来说是新生事物。在电影工作人和器材等方面，是一穷二白。首先是解决干部和器材问题。
1958年，社领导从图片部调出吴岳搞摄影。因为吴岳在泰国时就从事摄影工作，擅长拍摄人像并获得好评。在这基础上，电影摄影较易掌握。另外从社办公室调出谷雷鸣。谷在话剧表演上有一定的基础和才能。还从专稿部文艺组把我调出，主要负责编写剧本。或许是由于我在香港曾参加过电影工作，还同《大公报》《文汇报》一些对电影有兴趣的朋友一起从事过影评工作，和电影界人士有交往，对片场的情况也有些了解的缘故吧！
这几个人调集后，在吴江和谢石基同志的具体领导下，开始做准备工作。吴岳到潮汕拍《诗歌的海洋》，谷雷鸣跟赵一山一起，向他学习导演工作。我到福建采访，准备写反映侨乡新晋江(后改为福建风光)的剧本。
此后陆续调来一些同志，组成电影队。到1962年止，电影队一共18人。因为拍出了不少影片，当时这支队伍被戏称为“十八条好汉”，可能是有点褒义吧！
不计较得失，不追求名利
电影队人数少，都未正式从事过电影拍摄工作，但在短短几年时间里，特别是经历了三年困难时期，能完成几十部电影的拍摄，的确是奋力拼搏的艰苦历程。
大家对电影这门新鲜的工作有兴趣，有敢于大胆探索追求的勇气。全心全意想把这工作搞好。长年在外，不怕艰苦，不计较得失，不追求名利，在所有的影片上基本没有署上真名。
大家在工作上没有经验，都是一张白纸，但白纸上可以画出各具特色的画面。大家都知道自己的不足，能够虚心刻苦地学习。在干中学，在学中干。在实践上逐步总结出经验，从幼稚逐步走向成熟。
风光纪录片+戏曲艺术片
从1958年到1964年，中新社电影队(后改为电影组)共拍摄了二十多部风光纪录片，八部舞台戏曲艺术片。
这个时期拍摄的风光纪录片主要包括：《诗歌的海洋》《故乡行》(福建风光)《美丽的三江》《北京漫游》《万里长城万里长》《芦沟桥畔》《泰山南北》《齐鲁英豪》《西双版纳》《末代皇帝溥仪》《苏州姐妹》《广西风光》《四邑风光》等。
1959年到1963年拍的戏曲艺术片有八部：《西厢记》《丝线姻缘》《胭脂记》《并蒂莲》《云中落绣鞋》《孟丽君》《珍珠塔》《姐妹易嫁》。
上述风光纪录片和戏曲艺术片，向港澳同胞和海外侨胞介绍祖国各地风貌和地方传统戏剧艺术，使关心新中国的观众，增强了向往祖国的信心。
发展壮大写下新篇
十一届三中全会以后，拨乱反正。经历“文革”尘封多年的中新社早期电影重见天日。
1978年，在京一些部门，纷纷向中新社借出戏曲片《云中落绣鞋》《珍珠塔》《姐妹易嫁》和一些风光片到单位放映。后来所有的影片都交电影发行公司保存。《云中落绣鞋》《珍珠塔》《姐妹易嫁》等影片，也经中央电视台向全国放映。
1978年，中新社建制恢复以后，又成立了电影部，还组建了以吴江为董事长的“南海影业公司”。在电影部和“南海影业公司”的努力下，中断了十多年的中新社电影重新起步。不但拍风光片，还拍摄了由凌子导演的《原野》；凌子风导演的《春桃》；韩兰芳导演的《精变》等受观众欢迎的故事片。
▲1981年，中新社电影部(南海影业公司)导演凌子根据曹禺先生名著《原野》改编的电影投入拍摄。图为曹禺先生与影片男主角杨在葆、女主角刘晓庆。中新社发 金兆龙 摄此外，还开创了和外国及台湾影业人士、港商合作拍片的业务。合作的影片有《龙的精神》《北京故事》《八千里路云和月》《南拳王》等十多部。在欧、美等二十多个国家和港澳地区放映，很受欢迎，颇有影响。
▲图为1987年，凌峰(左一)与中新社伙伴王楠(右二)一起拍摄《八千里路云和月》1985年，中新社电影部扩大为电影声像部，业务大为发展，拍出几十部影视片。
中新社采取与外国及港、台人士合作拍片的方式，同时拍出了多部影视片，使他们进一步认识中国的现实，增强对中国的认同和向往。
社会的发展，世界面貌日新月异，相信中新社的影视会写出新的历史篇章。
作者：方树勋(曾任中新社新闻部副主任、报刊室主任)
（文图：赵筱尘 巫邓炎） [责编：天天中] 阅读剩余全文（）  视觉焦点
大众彩票地图 |
)