特殊议题

特殊议题 5 :残障研究生视角下的无障碍交互与病理语音智能处理
发布时间:2026/7/4 1:10:40

本特殊议题面向无障碍人机交互、病理语音处理、智能辅助表达、多模态大模型与信息无障碍等前沿方向,邀请具有残障经历的研究生报告人分享其科研工作、技术探索与实践思考。议题聚焦残障群体在学习、交流、科研、就业和日常生活中面临的真实需求,围绕构音障碍语音识别、智能语音辅助沟通、无障碍交互设计、多模态内容生成、学术信息可及化等问题展开交流,探索人工智能技术在沟通无障碍、信息无障碍和教育无障碍中的应用路径。

与一般科技助残议题不同,本议题更加突出残障研究生在无障碍智能技术研究中的主体性。残障研究生既是无障碍技术的重要使用者,也是相关问题的直接观察者、体验者和研究者。他们基于自身经验和专业训练开展研究,能够为无障碍智能技术提供更加真实的问题定义、更加细致的用户理解和更加明确的应用导向,有助于推动人工智能技术从"为残障群体设计"进一步走向"与残障群体共同设计"。

本议题将促进人工智能、语音处理、人机交互、特殊教育、康复辅助和信息无障碍等领域的交叉融合,推动研究者围绕真实场景中的沟通障碍、交互障碍和信息获取障碍开展技术创新。通过残障研究生的学术报告与交流,本议题不仅有助于展示残障青年群体自强不息、以科研服务社会的精神风貌,也有助于推动助残科技成果更加贴近用户需求、更加适配现实场景、更加具有可及性与普惠性。

本议题的设置将为残障研究生提供高水平学术展示平台,促进学界、产业界、教育机构、康复机构与残障群体之间的深入对话,推动构音障碍语音识别、智能辅助沟通、多模态交互和无障碍内容生成等技术从实验室走向真实应用场景,为建设"有爱无碍"的智能社会提供技术支撑和人才支撑。

王甦菁
照片
王甦菁
中国科学院心理研究所
吴锡欣
照片
吴锡欣
香港中文大学
范明明
照片
范明明
香港科技大学(广州)
燕楠
照片
燕楠
中国科学院深圳先进技术研究院
于仕琪
照片
于仕琪
南方科技大学
李艳灵
照片
李艳灵
信阳师范大学
陈莹
照片
陈莹
南京理工大学
赵剑
照片
赵剑
长春大学
姚登峰
照片
姚登峰
北京联合大学
胡雯
照片
胡雯
福建师范大学
黄树成
照片
黄树成
江苏科技大学
面向脑瘫患者的文本输入辅助技术研究
毕云飞 · 信阳师范大学 · 硕士生 · byf19990715@163.com

本次报告聚焦于脑瘫群体在人机协同进程中面临的低效文本输入困境与数字化沟通壁垒,深入剖析其文本输入过程中的手-眼运动协调策略,并展示了团队基于此研究自主研发的AR智能交互键盘,旨在通过视觉重构实现沉浸式的高效输入。同时前瞻性地探讨面向脑瘫患者的虚拟键盘交互策略与无障碍文本输入设计范式研究。

利用多模态LLM模型能否有助于提升构音障碍语音识别?
刘柏 · 长春大学计算机科学技术学院 · 硕士生 · 1169656535@qq.com

构音障碍患者的语音识别准确率远低于正常人群,探索多模态LLM是否能改善这一问题——通过融合声学信号与大语言模型的上下文理解能力,充分利用跨模态互补信息来弥补构音语音的声学缺陷。

以结构化合约为驱动的学术论文演讲视频自动生成
吴竞琦 · 南方科技大学、中关村学院 · 博士生 · jingqiwu2020@163.com

将学术论文自动转换为演讲视频,需要同步生成幻灯片、语音、字幕、光标动画与演讲者头像等多个模态,并保证各模态之间的语义一致性。现有方法将各模态作为独立生成任务,以论文原文为各自的输入源分别推理,导致跨模态语义漂移,且任何局部修改都需要重跑完整流程。

本报告介绍PaperContract,一个以结构化合约为核心的学术视频生成框架。其核心思想是:在论文与各下游模态之间引入一个持久化的结构化合约——对每张幻灯片的叙述文本、可见内容与视觉素材的统一规范——所有模块以该合约为唯一信息源,从根本上消除重复语义推理。在生成阶段,幻灯片通过QA引导的验证-精化循环生成;语音每张幻灯片仅合成一次,并通过强制对齐获得词级时间戳,构建共享时序合约,同步驱动字幕、光标定位与Talking Head渲染,跨模态同步由设计保证而非事后对齐。在交互修改阶段,用户以自然语言发出修改指令,系统仅更新合约中受影响的单元并选择性失效对应缓存,未受影响的幻灯片、音频与动画直接复用,显著降低修改成本。

利用智能语音技术,帮助构音障碍者与人沟通
赵欣然 · 江苏科技大学计算机学院 · 硕士生 · 3212835198@qq.com

构音障碍是一种由神经系统受损引起的运动性言语障碍。由于其与标准语音的声学特征差异以及数据规模的稀缺,导致直接使用通用语音识别模型时性能往往会下降。结合现有研究,我们主要从模型结构适配性、对其声学特征的分析。课程学习等训练策略以及其他方向开展研究,来提升构音障碍语音识别效果。

面向听障群体的信息无障碍结构化字幕生成评测
施杰 · 北京联合大学机器人学院 · 硕士生 · 1807872045@qq.com

随着我国信息无障碍建设的深入,字幕已成为听障群体及老年人群获取音视频信息的基础设施。然而,在具有高即时性与高信息密度的真实交流场景中,传统语音识别技术往往面临社交时差长、核心信息易丢失、排版缺乏可读性等痛点。本文介绍了2026年中国计算语言学大会(CCL26-Eval)"面向听障群体的信息无障碍结构化字幕生成评测"任务。该评测聚焦于从音视频输入到高可用结构化字幕生成的完整技术链路。为贴近真实应用,任务设立了探索性能上限的"PC端赛道"与受限资源下的"手机端赛道",并细分为基础字幕生成与结构化可读字幕生成两个子任务。针对真实语料库中口语表达的高度复杂性及核心信息标注噪音,本评测构建了"自动指标兜底加人工核对裁决"的混合评估体系。本次评测旨在推动AI字幕技术统筹考量转写准确率、响应速度与信息结构化呈现,为信息无障碍领域的模型研发与端侧落地提供统一的基准与高质量多场景数据集。

批评隐喻视角下DeepSeek主题英汉新闻话语的中国科技形象建构对比研究
黄清河 · 福建师范大学 · 硕士生 · 2945370366@qq.com

国际科技竞争日益聚焦于人工智能领域,中国自主研发大模型DeepSeek引发国际媒体关注,为考察中国科技形象在既有国际话语格局下的建构与重构提供了关键案例。本研究以批评隐喻分析为理论框架,自建DeepSeek主题英汉新闻语料库(2025年1月至2026年5月,含《人民日报》与《纽约时报》各约150篇报道),运用MIPVU隐喻识别程序、语料库定量统计与批评话语定性分析,对比中美媒体如何通过概念隐喻建构中国科技形象。不同隐喻的选择通过映射差异与框架效应影响受众对中国科技发展的认知与判断,进而参与国家科技形象的塑造。研究旨在回答三个核心问题:双方使用了哪些核心概念隐喻?这些隐喻如何框架中国科技发展并揭示何种价值取向?隐喻选择的系统性差异反映了怎样的科技话语权与地缘政治博弈?预期将明晰两国隐喻分布图谱,揭示隐喻差异背后的认知模式与价值分歧,并为构建具有文化自主性与国际说服力的中国科技叙事提供具体话语策略。本研究既是对批评隐喻分析在人工智能话语领域应用的实证深化,亦为理解优化中国科技形象的全球传播机制提供了学理支撑与实践启示。

面向无障碍交互的构音障碍语音智能识别方法研究
康新晨 · 南京理工大学计算机科学与工程 · 博士生 · kxc4088@163.com

构音障碍语音识别是无障碍人机交互和智能康复辅助中的重要问题。由于发音不清、语音清晰度下降和个体差异显著,现有自动语音识别模型在病理语音场景下仍存在较高错误率。针对固定词汇构音障碍语音识别任务,本研究以自监督语音模型为基础,构建CTC与词分类双头学习框架,同时引入清晰度感知的声学——编辑距离词表重评分方法,以增强模型对近似词和替换错误的纠正能力。实验基于UASpeech构音障碍语音数据集开展,并从整体识别率、说话人层面和不同清晰度等级等角度进行评估。结果表明,结合词级监督和清晰度感知解码策略有助于提升病理语音识别的鲁棒性。该研究可为残障人群无障碍交流、智能语音交互和康复评估提供技术支撑。

王甦菁(中国科学院心理研究所):wangsujing@psych.ac.cn

吴锡欣(香港中文大学):wuxx@se.cuhk.edu.hk

范明明(香港科技大学(广州)):mingmingfan@ust.hk

燕楠(中国科学院深圳先进技术研究院):nan.yan@siat.ac.cn

于仕琪(南方科技大学):yusq@sustech.edu.cn

李艳灵(信阳师范大学):lyl75@163.com

陈莹(南京理工大学):ychen@njust.edu.cn

赵剑(长春大学):zhaojian@ccu.edu.cn

胡雯(福建师范大学):wendyhu6@163.com

姚登峰(北京联合大学):tjtdengfeng@buu.edu.cn

黄树成(江苏科技大学):schuang@just.edu.cn