张伟男 哈尔滨工业大学 计算机科学与技术学院 社会计算与信息检索研究中心 人机对话关键技术及挑战 本科生 对话理解与对话生成 对话主导 朱才海 冯梓娴 推荐主导 胡景雯 一致性 张家乐 张开颜 连贯性 个性化 多样性 朱庆福 马龙轩 宋皓宇 刘元兴 李凌志 多轮建模 朱泽圻 风格化 Conversational Intelligence (CI) 张伟男副教授 张伟男副教授 对话式推荐 个人简介 HIT-SCIR 刘挺教授 博士生 硕士生 智能人机对话系统“笨笨” • HIT-SCIR-CI 组主导研发 • 平台 • 微信公众号： 2016 年 6 月 6 日上线 • 实体机器人 • 主要功能 • 知识问答”示例 6 “ 任务执行”示例 7 “ 推荐”示例 8 笨笨访问统计 9 智能人机对话系统“笨笨” 10 • 主办方 • 中国中文信息学会 (CIPS) • 承办方 • 哈尔滨工业大学社会计算与信息检索研究中心 • 科大讯飞 ( 数据支持 ) • 赞助方 • 华为公司 中文人机对话技术评测 (SMP-ECDT III) 11 SMP ECDT III 委员 会

进行学习资源推荐， 针对性提供学生学习路径与策略。②课堂实验指导方面，引入智能体作为实验指 导老师，针对性指导学生完善实验方案。③问题答疑方面，引入智能体作为课堂 虚拟助教，通过角色扮演进行人机对话，将知识讲授转化为趣味互动。 案例 2-6 自适应学习系统助力牡丹江师范学院高效开展个性化教学 ② 为满足学生个性化学习需求，牡丹江师范学院与教育科技企业合作建设《卓 越师范生教师教育》智 价标准和观测指标。其二，融合多元化测评方式。以往问卷调查等测评手段获取 的数据类型较为单一主观，难以全面呈现教师素养的真实状况 ②。因此需结合智 能素养的具体维度和特征，融合智能技术手段设计包括人机对话诊断、适应性测 评、伴随式测评在内的多元化测评方式 ③。其三，搭建基于评价结果的精准化素 养提升路径。通过整合教师基础信息、教学、教研、培训等多源数据，搭建全面 立体的素养数据池，对数据进 据分析与建模，对 结构化数据进行编码映射与量化建模，完成从教师数字素养观测指标数值到各评 价指标维度计算值、综合得分、等级评定以及行为模式的刻画 ①。结合多模态大 模型搭建教研智能体，基于人机对话的方式深度解读评价结果、分析原因、提供 改进方案等，帮助教师了解自身数字素养水平现状，制定个性化精准提升策略。 案例 6-1 华中师范大学多空间数据融合的教师数字素养评价 ② 为提高评价的

驱动的视觉识别系统利用深度学习算法，能够精准地解析周围环境信息，包括但不 限于交通标志识别、障碍物检测及行人跟踪等。同时，借助自然语言处理与语音识别技术的进步，车载交互界 面得以实现更加智能化的人机对话，从而提升用户体验并确保驾驶安全。 通过集成先进的机器学习模型与海量数据集进行训练，智能网联汽车如今已具备了高度自适应的能力，可 以在多变的道路条件下执行复杂的决策任务。例如，在智能辅助驾驶系统中，车辆可基于实时收集的数据流， 这些技术不仅改变了我们对汽车内部空间的传统认知，还为未来出行方式开辟了新的可能性。具体来说，其主 要应用体现在以下几个方面 ： 自然语言处理与交互 ：借助先进的自然语言处理技术，智能座舱能够实现更加流畅、自然的人机对话。乘 客可以通过语音指令轻松控制车辆的各项功能，如调整空调温度、播放音乐或查询路线等。更重要的是，通过 集成大语言模型，系统可以更好地理解复杂的语义结构，甚至进行多轮对话，极大地提升了交流的便捷性和效率。

缺陷率报表 CPPM 统计报表 生产计划报表 任务单产量报表 报废品统计报表 一套系统，多种语言，适应企 业多国用户同时操作同一业务。 2.29 智能多语言– 适应跨国业务范 围 通过人机对话聊天，即可驱动系统自动学习 分析企业业务数据，找出企业经营难点。 2.30 人工智能 AI– 助力企业数字 化 人 机 料 设备稼动管理

大批量并发通话管理，监 控单通对话状态及上下文 管理，辅助提升意图识 别 准确率 实时意图分析 • 根据上下文分析对话，实 时返回客户的意图 人与人的对话分析 • 突破人机对话模式，创新 支持智能分析人与人之间 的对话，支持场景定制及 数据监控 实时语音识别 • 在坐席人员与客户的沟通 过程中，语音实时传输， 同步返回识别结果

消费终端 AI 人工智能语音识 别 用户人像认证 结合营盘人脸识别 A 厂区 - 居 民 B 学校 - 老 师 C 景区 - 访 客 新型智慧厂区 “ 人机对话” 交互产品 身份角色变化 营盘认证身份 近场身份识别 智能 AI 分析 精准信息推送 便捷生活 | APP 端 汇聚厂区物联感知 61 APP 端 物业公司提供的物业线上服务

规划个性化学习路径 , 推送薄弱环节专项练习 与微课资 源 , 让学生总是沿着自己的 u 最近发展区 n 进行学习 , 提高学习兴趣和效率。 , 为学生提供 "A 学伴 " , 以自然的人机对话 , 将复杂的知识化作童言童语 , 回应学 生的每 , Deepseek

小时不间断地稳定可靠运行； 支持电源、网口、线路等冗余备份策略，可靠性高； 工作环境适应能力强，故障率低； 系统具备诊断及故障提示功能，便于诊断、维护；  易用性原则 采用图形化操作界面，全中文人机对话模式，易于操作、维护和管理。  可扩展性原则 系统设计要考虑今后网络和业务的发展，留有充分的扩充余地，能够方便 地实现视频系统的扩展与升级。  经济实用性原则 在满足系统各项性能指标 系统支持系统管理员、预约管理员、审批管理员、接访管理员和本地流转部门 管理员等多种用户角色，不同用户角色拥有不同的操作权限。 极其便捷的操作 系统采用 B/S 架构设计，图形化操作界面，全中文人机对话模式，易于操作、 维护和管理。 |

全方位的 专业知识支撑。当前平安知鸟问答匹配结果准确率 91%，同时支持非结构化文档 （音视频、PDF、PPT 等）搜索。 2）智能陪练：基于深度学习算法、意图识别、微表情识别等技术，通过人机对话 训练的方式，构建多元化智能实训模式，为学员提供 1 对 1 的精准反馈，实现智 能培训的“降本增效”，当前知鸟在智能陪练方面已实现人脸识别率 99.8%，语音 识别率 98%，综合评分准确率 SCRM 中 的客户画像，代理人本身的形象人设，生成、挑选每天的展业素材，甚至针对不同客群生成不 同内容，为代理人提供"千人千面"的素材（移动展业）。 to A 代理人培训场景：从基于 NLP 的人机对话培训迁移到基于 GPT，原先的对话相对制式化 和死板，需要根据配置的脚本进行比较固定的专项培训，讲师有一定的配置成本，应对发散性 的场景上无法特别好的处理。通过 GPT 提升培训的有效性和体验，让每个代理人有一个真人

智能语音助手是智能座舱中最为核心的功能之一。AIGC技术可以基于大量的语音交互数据自动生成 回复，大大提高了语音交互开发的效率；除此之外， AIGC技术还可实现对用户语音输入的精确识别 和理解，从而实现更加自然和流畅的人机对话。同时，AIGC技术还可以结合车辆环境和信号数据， 动态调整对话策略，使得对话更加的合理和专业。 以典型场景——用车手册为例：当行车中底盘发生异响时，传统的语音助手加用户手册，只能依靠预 设