欢迎访问山东大学软件学院时空视点传媒

当前位置: 首页   >   社会实践   >   正文

从“系统能运行”到“儿童能使用”——山东大学“智绘心桥”团队暑期探索特殊儿童智能辅助训练

作者: 山东大学软件学院“智脑助星队”   信息来源:    发布时间: 2026-09-02

2026年暑期,山东大学软件学院智脑助星队”“智绘心桥社会实践团队以科技助残、智能陪伴、情绪调节为主题,围绕特殊儿童辅助训练,完成了从智能绘本交互系统设计开发、到走进伟众康复机构开展两轮真实体验的完整实践,在真实场景中重新思考技术怎样才算真正服务了使用者

这个设想的起点,是一个具体而真实的问题。自闭症谱系障碍儿童在注意力维持、情绪表达、社会互动等方面常面临不同程度困难,相关训练具有长期性、个体化需求。故事化、绘本化内容常帮儿童建立场景预期、理解社会情境,但这类内容多由专业人员手工制作,门槛高、耗时长,难以随每个儿童的状态调整;儿童之间个体差异明显,同一套内容难以适配不同孩子。团队由此思考:能否借人工智能与交互技术,让绘本内容跟着孩子走,生成更贴近其需求的内容与互动方式?

带着这个构想,团队进行了系统的设计与开发。技术路线围绕感知儿童状态生成个性化内容动态呈现反馈展开:系统融合脑电、表情、语音等多模态信息,综合判断儿童的注意状态、情绪倾向与参与程度,再由大语言模型生成与当前状态相适配的绘本剧情,以动态场景呈现,儿童可通过简单操作推动故事。需说明的是,这套系统定位为面向特殊儿童辅助训练与科技实践探索的探索性工具,不替代医学诊断与专业康复治疗。

1 系统故事书干预(ASD交互界面

技术开发只是第一步。对团队而言,更重要的是:这套系统能不能真正进入真实康复服务场景?暑期,团队来到伟众康复机构。这家机构长期开展特殊儿童康复服务,下设山东伟众脑科学研究中心,关注脑科学技术研发与临床转化,在特殊儿童精准康复、脑功能检测、神经反馈与智能技术应用等方面积累了实践经验。团队的到来,正是希望借助这一真实场景,检验构想与现实的差距。

2 系统脑功能实时可视化界面

抵达后,团队先与机构负责人、一线康复师与特教教师座谈,了解自闭症儿童在注意力维持、情绪感知、社交表达方面的行为特点与差异化需求;专业人员的提示,也让团队对体验中的情绪安抚、节奏把控等要点有了更具体认识。随后,团队分阶段体验:第一次为注意力相关前置体验,儿童在专业人员引导下接触并体验相关设备与测试流程,团队重点观察儿童对设备的接受程度与个体差异;第二次为正式绘本功能体验,儿童在康复教师全程陪伴下体验系统绘本内容,程文明院长参与引导,团队成员分别承担技术保障、现场观察与过程记录。

图片三

3 体验者在康复机构陪同指导下使用智能绘本交互系统

正是这两轮真实体验,让认识浮出水面。团队观察到,儿童对设备的适应速度、对内容与流程的关注重心存在明显个体差异:有的熟悉后能较平稳参与,有的需要更持续的引导;面对同一套绘本内容,不同儿童对角色、图像、情节、生活场景的关注点与参与节奏各异。同时,专业人员在体验中始终承担观察、引导与判断作用——儿童是否适合参与、何时调整节奏、内容是否超出理解范围,这些难以由系统自动判断。团队由此认识到:技术可用不等于场景适用,统一的内容与交互流程难以完全覆盖不同儿童的需求。

真实反馈推动了团队的反思。经过复盘交流,团队认识到,系统优化方向不应只是增加更多功能,而应转向内容适配、交互友好与个体差异:丰富贴近儿童真实生活的情境内容,针对不同能力层级设置梯度化难度,优化更友好的交互方式,并为专业人员引导预留调整空间。更重要的是,智能技术不能简单替代专业人员,而应探索儿童专业人员智能系统的协同关系。

从项目整体看,这次实践形成了一个清晰闭环:需求发现技术开发真实体验专业反馈持续优化。团队完成了从校园技术开发到真实康复场景实践的全过程探索;系统经过前置与正式体验,获得真实场景下的应用观察与反馈,为后续优化提供依据;团队成员也更懂得从真实用户、专业场景与社会需求出发思考创新。

收获之外,实践也把更具体的问题留给科研。围绕实践中发现的儿童个体差异、内容适配与系统自适应等问题,团队将把这些问题转化为科研课题,围绕更贴近真实生活的内容设计、不同儿童的内容与节奏适配、状态信息与系统自适应机制等方向持续研究,并准备推进相关科研论文工作。

对这支年轻团队而言,这次实践最有分量的收获,或许并不只是完成了一套系统。它让他们更清楚地看到:科技助残不是简单把人工智能搬进康复场景,而要尊重专业规律、真实需求与伦理边界;技术创新要在真实场景中不断接受检验,才能从功能实现走向服务社会。山东大学软件学院的青年学子正立足专业优势,把人工智能等技术探索与特殊群体现实需求结合,在真实场景实践中理解并肩负起科创责任。

(文、图/山东大学软件学院智脑助星队

 copyright@2015山东大学时空视点传媒

地址:济南市舜华路1500号山东大学软件学院