为加强研究生学术交流活动,推进学术创新,特开通“研究生学术报告预告区”。我校研究生和教师可以在预告区及时发布和了解有关研究生学术报告的信息,届时参加。也可就某学术报告展开专题讨论与交流。
主要针对课堂背景,进行教师、学生和板书的检测与跟踪方案设计。包括总方案设计,综合处理教师、学生和板书模块的内容,控制摄像头完成检测和跟踪。三个模块方案的总体流程相同为输入视频、预处理、目标检测、特征提取、行为判断和镜头跟踪与切换,细节方面有所不同。教师模块目标检测部分采用高斯背景建模提取前景图像,经过二值化和形态学处理送入特征提取部分,利用种子填充法获得教师位置坐标,根据中心点的移动位置控制镜头的跟踪与切换;板书模块采用均值背景建模,进行二值化和形态学处理,得到教师手的位置坐标,进而判断教师位置,控制镜头切换黑板左或右部分;学生模块采用帧差法和光流法相结合,进行二值化和形态学处理,通过ST角点检测和 LK金字塔光流法得到特征点的位置坐标和运动位移矢量,将矢量分为上下左右通道,分别计算运动历史图像,从而判断学生起立,坐下还是左右移动,进而控制镜头的跟踪与切换。同时,对实现整个方案的软硬件进行说明。