一种与音频同步显示笔迹的装置及其方法
【技术领域】
[0001] 本发明涉及多媒体技术领域，尤其涉及一种与音频同步显示笔迹的装置及其方 法。
【背景技术】
[0002] 随着互联网的普及和多媒体技术的发展，数字化校园逐渐建立。数字化校园是指 以数字化信息和网络为基础建立起来的对教学、科研、管理、技术服务、生活服务等校园信 息的收集、处理、整合、存储、传输和应用，使数字资源得到充分优化及利用的一种虚拟教育 环境。它可以拓展现实校园的时间和空间维度，提升传统校园的运行效率，扩展传统校园的 业务功能，最终实现教育过程的全面信息化，从而达到提高教学管理水平和教学效率的目 的。然而在数字化校园中，往往希望可以利用多媒体技术来模拟现场教学，给学生营造一种 面对面的教学环境，使教学内容更加生动，令学生更容易理解，从而实现教学目的。
[0003] 现有技术中，使用文字和音频结合的多媒体文件来模拟现场教学，但由于多媒体 文件中的文字和语音讲解一般是分通道播放的（分别按照各自的时间轴播放），因此很难 令语音和文字同步显示。即使将语音和文字的播放时间轴同步，但也只能实现语音播放的 时候显示出对应的文字，而无法使笔迹和语音同步。例如，老师讲解文字的笔顺时，说"写 '工'字时，笔顺依次为'横'、'竖'、'横'"，现有技术只会在播放所述音频时，在显示界面显 示出整个'工'字，而无法将老师说的'横''竖''横'对应的笔迹同步显示出来。这往往造 成较差的观看体验，使学生不能正确理解老师的讲解，进而影响学习效率。
【发明内容】
[0004] 有鉴于此，本发明提供一种与音频同步显示笔迹的装置及其方法令电子终端播放 音频时同步显示笔迹，实现更好的教学效果。
[0005] 为实现上述目的，本发明提供技术方案如下：
[0006] 一种与音频同步显示笔迹的装置，所述装置包括：
[0007] 坐标建立模块，用于在显示界面建立坐标系，获取显示界面中显示所述笔迹所必 需的像素点的坐标信息；
[0008] 时间获取模块，用于根据所述音频的播放时间信息获取显示所述笔迹所必需的像 素点所对应的音频数据的播放时间点；
[0009] 标签插入模块，用于将所述播放时间点作为时间标签插入到显示所述笔迹所必需 的像素点的坐标信息中，令播放所述音频数据时所述像素点在显示界面中进行显示。
[0010] 进一步的，所述装置还包括笔划类型模块，用于将所述笔迹中每个笔划对应的笔 划类型插入到显示所述笔迹所必需的像素点的坐标信息中；
[0011] 所述笔迹所必需的像素点包括：所述笔迹中每个笔划对应的起始像素点和结束像 素点。
[0012] 进一步的，所述显示所述笔迹所必需的像素点包括：所述笔迹中的全部像素点。
[0013] 进一步的，所述坐标建立模块在显示界面建立一个或多个坐标系。
[0014] 进一步的，所述坐标信息为：
[0015] 所述像素点对应的坐标值，或者所述笔迹中每个笔划的起始像素点的坐标值和其 他像素点的坐标偏移量。
[0016] 基于相同的构思，本发明还提供一种与音频同步显示笔迹的方法，所述方法包括：
[0017] 在显示界面建立坐标系，获取显示界面中显示所述笔迹所必需的像素点的坐标信 息；
[0018] 根据所述音频的播放时间信息获取显示所述笔迹所必需的像素点所对应的音频 数据的播放时间点；
[0019] 将所述播放时间点作为时间标签插入到显示所述笔迹所必需的像素点的坐标信 息中，令播放所述音频数据时所述像素点在显示界面中进行显示。
[0020] 进一步的，所述方法还包括：
[0021] 将所述笔迹中每个笔划对应的笔划类型插入到显示所述笔迹所必需的像素点的 坐标信息中；
[0022] 所述笔迹所必需的像素点包括：所述笔迹中每个笔划对应的起始像素点和结束像 素点。
[0023] 进一步的，所述显示所述笔迹所必需的像素点包括：所述笔迹中的全部像素点。
[0024] 进一步的，所述在显示界面建立坐标系具体为：在显示界面建立一个或多个坐标 系。
[0025] 进一步的，所述坐标信息为：
[0026] 所述像素点对应的坐标值，或者所述笔迹中每个笔划的起始像素点的坐标值和其 他像素点的坐标偏移量。
[0027] 相对与现有技术，本发明可以通过将显示笔迹所必需的像素点所对应的音频数据 的播放时间点作为时间标签插入到所述像素点的坐标信息中，令电子终端播放所述音频数 据的同时，将音频内容对应的笔迹同步显示在显示界面中，从而增强了多媒体文件的可观 性，提升了教学效果。
【附图说明】
[0028] 图1是本发明提供的一种与音频同步显示笔迹装置的结构示意图；
[0029] 图2是本发明实施例中一种获取像素点的示意图；
[0030] 图3是本发明实施例中另一种获取像素点的示意图；
[0031] 图4-1是本发明实施例中一种坐标系的示意图；
[0032] 图4-2是本发明实施例中另一种坐标系的示意图；
[0033] 图5-1是本发明实施例中与音频同步显示第一笔划的示意图；
[0034] 图5-2是本发明实施例中与音频同步显示第二笔划的示意图；
[0035] 图5-3是本发明实施例中与音频同步显示第三笔划的示意图；
[0036] 图5-4是本发明实施例中与音频同步显示第四笔划的示意图；
[0037] 图5-5是本发明实施例中与音频同步显示完整笔迹的示意图。
【具体实施方式】
[0038] 为解决上述问题，本发明提供一种与音频同步显示笔迹的装置及其方法令电子终 端在播放音频时同步显示笔迹，实现更好的教学效果。
[0039] 请参见图1，是本发明提供的一种与音频同步显示笔迹装置的结构示意图，所述装 置基本运行环境包括CPU、非易失性存储器、内存及其他硬件，从逻辑层面看，所述装置包括 坐标建立模块、时间获取模块和标签插入模块，其中：
[0040] 坐标建立模块，用于在电子终端的显示界面上建立坐标系，通过所述坐标系获取 所述显示界面中显示笔迹所必需的像素点的坐标信息；需要说明的是，笔迹可以看做很多 个像素点叠加后的图形，但是在显示笔迹的时候可以只根据所述笔迹中的必要像素点就可 以显示出完整的笔迹（例如显示'工'字只需要根据其中的四个端点和两个交点的坐标信 息将像素点按照书写顺序就可以显示出来整个笔迹），而不需要根据所述笔迹的所有像素 点来显示笔迹。
[0041] 时间获取模块，用于根据所述音频的播放时间信息获取显示所述笔迹所必需的像 素点所对应的音频数据的播放时间点；例如，录制"我现在写'一'"这段音频数据时，会形成 该音频数据的对应时间轴，那么获取所述'一'字的必要像素点时，在所述时间轴上对应的 时刻就是本发明要获取的所述像素点的播放时间点。
[0042] 标签插入模块，用于将所述播放时间点作为时间标签插入到显示所述笔迹所必需 的像素点的坐标信息中，令电子终端在播放所述音频数据时，可以根据必要像素点的坐标 信息和播放时间点将所述像素点在显示界面中进行同步显示。
[0043] 因此，本发明可以通过将显示笔迹所必需的像素点所对应的音频数据的播放时间 点作为时间标签插入到所述像素点的坐标信息中，令电子终端播放所述音频数据的同时， 将音频内容对应的笔迹同步显示在显示界面中，从而增强了多媒体文件的可观性，提升了 教学效果。
[0044] 获取笔迹中像素点的坐标信息与在画图软件上获取画笔轨迹的过程类似，需要要 实时监测显示区域中鼠标（或其他输入设备）的动态，当鼠标点击到显示区域会产生触发 事件，持续触发时会产生移动事件，坐标建立模块根据建立的坐标系获取所述移动事件中 的每个像素点的坐标信息，显然以这种方式获取所有像素点的坐标信息的计算量相对会很 大，鉴于所述笔迹信息中多数为常用的字符，如汉字、英文字母、数字等，本发明可以根据笔 迹中的笔划特征来减少