一种基于智能手机的会议交互方法
【专利摘要】本发明公开了一种智能会议室前端交互设计方法，本发明服务器运行于PC，包含信息展示界面、语音播放和数据存储功能，接收来自客户端的用户信息并展示，实时播放客户端发送的语音流，整理并存储用户和语音信息。与会者发言前点击软件发言按钮，通过手机麦克风发言，服务器通过会议室音响设备播放发言，同时显示发言人信息。与会者通过手机客户端查看发言人信息，同时可存储发言人信息，与会者间可通过手机客户端互相交流。服务器将每个发言人的语音和个人信息以及与会者间的交互信息分别存放至会议记录数据库，并为智能会议室系统提供访问接口。智能会议室系统通过接口访问会议记录数据库，作为其语音数据记录，可简化发言人识别，交互分析等步骤。
【专利说明】一种基于智能手机的会议交互方法
【技术领域】
[0001]本发明涉及人机交互领域，尤其涉及一种智能会议室前端交互设计方法。
【背景技术】
[0002]现代社会生活中，会议是信息和知识共享的重要渠道。语言交流是会议中最常见的交流方式，因此提高与会者的口头交流体验是提升会议效果的重要途径。传统的大型会议室一般通过传递麦克风的方式来满足与会者的发言要求，但是麦克风传递浪费大量时间，且会降低与会者的参与感和积极性。同时，与会者往往希望通过会议结交其它参会人员，但在传统会议环境下，陌生的与会者之间通过会议建立联系的途径少、效率低。
[0003]智能会议室是一种分析会议交互数据，以提高会议的组织和参与效率的系统。该类系统录制会场语音和视频，进行发言人识别和交互分析等。由于会场录音中，多个发言人同时或相间发言，导致发言人识别过程中需使用语音识别、声音定位等复杂算法。若将每个发言人的语音数据分别存放，同时绑定发言人信息，则可免去发言人识别，同时简化交互分析过程。
[0004]随着智能移动设备和无线网络技术的发展和普及，会议室普遍配备无线W1-Fi网络和投影显示设备，智能手机成为人们普遍使用的通讯工具。利用智能移动设备提供的麦克风、用户界面和无线通信功能，结合会议场所的基础通信设施，可以更好的提升与会者的会议体验，简化与会者发言方式，促进与会者间交流，提高会议效率，为智能会议室系统提供包含语音的会议记录数据，简化发言人识别以及交互分析等步骤。
[0005]鉴于上述原因，本发明创作者经过长时间的研究和实践终于获得了本创作。
【发明内容】
[0006]本发明的目的在于提供一种智能会议室前端交互设计方法，以简化与会者发言方式，促进与会者间交流，提高会议效率，为智能会议室系统提供包含语音的会议记录数据，简化发言人识别以及交互分析等步骤。
[0007]为实现上述目的，本发明提供一种智能会议室前端交互设计方法，其所述方法的步骤如下:
[0008]S1、开放W1-Fi接入信号，接入计算机和与会者使用的智能手机；
[0009]S2、计算机和与会者使用的智能手机运行服务器软件；
[0010]S3、与会者发言前点击软件发言按钮，通过手机麦克风发言，服务器通过会议室音响设备播放发言，同时显示发言人信息；
[0011]S4、与会者通过手机客户端查看发言人信息，同时可存储发言人信息，与会者间可通过手机客户端互相交流；
[0012]S5、服务器将每个发言人的语音和个人信息以及与会者间的交互信息、分别存放至会议记录数据库，并为智能会议室系统提供访问接口 ；
[0013]S6、智能会议室系统通过接口访问会议记录数据库，作为其语音数据记录，可简化发言人识别，交互分析等步骤。
[0014]所述SI中的会场包括封闭的会议室和开放环境的会议场所等。与计算机互联的投影仪或显示屏是现代会议场所常用设备。W1-Fi接入是指会场通过无线路由器或者其它无线网络设备提供无线接入方法，使得其它无线接入设备连接该网络后，接入同一个局域网。本专利应用时要求会场计算机接入上述W1-Fi局域网。
[0015]所述S2中的智能手机指运行Android或1S等智能操作系统的手机，其必备的硬件包括:显示屏、麦克风、无线网络调制解调器等。
[0016]本发明客户端软件运行于智能手机平台，包含语音传递、发言人信息查询及即时通信功能，通过手机麦克风采集用户语音并由W1-Fi传递至服务器，用户可通过客户端软件互相发送消息。本专利服务器运行于PC，通过TCP协议监听来自客户端的用户连接请求，包含信息展示界面、语音播放和数据存储功能，接收来自客户端的用户信息并展示，实时播放客户端发送的语音流，整理并存储用户和语音信息。
[0017]所述SI中对应服务器软件，通过TCP协议获取客户端用户信息并在软件界面上显示，通过RTP协议监听来自客户端的实时语音请求并在服务器运行的计算机上播放。本专利对应客户端软件，通过TCP协议向服务器发送用户自定义信息，通过RTP协议向服务器发送从手机麦克风米集的实时语音信息。
[0018]用户自定义信息由用户在客户端界面上编辑设置。
[0019]所述S4中的发言人信息由服务器通过TCP协议向客户端推送，客户端同时通过TCP协议定时向服务器查询发言人信息。客户端界面同步显示发言人信息，用户可存储该信息备用。与会者可通过手机客户端向其它与会者发送消息，与会者间通过客户端可进行文字交流。
[0020]所述S5中的服务器将发言人的音轨和其个人信息以及发言时间绑定，对每个发言人分别形成一个track，存放至数据库。同时，用户通过客户端进行交互的信息由客户端发送至服务器，服务器存储至数据库。服务器提供所有数据访问接口。
[0021]所述S6中的智能会议室系统在进行会议分析时，需记录会场语音和交互视频，进行发言人识别以及交互分析。本专利为智能会议系统提供数据访问接口，可作为其语音记录库。因数据库中发言和交互数据均与与会者个人信息绑定，因此不再需要进行发言人识另IJ，同时，可以简化交互分析过程。
[0022]与现有技术相比较本发明的有益效果在于:本发明提出了一种智能会议室前端交互设计方法，与传统会议交互方法相比，可以更好的提升与会者的会议体验，简化与会者发言方式，促进与会者间交流，提高会议效率，为智能会议室系统提供包含语音的会议记录数据，简化发言人识别以及交互分析等步骤。
【专利附图】
【附图说明】
[0023]图1为本发明实例中智能会议室前端交互设计示意图；
[0024]图2为本发明实例中的客户端连接服务器界面图；
[0025]图3为本发明实例中的客户端用户信息编辑界面图；
[0026]图4为本发明实例中的客户端发言人信息界面图；
[0027]图5为本发明实例中的客户端联系人信息界面图；[0028]图6为本发明实例中的客户端用户间交互信息界面图；
[0029]图7为智能会议室系统结构图；
[0030]图8为本发明对应系统结构图。
【具体实施方式】
[0031]以下结合附图，对本发明上述的和另外的技术特征和优点作更详细的说明。
[0032]请参阅图1所示，本发明智能会议室前端交互设计方法的具体过程为:
[0033]步骤1，会场开放W1-Fi接入信号，并将连接投影或显示屏设备的计算机接入该W1-Fi所属局域网。
[0034]会场包括封闭的会议室和开放环境的会议场所等。与计算机互联的投影仪或显示屏是现代会议场所常用设备。W1-Fi接入是指会场通过无线路由器或者其它无线网络设备提供无线接入方法，使得其它无线接入设备连接该网络后，接入同一个局域网。本专利应用时要求会场计算机接入上述W1-Fi局域网。
[0035]步骤2，本发明对应的智能会议室前端系统由服务器和客户端共同构成，系统结构图如附图8所示。会议室计算机运行服务器软件，与会者使用智能手机接入上述W1-Fi局域网，并运行客户端软件，会议室计算机同步显示已连接用户信息。本发明客户端软件运行于智能手机平台，包含语音传递、发言人信息查询及即时通信功能，通过手机麦克风采集用户语音并由W1-Fi传递至服务器，用户可通过客户端软件互相发送消息。本专利服务器运行于PC，包含信息展示界面、语音播放和数据存储功能，接收来自客户端的用户信息并展示，实时播放客户端发送的语音流，整理并存储用户和语音信息。
[0036]智能手机指运行Android或1S等智能操作系统的手机，其必备的硬件包括:显示屏、麦克风、无线网络调制解调器等。
[0037]本发明客户端软件运行于智能手机平台，包含语音传递、发言人信息查询及即时通信功能，通过手机麦克风采集用户语音并由W1-Fi传递至服务器，用户可通过客户端软件互相发送消息。本专利服务器运行于PC，通过TCP协议监听来自客户端的用户连接请求，包含信息展示界面、语音播放和数据存储功能，接收来自客户端的用户信息并展示，实时播放客户端发送的语音流，整理并存储用户和语音信息。
[0038]与会者连接会场服务器后，客户端界面显示如附图2所示。
[0039]步骤3，与会者发言时点击软件发言按钮，通过手机麦克风发言，服务器通过会议室音响设备播放发言，同时显不发言人信息。
[0040]本专利对应服务器软件，通过TCP协议获取客户端用户信息并在软件界面上显示，通过RTP协议监听来自客户端的实时语音请求并在服务器运行的计算机上播放。本专利对应客户端软件，通过TCP协议向服务器发送用户自定义信息，通过RTP协议向服务器发送从手机麦克风采集的实时语音信息。客户端发言人信息显示如附图5所示。
[0041]用户自定义信息由用户在客户端界面上编辑设置，编辑界面如附图3所示。
[0042]步骤4，与会者通过手机客户端查看发言人信息，同时可存储发言人信息，与会者间可通过手机客户端互相交流。
[0043]发言人信息由服务器通过TCP协议向客户端推送，客户端同时通过TCP协议定时向服务器查询发言人信息。客户端界面同步显示发言人信息，用户可存储发言人信息备用，存储的发言人信息以列表的方式呈现，如附图5所示。与会者可通过手机客户端向其它与会者发送消息，与会者间通过客户端可进行文字交流，交流的方式如附图6所示。
[0044]步骤5，服务器将每个发言人的语音和个人信息以及与会者间的交互信息分别存放至会议记录数据库，并为智能会议室系统提供访问接口。
[0045]服务器将发言人的音轨和其个人信息以及发言时间绑定，对每个发言人分别形成一个track，存放至数据库。同时，用户通过客户端进行交互的信息由客户端发送至服务器，服务器存储至数据库。服务器提供所有数据访问接口。
[0046]步骤6，智能会议室系统的通用架构如附图7所示，包括信息获取、会议识别和信息获取等三个主要模块，系统的主要功能为，通过分析会议现场记录，对会议内容进行索引和注释等，帮助会议组织者和参与者提高会议效率。智能会议室系统在进行会议分析时，需通过麦克风和摄像头记录会场语音和交互视频，并进行发言人识别以及交互分析。本专利为智能会议系统提供数据访问接口，可作为其语音记录库。因数据库中发言和交互数据均与与会者个人信息绑定，因此不再需要进行发言人识别，且发言人辨别正确率为100%，从而可以简化会议交互分析过程。
[0047]本发明提出了一种智能会议室前端交互设计方法，与传统会议交互方法相比，可以更好的提升与会者的会议体验，简化与会者发言方式，促进与会者间交流，提高会议效率，为智能会议室系统提供包含语音的会议记录数据，简化发言人识别以及交互分析等步骤。
[0048]以上所述仅是本发明的优选实施方式，应当指出，对于本【技术领域】的普通技术人员来说，在不脱离本发明原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
【权利要求】
1.一种智能会议室前端交互设计方法，其特征在于，所述方法的步骤如下: 51、开放W1-Fi接入信号，接入计算机和与会者使用的智能手机； 52、计算机和与会者使用的智能手机运行服务器软件； 53、与会者发言前点击软件发言按钮，通过手机麦克风发言，服务器通过会议室音响设备播放发言，同时显示发言人信息； 54、与会者通过手机客户端查看发言人信息，同时可存储发言人信息，与会者间可通过手机客户端互相交流； 55、服务器将每个发言人的语音和个人信息以及与会者间的交互信息分别存放至会议记录数据库，并为智能会议室系统提供访问接口 ； 56、智能会议室系统通过接口访问会议记录数据库，作为其语音数据记录，可简化发言人识别，交互分析等步骤。
2.根据权利要求1所述的一种基于智能手机的会议交互方法，其特征在于，所述SI中的计算机连接有投影或显示屏设备。
3.根据权利要求1所述的一种智能会议室前端交互设计方法，其特征在于，所述S2中的智能手机指运行Android或1S等智能操作系统的手机。
4.根据权利要求1所述的一种智能会议室前端交互设计方法，其特征在于，所述S2中的服务器软件包含语音传递、发言人信息查询及即时通信功能，通过手机麦克风采集用户语音并由W1-Fi发送至服务器，用户可通过客户端软件互相发送消息。
5.根据权利要求1所述的一种智能会议室前端交互设计方法，其特征在于，所述S5中的服务器将发言人的音轨和其个人信息以及发言时间绑定，对每个发言人分别形成一个track，存放至数据库；同时，用户通过客户端进行交互的信息由客户端发送至服务器，月艮务器存储至数据库；服务器提供所有数据访问接口。
6.根据权利要求1所述的一种智能会议室前端交互设计方法，其特征在于，所述S6中智能会议室系统在进行交互分析时，需记录会场语音和交互视频，进行发言人识别以及交互分析。
【文档编号】H04L12/18GK104038354SQ201410178026
【公开日】2014年9月10日 申请日期:2014年4月25日 优先权日:2014年4月25日
【发明者】於志文, 胥皇, 王柱, 倪红波, 郭斌, 周兴社 申请人:西北工业大学