[go: up one dir, main page]

CN107888791A - 具有来自参与者的非语言反馈的电话会议 - Google Patents

具有来自参与者的非语言反馈的电话会议 Download PDF

Info

Publication number
CN107888791A
CN107888791A CN201710680821.8A CN201710680821A CN107888791A CN 107888791 A CN107888791 A CN 107888791A CN 201710680821 A CN201710680821 A CN 201710680821A CN 107888791 A CN107888791 A CN 107888791A
Authority
CN
China
Prior art keywords
participant
computer
mood
headset equipment
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710680821.8A
Other languages
English (en)
Inventor
Z·R·普泽
B·D·克拉普
R·R·恩格勒
T·T·布朗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lenovo Enterprise Solutions Singapore Pte Ltd
Original Assignee
Lenovo Enterprise Solutions Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lenovo Enterprise Solutions Singapore Pte Ltd filed Critical Lenovo Enterprise Solutions Singapore Pte Ltd
Publication of CN107888791A publication Critical patent/CN107888791A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/56Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
    • H04M3/567Multimedia conference systems
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827Network arrangements for conference optimisation or adaptation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/762Media network packet handling at the source 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/152Multipoint control units therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2203/00Aspects of automatic or semi-automatic exchanges
    • H04M2203/50Aspects of automatic or semi-automatic exchanges related to audio conference
    • H04M2203/5036Aspects of automatic or semi-automatic exchanges related to audio conference using conference for collection of feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

一种方法,包括:在多个参与者计算机中的每一个的显示屏幕上显示电话会议图像,用于在电话会议中由参与者查看。方法还包括针对多个参与者计算机中的每一个,检测与参与者计算机直接进行通信的头戴式设备的运动,以及根据检测到的头戴式设备的运动,针对多个参与者计算机中的每一个,向使用参与者计算机的参与者分配情绪。此外,方法包括在参与者计算机中的至少一个上显示被分配给参与者中的至少一个的情绪连同电话会议图像。头戴式设备的运动优选地由头戴式设备内的加速度计来检测,使得可以在电话会议期间基于参与者的头部姿态来测量参与者的情绪。

Description

具有来自参与者的非语言反馈的电话会议
技术领域
本发明涉及用于举行包括参与者反馈的电话会议的系统和方法。
背景技术
电话会议是在由电信系统所链接的在分开位置处的多个参与者之间的信息的实时交换。电话会议取决于系统的能力和电话会议的需求,可以支持音频、视频和数据的交换。此外,在有或没有来自其他参与者的任意反馈的情况下,音频、视频或数据可以由电话会议管理员或主机完全或部分地控制。当其他系统存在时,可以通过在连接到互联网的每个参与者的计算机上运行电话会议应用来实现电话会议。
对于少数参与者,可以将完整的音频和视频信号从每个参与者交换给每个其他参与者。然而,随着参与者数量的增加,在所消耗的带宽量方面存在显著增加。完整的音频和视频信号的这种交换对于大批参与者而言变成无价值的,因为许多参与者可能没有太多的贡献。此外,如果电话会议涉及来自多个组织的参与者,则每一个视频流可能意外地在视频图像的背景中暴露机密信息。
发明内容
本发明的一个实施例提供了一种方法,包括:在多个参与者计算机中的每一个参与者计算机的显示屏上显示电话会议图像,用于在电话会议中由参与者查看。方法还包括:针对多个参与者计算机中的每一个参与者计算机,检测与参与者计算机直接进行通信的头戴式设备的运动,以及针对多个参与者计算机中的每一个参与者计算机,根据检测到的头戴式设备的运动,向使用参与者计算机的参与者分配情绪。此外,方法包括在参与者计算机中的至少一个参与者计算机上,将被分配给参与者中的至少一个参与者的情绪连同电话会议图像进行显示。
本发明的另一个实施例,提供了一种计算机程序产品,包括具有随其被实施的程序指令的非暂时性计算机可读存储介质,其中程序指令可由处理器执行以使得处理器执行方法。方法包括:由电话会议服务器与多个参与者计算机中的每一个参与者计算机建立网络连接,以及向多个参与者计算机中的每一个参与者计算机发送电话会议图像,用于在多个参与者计算机中的每一个参与者计算机的显示屏幕上显示电话会议图像。方法还包括:接收标识多个头戴式设备的运动的输入,其中每一个头戴式设备与多个参与者计算机中的一个参与者计算机直接进行通信。此外,方法包括:针对多个参与者计算机中的每一个参与者计算机,根据从多个参与者计算机中的每一个参与者计算机接收的头戴式设备的运动,向使用参与者计算机的参与者分配情绪,以及将被分配给参与者中的至少一个参与者的情绪连同电话会议图像向参与者计算机中的至少一个参与者计算机发送,用于连同电话会议图像进行显示。
附图说明
图1是包括通过网络与电话会议服务提供商进行通信的多个参与者设备的系统图。
图2是支持与网络进行通信并与头戴式设备进行通信的参与者计算机的示意图。
图3A至图3C是图示可由头戴式设备中的加速度计检测到的运动的三种基本类型的图。
图4是头戴式设备内的组件的框图。
图5是可以实现电话会议服务提供商的计算机的图。
图6是根据本发明的一个实施例的方法的流程图。
图7是包括用于电话会议视频或图形的第一区域和用于显示参与者反馈的第二区域的显示屏幕的图示。
具体实施方式
本发明的一个实施例提供了一种方法,包括:在多个参与者计算机中的每一个的显示屏幕上显示电话会议图像,用于在电话会议中由参与者查看。该方法还包括:针对多个参与者计算机中的每一个参与者计算机,检测与参与者计算机直接进行通信的头戴式设备的运动,以及针对多个参与者计算机中的每一个参与者计算机,根据所检测的头戴式设备运动,向使用参与者计算机的参与者分配情绪。此外,该方法包括:在参与者计算机中的至少一个参与者计算机上,对被分配给参与者中的至少一个参与者的情绪连同电话会议图像进行显示。
电话会议图像可以是图形、直播视频、及其组合。例如,图形可以是电子表格或演示软件的输出。直播视频可以从一个或多个参与者的计算机上的计算机相机产生。情绪连同电话会议图像可以以任意方式被显示,例如在侧栏或单独的窗口中来显示。此外,分配给每一个参与者的情绪可以与参与者姓名或其他标识符相关联地显示。作为一个非限制性示例,可以通过使用第一颜色或图标来指示正面情绪、并通过使用第二颜色或图标来指示负面情绪,而以图形方式指示情绪。例如,代表每一个参与者的化身可以被阴影化或着色,以指示一种情绪,有可能使用绿色来指示同意,使用红色来指示反对,以及使用黄色来指示困惑或中立情绪。
该方法的实施例可以根据从每个参与者所接收的情绪,来确定所有参与者的集体情绪。这样的集体情绪连同电话会议图像一起显示在这些参与者计算机中的至少一个参与者计算机上。集体情绪可以代表在电话会议中的任意点上该组参与者的正面情绪或负面情绪的程度。在任意时间点上的个体参与者或该组参与者情绪都可以与当时正被显示的电话会议图像的内容相关联。例如,如果参与者正在讨论多个提案,则当前的参与者或组情绪可归因于当前正在电话会议图像中正被讨论或显示的提案。对于任意参与者,特别是对电话会议的发言人、管理员或主持人,这一信息可能都可以是有用的。
本发明的实施例可以使用通常协调电话会议并且可以执行本方法的一个或多个方面的电话会议服务器来实现。在一个示例中,该方法可以针对多个参与者计算机中的每一个建立与电话会议服务器的网络连接,其中电话会议服务器向多个参与者计算机中的每一个发送电话会议图像。
在优选实施例中,每一个参与者将在电话会议期间佩戴头戴式设备。因此,头戴式设备经由有线或无线连接(诸如蓝牙TM)直接与参与者的计算机进行通信。在头戴式设备将优选地包括用于提供言语输入的麦克风和用于输出电话会议音频的扬声器的共同特性的同时,本发明的头戴式设备实施例还可以包括能够检测头戴式设备的运动的加速度计。优选地,加速度计在多个方向上测量加速度。为了便于设计,加速度计可以在三个方向(诸如沿着笛卡尔坐标系的XYZ轴)上测量加速度。因此,加速度计的输出将提供对头戴式设备的运动的指示。最优选地,加速度计的输出以能够区分参与者的点头、参与者的一侧到另一侧的摇头、以及参与者的侧向头部倾斜的方式,来标识头戴式设备的运动。因此,该方法的实施例可以响应于检测到与参与者的点头相一致的头戴式设备的运动,来向参与者分配正面情绪,响应于检测到与参与者的一侧到另一侧的摇头相一致的头戴式设备的运动,来向参与者分配负面情绪,和/或响应于检测到与参与者的侧向头部倾斜相一致的头戴式设备的运动,来向参与者分配困惑情绪。应当认识到,头戴式设备的其他运动,无论是单独还是与其他所连接的设备的运动相组合,都可以与这些情绪或其他情绪相关联。
响应于头戴式设备的运动而被分配给参与者的情绪可以由头戴式设备的部件、参与者的计算机、或电话会议服务器来进行分配。在由头戴式设备的部件来分配情绪的实施例中,该方法还可以包括:从头戴式设备向参与者计算机传送所分配的情绪,以及从参与者计算机向电话会议服务器传送所分配的情绪。在由参与者计算机向参与者分配情绪的实施例中,该方法可以包括:从头戴式设备向参与者计算机传送检测到的头戴式设备的运动,以及从参与者计算机向电话会议服务器传送所分配的情绪。在通过电话会议服务器向参与者分配情绪的其他实施例中,该方法可以包括:其中,从头戴式设备向参与者计算机、以及从参与者计算机向电话会议服务器传送所检测的头戴式设备的运动。
本发明的另一实施例提供了一种计算机程序产品,包括具有随其实施的程序指令的非暂时性计算机可读存储介质,其中程序指令可由处理器执行以使得处理器执行方法。该方法包括:由电话会议服务器与多个参与者计算机中的每一个参与者计算机建立网络连接,以及向多个参与者计算机中的每一个参与者计算机发送电话会议图像,用于在多个参与者计算机的每一个参与者计算机的显示屏幕上显示电话会议图像。该方法还包括:接收标识多个头戴式设备的运动的输入,其中每一个头戴式设备与多个参与者计算机中的一个直接进行通信。此外,该方法包括:针对多个参与者计算机中的每一个,根据从多个参与者计算机中的每一个参与者计算机所接收的头戴式设备运动,向使用参与者计算机的参与者分配情绪,以及将被分配给参与者中的至少一个的情绪连同电话会议图像向参与者计算机中的至少一个参与者计算机发送,用于连同电话会议图像进行显示。
上述计算机程序产品还可以包括用于实现或发起本文所描述的方法中的任意一个或多个方面的程序指令。因此,在计算机程序产品的上下文中将不会重复该方法的单独描述。
图1是包括通过网络40与电话会议服务提供商30进行通信的多个参与者设备20A-E(参与者A-E;统称为参与者设备20)的系统10的图。在参与者设备20中的每一个已经与电话会议服务器30建立网络连接之后,电话会议服务器30可以向多个参与者计算机20中的每一个发送用来显示的电话会议图像以供参与者查看。此外,电话会议服务器30可以协调电话会议,并且可以执行本方法的一个或多个方面。
图2是支持与网络40的进行通信以及与头戴式设备50进行通信的参与者计算机(设备)20的示意图。尽管计算机20被图示为膝上型计算机,参与者计算机可以具有任意形状因素,诸如台式计算机、平板计算机或智能手机。如图所示,计算机20可以经由无线接入点42与网络40进行连接。计算机20还可能经由诸如BluetoothTM的无线通信协议与头戴式设备50进行通信。将Bluetooth TM设备连接或绑定到计算机的过程可以称为配对。
通常的参与者计算机20将包括显示屏22、键盘24和诸如触控板26的定点设备。针对与头戴式设备50的无线通信,计算机20还可以包括内部收发器微芯片或外部软件狗28。
头戴式设备50可以包括可选的头带52、扬声器54和麦克风56。然而,头戴式设备的形状因素可能以各种方式有所不同。例如,头带可以被替换为耳罩带(over-the-earstrap),扬声器可以用耳塞或入耳式监听器来代替,麦克风可以被安置在更接近参与者耳朵的位置。诸如控制器和加速度计(参见图4)的其他电子设备可以包括在壳体中(诸如包围扬声器54的壳体)。
图3A-3C是图示可由头戴式设备50中的加速度计检测到的运动的三种基本类型的图。图3A是佩戴头戴式设备50并且来回点头(参见两个运动箭头)的参与者的侧视图。本发明的实施例可以检测头戴式设备加速度计的这种点头运动,并且向这种运动分配同意的情绪。图3B是佩戴头戴式设备50,并且在一个方向或另一方向倾斜其头部(参见左侧和右侧方向箭头)的参与者的前视图。本发明的实施例可以检测头戴式设备加速度计的这种侧向倾斜运动,并且向这种运动分配困惑或不确定的情绪。图3C是佩戴头戴式设备50并且一侧到另一侧摇头(参见两个运动箭头)的参与者的俯视图。本发明的实施例可以检测头戴式设备加速度计的这种摇晃运动,并且向这种运动分配不同意的情绪。
图4是头戴式设备50内的部件的框图。头戴式设备50包括如图2所示的扬声器54和麦克风56。然而,头戴式设备50还包括控制器58,其接收来自麦克风56的音频输入并向扬声器54提供音频输出。控制器58与无线输入输出组件60进行通信,无线输入输出组件60从无线接收器62接收输入信号并向无线发送器64发送输出信号。可选地,部件60、62、64可以统称为诸如蓝牙TM收发机的无线收发机。头戴式设备50还包括加速度计66,其向控制器58提供指示由加速度计66检测的头戴式设备的任意运动的信号。加速度计可以是能够检测各种一个或多个运动的任意类型的加速度计。最优选地,加速度计将产生区分某些运动或手势的信号,诸如表达同意的点头(参见图3A)、表达不同意的摇头(参见图3C)或表达困惑的倾斜(参见图3B)。可选地,加速度计可以产生将区分其他预定姿态的信号。
根据本发明的一个实施例,图5是可以实现图1的参与者计算机20和/或电话会议服务提供商30的计算机100的图。计算机100包括耦合到系统总线106的处理器单元104。处理器单元104可以利用一个或多个处理器,一个或多个处理器中的每一个具有一个或多个处理器核。驱动/支持显示器110的视频适配器108也耦合到系统总线106。系统总线106经由总线桥112耦合到输入/输出(I/O)总线114。I/O接口116耦合到I/O总线114。I/O接口116提供与包括键盘118、以及经由USB端口126的USB鼠标124的各种I/O设备的通信。如图所示,计算机100能够使用网络适配器或网络接口控制器130通过网络40与其他网络设备进行通信。
硬盘驱动器接口132也被耦合到系统总线106。硬盘驱动器接口132与硬盘驱动器134接口连接。在优选实施例中,硬盘驱动器134与系统存储器136进行通信,系统存储器136也被耦合到系统总线106。系统存储器被定义为计算机100中最低级别的易失性存储器。该易失性存储器包括附加的更高级别的易失性存储器(未示出),包括但不限于高速缓存存储器、寄存器和缓冲器。存储于系统存储器136的数据包括操作系统(OS)138和应用程序144。
操作系统138包括用于向诸如应用程序144的资源提供透明用户访问的壳体140。通常,壳体140是在用户和操作系统之间提供解释器和接口的程序。更具体地说,壳体140执行输入命令行用户界面或来自文件的命令。因此,也称为命令处理器的壳体140通常是操作系统软件层级的最高级别,并且用作命令解释器。壳体提供系统提示,解释由键盘、鼠标、或其他用户输入介质所输入的命令,并将向操作系统的适当较低级别(例如,内核142)发送所解释的命令用于进行处理。注意,尽管壳体140可以是基于-文本的、面向-行的用户界面,本发明可以支持其他用户界面模式,诸如图形、语音、姿态等。
如图所示,操作系统138还包括内核142,其包括用于操作系统138的较低级别的功能,包括提供操作系统138的其他部分和应用程序144所需的必要服务。这些必要服务可以包括内存管理、进程和任务管理、磁盘管理、以及鼠标和键盘管理。
如图所示,计算机100包括计算机100的系统存储器中的应用程序144,包括但不限于,参与者连接管理逻辑146以及参与者和组情绪确定逻辑148。参与者连接管理逻辑146可以处理网络连接和参与者及其计算机的注册,以便支持电话会议的建立。参与者和组情绪确定逻辑148可以处理参与者情绪的确定(如果不是由头戴式设备或参与者计算机来完成)、组情绪的计算、以及用于以各种可选方式显示情绪的输出的生成。
在计算机100中所描绘的硬件元件并不旨在是穷举的,而是代表性的。例如,计算机100可以包括诸如磁带盒、数字通用盘(DVD)、伯努利盒等的替换存储器存储设备。这些和其他变化旨在在本发明的范围内。
图6是根据本发明的一个实施例的方法70的流程图。方法的步骤71包括在多个参与者计算机的每一个的显示屏幕上显示电话会议图像,用于由电话会议中的参与者查看。方法的步骤72包括针对多个参与者计算机中的每一个,检测与参与者计算机直接进行通信的头戴式设备的运动。方法的步骤73包括根据检测到的头戴式设备运动,针对多个参与者计算机中的每一个,对使用参与者计算机的参与者分配情绪。方法的步骤74包括在参与者计算机中的至少一个上显示分配给参与者中的至少一个的情绪连同电话会议图像。
图7是参与者计算机的显示屏幕22的图示。显示屏22包括用于电话会议视频或图形的第一区域80和用于表示参与者反馈的第二区域(左侧栏)82。如图所示,第二区域82包括标识参与者(参与者A-E)中的每一个以及将情绪图标(即,“(+)”用于同意、“(-)”用于不同意、以及“(?)”用于困惑)放置在接近每一个参与者的标识符的“参与者/反馈”信息。第二区域82还包括“组评估”信息,诸如参与者情绪的列表(即,3个同意、1个不同意、以及1个困惑)和该群组的集体情绪的图形指示。在这个非限制性的图示中,图形是具有指针的表,当组对电话会议视频或图像的当前内容有更多的集体不同意时,指针向左转动;并且当组对电话会议视频或图形的当前内容有更多的集体同意时,指针向右转动。其他类型和样式的图形可以用于指示集体情绪。
如本领域技术人员将理解,本发明的方面可以体现为系统、方法或计算机程序产品。因此,本发明的方面可以采取完全的硬件实施例、完全的软件实施例(包括固件、驻留软件、微代码等)、或者将软件方面和硬件方面组合在一起的实施例(在本文中其可以通常被称为“电路”、“模块”或“系统”)的形式。此外,本发明的方面可以采用在一个或多个计算机可读介质中实施的计算机程序产品的形式,一个或多个计算机可读介质具有在其上实施的计算机可读程序代码。
可以利用一个或多个计算机可读存储介质的任意组合。计算机可读存储介质可以是,例如,但不限于电子、磁、光、电磁、红外、或半导体系统、装置或设备、或前述的任意合适的组合。计算机可读存储介质的更具体的示例(非穷尽列表)将包括以下内容:便携式计算机软盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、便携式光盘只读存储器(CD-ROM)、光存储设备、磁存储设备、或上述的任意合适的组合。在本文档的上下文中,计算机可读存储介质可以是任意有形介质,其可以包含或存储由或结合指令执行系统、装置或设备使用的程序。此外,为避免疑义,在这样的计算机可读存储介质(包括被称为易失性存储器的形式)上实施的任意程序指令或代码被认为是“非暂时性的”。
在计算机可读存储介质上所实施的程序代码可以使用任意适当的介质来传送,包括但不限于无线、有线、光纤电缆、RF等、或前述的任意合适的组合。用于执行本发明的方面的操作的计算机程序代码可以以一种或多种编程语言的任意组合来编写,包括面向对象的编程语言(诸如Java、Smalltalk、C++等),以及常规程序性编程语言(诸如“C”编程语言或类似的编程语言)。程序代码可以完全在用户的计算机上、部分地在用户的计算机上、作为独立的软件包,部分地在用户的计算机上并且部分地在远程计算机上、或者完全在远程计算机或服务器上执行。在最后的场景中,远程计算机可以通过任意类型的网络(包括局域网(LAN)或广域网(WAN))连接到用户的计算机,或者可以连接到外部计算机(例如,通过互联网使用互联网服务提供商)。
可以参考根据本发明的实施例的方法、装置(系统)和计算机程序产品的流程图图示和/或框图来描述本发明的方面。应当理解,流程图图示和/或框图的每个框以及流程图图示和/或框图中的框的组合可以由计算机程序指令来实现。这些计算机程序指令可以被提供给通用计算机、专用计算机和/或其他可编程数据处理装置的处理器以产生机器,使得经由计算机的处理器或其他可编程数据处理装置执行的指令创建用于实现流程图和/或框图的一个框或多个框中所指定的功能/动作的装置。
这些计算机程序指令还可以在计算机可读存储介质中被存储为非暂时性程序指令,计算机程序指令可以指导计算机、其他可编程数据处理装置、或其他设备以特定方式起作用,使得存储在计算机可读存储介质中的程序指令产生包括非暂时性程序指令的制品,非暂时性程序指令执行流程图和/或框图的一个框或几个框中指定的功能/动作。
计算机程序指令还可以被加载到计算机、其他可编程数据处理装置、或其他设备上,以使得在计算机、其他可编程装置或其他设备上执行一系列操作步骤以产生计算机实现的过程,使得在计算机或其他可编程装置上执行的指令提供用于实现流程图和/或框图的一个框或几个框中所指定的功能/动作的过程。
附图中的流程图和框图图示了根据本发明的各种实施例的系统、方法和计算机程序产品的可能实现的架构、功能、以及操作。在这方面,流程图或框图中的每个框可以代表代码的模块、段或部分,其包括用于实现所指定的逻辑功能的一个或多个可执行指令。还应当注意,在一些备选实现中,框中所注释的功能可以不以附图中所注释的顺序发生。例如,取决于所涉及的功能,依次示出的两个框实际上可以基本上同时执行,或者框有时可以以相反的顺序来执行。还将注意到,框图和/或流程图说明的每个框、以及框图和/或流程图说明中的框的组合可以由执行指定功能或动作的专用的基于-硬件的系统、或专用硬件和计算机指令的组合来实现。
本文所使用的术语仅用于描述特定实施例的目的,而不旨在限制本发明。如本文所使用的,单数形式“一”、“一个”和“该”也旨在包括复数形式,除非上下文另有明确指示。将进一步理解,当在本说明书中使用时,术语“包括”和/或“包含”指定所述特征、整数、步骤、操作、元件、部件和/或组的存在,但不排除一个或多个其他特征、整数、步骤、操作、元件,部件和/或组的存在或添加。术语“优选地”、“优选的”、“优选”、“可选地”、“可以”、以及类似的术语用于指示所指代的项目、条件或步骤是本发明的可选(非必需)特征。
所附权利要求书中的所有部件或步骤以及功能原件的对应结构、材料、动作、以及等同物旨在包括用于执行与特别要求保护的其他要求保护的元素相结合的功能的任意结构、材料或动作。为了说明和描述的目的,已经呈现了本发明的描述,而不旨在以所公开的形式穷尽或限制于本发明。在不脱离本发明的范围和精神的情况下,许多修改和变化对本领域普通技术人员将是显而易见的。实施例被选择和描述以便最好地解释本发明的原理和实际应用,并且使得本领域的其他普通技术人员能够将用于具有各种修改的各种实施例的本发明理解为适于预期的特定用途。

Claims (20)

1.一种方法,包括:
在多个参与者计算机中的每一个参与者计算机的显示屏幕上显示电话会议图像,用于在电话会议中由参与者查看;
针对所述多个参与者计算机中的每一个参与者计算机,检测与所述参与者计算机直接进行通信的头戴式设备的运动;
针对所述多个参与者计算机中的每一个参与者计算机,根据检测到的所述头戴式设备的运动,向使用所述参与者计算机的所述参与者分配情绪;以及
在所述参与者计算机中的至少一个参与者计算机上,将被分配给所述参与者中的至少一个参与者的所述情绪连同所述电话会议图像进行显示。
2.根据权利要求1所述的方法,其中所述电话会议图像从图形和直播视频中被选择。
3.根据权利要求1所述的方法,还包括:
针对所述多个参与者计算机中的每一个参与者计算机,与电话会议服务器建立网络连接;以及
所述电话会议服务器向所述多个参与者计算机中的每一个参与者计算机发送所述电话会议图像。
4.根据权利要求1所述的方法,其中所述头戴式设备的运动由被固定到所述头戴式设备的加速度计而检测。
5.根据权利要求4所述的方法,其中所述加速度计在三个维度上测量加速度。
6.根据权利要求4所述的方法,其中所述加速度计在多个方向上测量加速度。
7.根据权利要求6所述的方法,还包括:
响应于检测到与所述参与者的点头相一致的所述头戴式设备的运动,向所述参与者分配正面情绪;以及
应于检测到与所述参与者的从一侧到另一侧的摇头相一致的所述头戴式设备的运动,向所述参与者分配负面情绪。
8.根据权利要求7所述的方法,还包括:
响应于检测到与所述参与者的侧向头部倾斜相一致的所述头戴式设备的运动,向所述参与者分配困惑情绪。
9.根据权利要求1所述的方法,还包括:
根据从每一个参与者接收的所述情绪,确定所有参与者的集体情绪;以及
在所述参与者计算机中的至少一个参与者计算机上,将所述集体情绪连同所述电话会议图像进行显示。
10.根据权利要求1所述的方法,其中所述情绪由所述头戴式设备的部件来分配。
11.根据权利要求10所述的方法,还包括:
从所述头戴式设备向所述参与者计算机传送所分配的所述情绪;以及
从所述参与者计算机向电话会议服务器传送所分配的所述情绪。
12.根据权利要求1所述的方法,还包括:
从所述头戴式设备向所述参与者计算机传送检测到的所述头戴式设备的所述运动,其中所述情绪由所述参与者计算机分配给参与者;以及
从所述参与者计算机向电话会议服务器传送所分配的所述情绪。
13.根据权利要求1所述的方法,还包括:
从所述头戴式设备向所述参与者计算机、以及从所述参与者计算机向电话会议服务器传送检测到的所述头戴式设备的所述运动,其中所述情绪由所述电话会议服务器分配给所述参与者。
14.根据权利要求1所述的方法,其中在所述参与者计算机中的至少一个参与者计算机上,将被分配给所述参与者中的至少一个参与者的所述情绪连同所述电话会议图像进行显示包括:显示所述至少一个参与者的标识和被分配给所述至少一个参与者的所述情绪的图形指示。
15.根据权利要求14所述的方法,其中所述情绪的所述图形指示使用第一颜色或图标指示正面情绪,并且使用第二颜色或图标指示负面情绪。
16.根据权利要求1所述的方法,还包括:
通过所述头戴式设备内的扬声器来输出电话会议音频。
17.一种计算机程序产品,包括具有随其被实施的程序指令的非暂时性计算机可读存储介质,所述程序指令可由处理器执行以使得所述处理器执行包括以下各项的方法:
由电话会议服务器与多个参与者计算机中的每一个参与者计算机建立网络连接;
向所述多个参与者计算机中的每一个参与者计算机发送电话会议图像,用于在多个参与者计算机中的每一个参与者计算机的显示屏幕上显示电话会议图像;
接收标识多个头戴式设备的运动的输入,其中每一个头戴式设备与所述多个参与者计算机中的一个参与者计算机直接进行通信;
针对所述多个参与者计算机中的每一个参与者计算机,根据从所述多个参与者计算机中的每一个参与者计算机接收的所述头戴式设备的运动,向使用所述参与者计算机的所述参与者分配情绪;以及
将被分配给所述参与者中的至少一个参与者的所述情绪连同所述电话会议图像向所述参与者计算机中的至少一个参与者计算机发送,用于连同所述电话会议图像进行显示。
18.根据权利要求17所述的计算机程序产品,标识头戴式设备的运动的所述输入由被固定到所述头戴式设备的加速度计来生成,其中所述加速度计在多个方向上测量加速度。
19.根据权利要求18所述的计算机程序产品,还包括:
响应于接收到标识与所述参与者的点头相一致的所述头戴式设备的运动的输入,向所述参与者分配正面情绪;以及
响应于接收到标识与所述参与者的一侧到另一侧的摇头相一致的所述头戴式设备的运动的输入,向所述参与者分配负面情绪。
20.根据权利要求19所述的计算机程序产品,还包括:
根据被分配给每一个参与者的所述情绪来确定所有参与者的集体情绪;以及
向所述参与者计算机中的至少一个参与者计算机发送所述集体情绪,用于连同所述电话会议图像进行显示。
CN201710680821.8A 2016-09-29 2017-08-10 具有来自参与者的非语言反馈的电话会议 Pending CN107888791A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201615280390A 2016-09-29 2016-09-29
US15/280,390 2016-09-29

Publications (1)

Publication Number Publication Date
CN107888791A true CN107888791A (zh) 2018-04-06

Family

ID=59974215

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710680821.8A Pending CN107888791A (zh) 2016-09-29 2017-08-10 具有来自参与者的非语言反馈的电话会议

Country Status (2)

Country Link
EP (1) EP3301897B1 (zh)
CN (1) CN107888791A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112148922A (zh) * 2019-06-28 2020-12-29 鸿富锦精密工业(武汉)有限公司 会议记录方法、装置、数据处理设备及可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101022481A (zh) * 2007-03-21 2007-08-22 华为技术有限公司 实现多点会议中私有会话的方法及装置
JP4287770B2 (ja) * 2004-03-18 2009-07-01 日本電信電話株式会社 情報伝達方法及びこの方法を実現するための通信装置とそのプログラム
CN101651554A (zh) * 2009-09-23 2010-02-17 深圳华为通信技术有限公司 终端请求退出会议的处理方法、装置和系统
CN102291562A (zh) * 2008-10-20 2011-12-21 华为终端有限公司 会议终端、会议服务器、会议系统及数据处理方法
US20130019187A1 (en) * 2011-07-15 2013-01-17 International Business Machines Corporation Visualizing emotions and mood in a collaborative social networking environment

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4287770B2 (ja) * 2004-03-18 2009-07-01 日本電信電話株式会社 情報伝達方法及びこの方法を実現するための通信装置とそのプログラム
CN101022481A (zh) * 2007-03-21 2007-08-22 华为技术有限公司 实现多点会议中私有会话的方法及装置
CN102291562A (zh) * 2008-10-20 2011-12-21 华为终端有限公司 会议终端、会议服务器、会议系统及数据处理方法
CN101651554A (zh) * 2009-09-23 2010-02-17 深圳华为通信技术有限公司 终端请求退出会议的处理方法、装置和系统
US20130019187A1 (en) * 2011-07-15 2013-01-17 International Business Machines Corporation Visualizing emotions and mood in a collaborative social networking environment

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112148922A (zh) * 2019-06-28 2020-12-29 鸿富锦精密工业(武汉)有限公司 会议记录方法、装置、数据处理设备及可读存储介质

Also Published As

Publication number Publication date
EP3301897B1 (en) 2019-05-15
EP3301897A1 (en) 2018-04-04

Similar Documents

Publication Publication Date Title
US20220337693A1 (en) Audio/Video Wearable Computer System with Integrated Projector
US20220141379A1 (en) Techniques to set focus in camera in a mixed-reality environment with hand gesture interaction
US10573048B2 (en) Emotional reaction sharing
CN112835445B (zh) 虚拟现实场景中的交互方法、装置及系统
CN107534656A (zh) 用于通信会话参与者的可视配置
CN108697935A (zh) 虚拟环境中的化身
US9438859B2 (en) Method and device for controlling a conference
CN109923509A (zh) 虚拟现实中的对象的协同操纵
WO2020233403A1 (zh) 三维角色的个性化脸部显示方法、装置、设备及存储介质
CN111103975B (zh) 显示方法、电子设备及系统
US10996741B2 (en) Augmented reality conversation feedback
CN110506419A (zh) 在虚拟现实中渲染扩展视频
US20250150371A1 (en) Latency determinations for human interface devices
US11808941B2 (en) Augmented image generation using virtual content from wearable heads up display
WO2022242855A1 (en) Extended reality rendering device prioritizing which avatar and/or virtual object to render responsive to rendering priority preferences
US20190012470A1 (en) Systems and methods for determining values of conditions experienced by a user, and using the values of the conditions to determine a value of a user permission to apply to the user
CN112017141B (zh) 视频数据处理方法和装置
Gonzalez Morin et al. Full body video-based self-avatars for mixed reality: from e2e system to user study
WO2018075523A9 (en) Audio/video wearable computer system with integrated projector
CN109478343A (zh) 捕获和渲染涉及虚拟环境的信息
CN107888791A (zh) 具有来自参与者的非语言反馈的电话会议
US10477261B2 (en) Sensory communication sessions over a network
US20230368475A1 (en) Multi-Device Content Handoff Based on Source Device Position
CN115578541B (zh) 虚拟对象驱动方法及装置、设备、系统、介质和产品
US11972505B2 (en) Augmented image overlay on external panel

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180406

WD01 Invention patent application deemed withdrawn after publication