理解辅助系统、理解辅助服务器、理解辅助方法和计算机可读记录介质的制作方法
【技术领域】
[0001]本发明涉及用于当有听力障碍的人享受发言者演讲的记笔记服务时辅助有听力障碍的人理解的理解辅助系统、理解辅助服务器和理解辅助方法，并且还涉及其中记录用于实现它们的程序的计算机可读记录介质。
【背景技术】
[0002]双耳听力级是-100分贝或更高的有听力障碍的人(下文中，被简称为“有听力障碍的人”)即使在带有助听器等的情况下也几乎接收不到语音的语言信息。因此，通常存在的情况是，当有听力障碍的人听讲座、教学等时，将提供手语翻译员或笔记翻译员。
[0003]其中，当提供笔记翻译员时，在例如教学的情况下，经常为一个有听力障碍的人提供两个或更多个笔记翻译员。另外，这些笔记翻译员使用PC(个人计算机)、纸质笔记等来转录教员正在说的内容并且向有听力障碍的人展示笔录本。注意的是，需要两个或更多个笔记翻译员，因为记笔记操作是负担过重的工作并且概要精度往往会随着一个笔记翻译员而降低。
[0004]同时，根据财政2008 中的厚生劳动省(Health, Labour and Welfare Ministry)进行的调查，在该国，有大约2万的年龄为18岁和不满18岁的有听力障碍的学生，而在该国官方注册的笔记翻译员的数目是大约I万。此外，如果两个或更多个笔记翻译员陪伴一个有听力障碍的学生，则根据简单计算，可得到辅助的有听力障碍的学生的数目减至四分之一。此外，笔记翻译员的数目和有听力障碍的学生的数目存在地域差异。出于这些原因，当前情形使得只有较少数的有听力障碍的学生可在学校得到辅助。
[0005]因此，为了增加笔记翻译员的数目，各种组织提供培训等。新笔记翻译员在经过一年的必修课程和培训等发展了个人技能之后被注册成为笔记员。然而，存在的问题是，笔记员的数目只略微增大并且大量学生仍然无法得到辅助。
[0006]另一方面，为了提高语音识别的识别精度，近年来，已经提出了各种技术(例如，参见专利文献I至3)。因此，可料想到，使用语音识别技术来辅助有听力障碍的人理解演讲者的口头说明。
[0007]例如，专利文献I公开了用于辅助将语音写成文本的设备。专利文献I中公开的设备用通过语音识别或人工转录而得到的文本数据产生合成语音，并且提取产生的合成语音和读出的原始语音的特征量。然后，专利文献I中公开的设备比较这些特征量，并且基于比较结果展示转录结果的误差。
[0008]专利文献2公开了用于自动检测语音识别结果的误差的设备。专利文献2中公开的设备基于之前的语音识别结果，执行声音信息的累积和学习，基于此产生正确或错误的辨别模型，并且使用产生的正确或错误的辨别模型，检测语音识别结果的误差。注意的是，声学信息是指具有通过进行时域和频域分析而得到的特征量的信息，其中，辨别每个最小单元的正确或错误。
[0009]专利文献3公开了实时校正展示语音的字幕的设备。专利文献3中公开的设备通过语音识别得到一个或多个字符串候选项和这些字符串候选项的置信度，并且在确定当前处理状态的同时，相对于具有最高置信度的第一字符串候选项来选择自动确定或人工确定。此外，如果选择自动确定，则设备自动地相对于第一字符串候选项确定是最终字符串。另一方面，如果选择人工确定，则设备相对于第一字符串候选项人工确定最终字符串，但如果不可以进行确定，则设备将关键词列表与未定义的字符串进行比较以计算匹配分数，并且基于匹配分数，输出用作校正结果的关键词。
[0010]专利文献4公开了使校对员能够使用通过语音识别得到的文本数据和用于语音识别的语音数据执行校对的设备。专利文献4中公开的设备将一系列发出的语音转换成语音信号，将语音信号划分成多个语音信号，并且将语音信号转换成文本数据。然后，在专利文献4中，设备公开读取和输出以同步方式保持彼此关联的语音信号和文本数据。校对员可基于语音信号和文本数据，执行校对。
[0011]现有技术文献的列表
[0012]专利文献
[0013]专利文献1:JP 2001-134276A
[0014]专利文献2:JP 2002-268679A
[0015]专利文献3:JP 2OO7-2567HA
[0016]专利文献4:JP 2004_240920A
【发明内容】
[0017]本发明要解决的问题
[0018]然而，在专利文献I至3中公开的设备中，不执行人工检查，因此如果识别结果包括误差，则将不可能校正误差并且向有听力障碍的人展示校正后的识别结果。
[0019]此外，根据专利文献3中公开的设备，相比于专利文献I和2中公开的设备的情况，识别精度可提高，但为了这样做，必须在任何时间都产生用于计算作为识别目标的各域的匹配分数的数据库。在这种情况下，设备成本超高，因此难以在学校等处使用该设备。
[0020]另一方面，在专利文献4中公开的设备中，校对员基于语音执行检查，但认为，因为识别结果可包括误差，所以校对员的负担重。因此，识别精度会根据校对员的疲惫程度而变化。
[0021]出于上述原因，相对于语音识别设备的辅助，需要笔记翻译员的辅助，但如上所述，难以进一步增加具有一定能力的笔记员/翻译员的数目并且难以扩展对有听力障碍的人的辅助。因此，需要使更大量的有听力障碍的人能够通过使用减轻笔记翻译员负担的机制而得到辅助。
[0022]本发明的目的的示例是提供解决上述问题并且可在减轻执行记笔记的人的负担的同时为有听力障碍的人提供精确信息的理解辅助系统、理解辅助服务器、理解辅助方法和计算机可读记录介质。
[0023]解决问题的手段
[0024]为了实现上述目的，根据本发明的理解辅助系统是一种用于辅助享受发言者演讲的记笔记服务的有听力障碍的人理解的系统，所述理解辅助系统包括:
[0025]服务器装置；第一客户终端，其供记笔记的笔记员使用；第二客户终端，其供检查所述笔记员记下的笔记的检查者使用；第三客户终端，供所述有听力障碍的人使用，
[0026]其中，所述服务器装置包括:
[0027]文本接收单元，其被构造成从所述第一客户终端接收通过所述笔记员记下的演讲笔记而得到的文本数据；
[0028]文本发送单元，其被构造成将接收到的文本数据发送到所述第二客户终端；和
[0029]数据通信单元，其被构造成从所述第二客户终端接收所述检查者检查的文本数据，并且将被检查的文本数据发送到所述第三客户终端。
[0030]为了实现上述目的，本发明的理解辅助服务器是一种用于辅助享受发言者演讲的记笔记服务的有听力障碍的人理解的服务器，所述理解辅助服务器包括:
[0031]文本接收单元，其被构造成从供记笔记的笔记员使用的第一客户终端接收通过所述笔记员记下的演讲笔记而得到的文本数据；
[0032]文本发送单元，其被构造成将接收到的文本数据发送到供检查所述笔记员记下的笔记的检查者使用的第二客户终端；和
[0033]数据通信单元，其被构造成从所述第二客户终端接收所述检查者检查的文本数据，并且将被检查的文本数据发送到供所述有听力障碍的人使用的第三客户终端。
[0034]此外，为了实现上述目的，本发明的理解辅助方法是一种用于辅助享受发言者演讲的记笔记服务的有听力障碍的人理解的方法，所述方法包括以下步骤:
[0035](a)从供记笔记的笔记员使用的第一客户终端接收通过所述笔记员记下的演讲笔记而得到的文本数据；
[0036](b)将步骤(a)中接收到的文本数据发送到供检查所述笔记员记下的笔记的检查者使用的第二客户终端；和
[0037](c)从所述第二客户终端接收所述检查者检查的文本数据并且将被检查的文本数据发送到供所述有听力障碍的人使用的第三客户终端。
[0038]此外，为了实现上述目的，本发明的计算机可读记录介质是其中记录用于致使计算机辅助享受发言者演讲的记笔记服务的有听力障碍的人理解的程序的计算机可读记录介质，所述程序包括用于致使所述计算机执行以下步骤的命令:
[0039](a)从供记笔记的笔记员使用的第一客户终端接收通过所述笔记员记下的演讲笔记而得到的文本数据；
[0040](b)将步骤(a)中接收到的文本数据发送到供检查所述笔记员记下的笔记的检查者使用的第二客户终端；和
[0041](c)从所述第二客户终端接收所述检查者检查的文本数据并且将被检查的文本数据发送到供所述有听力障碍的人使用的第三客户终端。
[0042]本发明的有益效果
[0043]如上所述，根据本发明，可以在减轻执行记笔记的人的负担的同时，为有听力障碍的人提供精确信息。
【附图说明】
[0044][图1]图1是示意性示出根据本发明的实施例的理解辅助系统的整体构造的示图。
[0045][图2]图2是示出根据本发明的实施例的理解辅助系统和理解辅助服务器的构造的框图。
[0046][图3]图3是示出构成根据本发明的实施例的理解辅助系统的笔记员客户端的操作的流程图。
[0047][图4]图4是示出根据本发明的实施例的理解辅助服务器的操作的流程图。
[0048][图5]图5是示出构成根据本发明的实施例的理解辅助系统的检查者客户端的操作的流程图。
[0049][图6]图6是示出由图2中示出的文本评价单元进行词类分解(wordclassdecomposit1n)的处理的不图。
[0050][图7]图7是示出由图2中示出的文本评价单元计算匹配的字符串的处理的示图。
[0051][图8]图8是示出由图2中示出的文本评价单元进行的排名排序(ranksorting)处理的示图。
[0052][图9]图9是示出用于本实施例的笔记员内容保持列表的示例的示图。
[0053][图10]图10是示出由图2中示出的重叠部分删除单元删除重叠部分的处理的示图。
[0054][图11]图11是示出实现根据本发明的实施例的理解辅助服务器的计算机的示例的框图。
【具体实施方式】
[0055]实施例
[0056]下文中，将参照图1至图11描述根据本发明的实施例的理解辅助系统、理解辅助服务器、理解辅助方法和程序。注意的是，示出附图，使得为相同或等同的部分提供相同的附图标记。
[0057]系统构造:整体构造
[0058]首先，将参照图1描述本发明的理解辅助系统和理解辅助服务器的示意性构造。图1是示意性示出根据本发明的实施例的理解辅助系统的整体构造的示图。
[0059]图1中示出的根据本实施例的理解辅助系统10是当有听力障碍的人(下文中也被称为“用户”)享受发言者演讲的记笔记服务时辅助有听力障碍的人理解笔记内容的系统。
[0060]如图1中所示，理解辅助系统10设置有作为服务器装置的理解辅助服务器1、供记笔记的笔记员使用的客户终端2、供用户使用的客户终端3和供检查者使用的客户终端4。
[0061]这里，“检查者”是指检查(也就是说，校对)由笔记员记下的笔记的第三人。此夕卜，在下文中，客户终端3被描述为“用户客户端”3。此外，各客户终端2被描述为“笔记员客户端”2。客户终端4被描述为“检查者客户端”4。
[0062]此外，