本发明涉及通讯领域， 尤其涉及一种基于社交网络的混合语言交互处 理 系统及其方法。

背景技术

社交网络（ Social Network Service, 简称 SNS )是一种人类世界信息互通 的平台， 通过形成互联网中虚拟社交关系， 实现人与人的信息共享和交互。 目前， 微博是应用比较广泛的一种社交网络， 微博具有很强的开放性、 实时 性、 信息共享程度高； 同时， 可以通过加好友（关注） 简单方便的定制化的 获取信息， 通过转发 /评论实现用户之间的交互和信息传播； 另外， 由于微博 类社交网络提供开放的 web service API, 有效降低了应用开发门槛。

近年来， 物联网传感器设备、 智能终端设备的广泛部署促使各种基于釆 集数据的泛在应用进入人们的生活中。 人们不仅仅对传感器釆集的原始数据 存在兴趣， 对于现实世界的实体（设备， 地理位置， 其他人等） 以及这些实 体的状态 （是否空闲， 拥挤程度， 动作等） 同样十分关注。 因此人们更加地 依赖于具备情境感知能力的服务及设备。

然而， 当前的物联网实体， 特别是传感器等设备釆集到的数据、 实体状 态信息等数据大都以机器语言形态存在， 人们难以理解并加以利用； 并且， 当前的物联网设备部署和利用大都存在于封闭 的系统中， 交互协议和交互语 言以私有为主， 导致互通性和开放程度不强， 外界难以访问并进行二次开发。

因此， 现有技术中的社交网络平台无法支持上述 "人 -物" 、 "物 -物"构 成的新型社交网络， 不具备相应的技术以实现不同属性实体间自主 的交互、 控制等社会化交互功能。

发明内容

本发明的主要目的在于提供一种基于社交网络 的混合语言交互处理系统 及其方法，以解决现有技术存在的社交网络不 支持不同属性实体间自主交互、 控制等社会化交互功能的问题， 其中： 根据本发明实施例的基于社交网络的混合语言 交互处理系统包括： 第一 终端资源管理模块， 用于釆集物联网终端设备的机器语言形式的原 始数据； 第一情境感知推理模块， 用于根据预设的情境推理逻辑对原始数据进行 推理 分析， 并将得到的机器语言形式的数据信息发送至第 一触发执行模块； 第一 触发执行模块， 用于启动社交网络混合语言发送功能， 将机器语言形式的数 据信息发送至第一混合语言映射解析模块； 第一混合语言映射解析模块， 用 于根据预设的机器语言与自然语言之间的对应 关系， 将机器语言形式的数据 信息解析为对应的自然语言形式的数据信息； 第一混合交互模块， 用于在社 交网络上发布自然语言形式的数据信息。

其中， 第一混合交互模块在社交网络上发布混合语言 形式的数据信息， 混合语言形式包括自然语言形式和机器语言形 式。

其中， 该系统还包括： 第二混合交互模块， 用于通过社交网络获取自然 语言形式的数据信息； 第二混合语言映射解析模块， 用于获取与自然语言形 式的数据信息相对应的机器语言形式的数据信 息； 第二情境感知推理模块， 用于根据预设的情境推理逻辑对数据信息进行 推理分析， 得到推理结果； 第 二触发执行模块， 用于根据推理结果生成对于物联网终端设备的 控制指令； 第二终端资源管理模块， 用于根据控制指令对物联网终端进行控制。 其中， 第二混合语言映射解析模块通过社交网络或第 一混合交互模块， 获取与自然语言形式的数据信息相对应的机器 语言形式的数据信息。 其中， 物联网终端设备在社交网络上注册有账户， 第一混合交互模块在 社交网络上以物联网终端设备的注册账户发布 自然语言形式或混合语言形式 的数据信息。

根据本发明实施例的基于社交网络的混合语言 交互处理方法包括： 釆集 物联网终端设备的机器语言形式的原始数据；

根据预设的情境推理逻辑对原始数据进行推理 分析， 得到机器语言形式 的数据信息； 启动社交网络混合语言发送功能， 根据预设的机器语言与自然 语言之间的对应关系， 将机器语言形式的数据信息解析为对应的自然 语言形 式的数据信息； 在社交网络上发布自然语言形式的数据信息。

其中， 该方法还包括： 在社交网络上发布混合语言形式的推理结果， 混 合语言形式包括自然语言形式和机器语言形式 。

其中， 该方法还包括： 通过社交网络接收自然语言形式的数据信息； 获 取与自然语言形式的数据信息相对应的机器语 言形式的数据信息； 根据预设 的情境推理逻辑对数据信息进行推理分析， 得到推理结果； 根据推理结果生 成对于物联网终端的控制指令， 并对物联网终端进行控制。

其中， 获取与自然语言形式的数据信息相对应的机器 语言形式的数据信 息的步骤， 包括： 通过社交网络或物联网终端设备获取与自然语 言形式的数 据信息相对应的机器语言形式的数据信息。

其中， 物联网终端设备在社交网络上注册有账户， 在社交网络上以物联 网终端设备的注册账户发布自然语言形式的数 据信息。

根据本发明的技术方案， 混合语言交互处理系统构建自然语言与机器语 言的映射 /解析， 结合情境信息将物联网终端设备的数据信息 (自然语言或混 合语言形式）在社交网络上发布， 实现社交网络信息的解析和反应， 从而完 成不同属性实体间社会化的消息交互及控制， 实现了一种新型的 "人 -物" ， "物 -物" 共存的社交网络。 附图说明

此处所说明的附图用来提供对本发明的进一步 理解， 构成本申请的一部 分， 本发明的示意性实施例及其说明用于解释本发 明， 并不构成对本发明的 不当限定。 在附图中：

图 1是本发明实施例的结构框图；

图 2是本发明实施例的数据发布的流程图；

图 3是本发明实施例的数据接收的流程图；

图 4是本发明一个实施例的混合语言交互处理方� �的流程图；

图 5是本发明另一实施例的混合语言交互处理方� �的流程图。 具体实施方式

本发明的主要思想在于， 釆集物联网终端设备的机器语言形式的数据信 息； 根据预设或用户自定义的情境推理逻辑对所述 数据信息进行推理分析， 得到机器语言形式的推理结果； 启动社交网络混合语言发送功能， 根据预设 的机器语言与自然语言之间的对应关系， 将机器语言形式的推理结果解析为 对应的自然语言形式的推理结果； 在社交网络上发布所述自然语言形式的推 理结果。

为使本发明的目的、 技术方案和优点更加清楚， 以下结合附图及具体实 施例， 对本发明作进一步地详细说明。 根据本发明的实施例， 提供了一种基于社交网络的混合语言交互处理 系 统。

参考图 1 , 该混合语言交互处理系统 100与社交网络 200和物联网终端 设备 300连接。 所述社交网络 200 (例如微博） ， 是一个基于用户关系的信 息分享、传播以及获取平台； 所述物联网终端设备是指各类物联网终端设备 ， 如网关、 智能终端、 传感器、 控制器等能够接入互联网并进行社会化交互的 设备。 社交网络能够支持不同属性的实体， 也就是说， 所述社交网络的注册 用户不再仅仅是 "人" ， 而可以是各类可以连接到互联网的物联网终端 设备， 各类注册用户发布的消息内容不仅可以包括自 然语言， 还可以包括自然语言 对应的机器语言或者对应的机器语言链接。

所述自然语言， 即用于人类交流的语言， 是指文字、 图像、 视频等普通 人可理解、 使用的语言， 在本文中以中文为例进行说明。 而机器语言， 是指 面向功能模块、 终端设备的， 机器可处理、 可理解的语言类型， 包括但不限 于代码、 数据、 字符、 指令等。

如图 1所示， 所述混合语言交互处理系统 100至少包括： 第一终端资源 管理模块 10、 第一情境感知推理模块 20、 第一触发执行模块 30、 第一混合 语言映射解析模块 40、 第一混合交互模块 50。

第一终端资源管理模块 10 ,负责釆集并管理物联网终端设备的原始数据� � 主要包括： 设备标识信息、 设备描述信息、 设备状态信息等。 其中， 设备描 述信息包括： 设备名称、 类型、 型号、 部署位置等信息； 设备状态信息包括 当前运行状态 （如开 /关）等。 第一终端资源管理模块 10对釆集到的原始数 据进行统一标识、 存储、 管理。 在本发明的一个实施例中， 通过建立数据库 (原始数据库） 的方式管理釆集到的原始数据。 此外， 第一终端资源管理模 块 10还负责接收触发执行模块发送的控制指令，� ��根据该控制指令完成对终 端设备的控制。 需要说明， 第一终端资源管理模块 10釆集的数据信息为机器 语言形式。

第一情境建模推理模块 20, 负责从第一终端资源管理模块 10釆集的原 始数据中提取情境数据， 并建立包括情境推理逻辑的情境数据库， 根据所述 情境推理逻辑对釆集的数据信息进行推理分析 ， 得到机器语言形式的数据信 息， 并发送至第一触发执行模块 30。 情境数据库存储情境推理逻辑， 包含针 对普通用户的普适逻辑和针对特定用户的特殊 逻辑。 其中， 情境推理逻辑就 是判断的条件， 情境推理逻辑可以是系统定义或用户自定义的 。 情境推理模 块还负责根据交互过程及用户反馈， 实现情境实时推理和修正。

第一触发执行模块 30接收第一情境建模推理模块 20的数据信息， 然后 根据该数据信息判断启动社交网络混合语言发 送功能， 也就是开启将终端数 据信息发布至社交网络的程序。接着， 第一触发执行模块 30将所述数据信息 发送至第一混合语言映射解析模块 40。

第一混合语言映射解析模块 40, 用于根据预设的机器语言与自然语言之 间 （机器语言 -自然语言）的对应关系， 将机器语言形式的数据信息映射为自 然语言形式的数据信息。 在本发明的一个实施例中， 可以通过建立语料库来 保存自然语言本体， 以支持机器语言与自然语言之间的映射关系。 当第一终 端资源管理模块 10根据釆集的原始数据建立原始数据库后，第� ��混合语言映 射解析模块 40就可以根据原始数据库中的原始数据设置对� ��的自然语言，并 通过建立语料库来保存这些自然语言本体。

第一混合交互模块 50, 用于在社交网络上发布所述自然语言形式的数 据 信息； 或者在社交网络上发布混合语言形式的数据信 息， 所述混合语言就是 包括自然语言和与该自然语言对应的机器语言 /机器语言链接形式的数据信 息。 第一混合交互模块 50提供整个系统与社交网络之间的接口， 系统与社交 网络之间的数据交互都通过第一混合交互模块 50进行。

在只发布自然语言的情况下， 社交网络平台作为自然语言发布平台 （类 似现在仅面向人的微博） ， 接收端实体需要通过发送端实体在微博平台中 的 注册信息及其他寻址方式， 获得发送端实体的网络地址， 直接向发送端实体 发送 "自然语言 -机器语言" 的解析请求， 通过一定的认证过程， 实现实体间 的交互， 获得对应的机器语言。 这种数据交互方式可以称为隐式模式，

在发布混合语言的情况下， 根据本发明的一个实施例， 向社交网络平台 发布自然语言的同时， 还可以将其对应的机器语言进行发布， 社交网络平台 (后台）存储各实体关于 "自然语言 -机器语言" 的对应关系。 接收端实体接 收到发送端发布的自然语言后， 必须向社交网络平台发出解析请求， 通过社 交网络平台将对应的机器语言返回接收端，或 者通过社交网络平台中转请求， 从而实现自然语言的解析。 这种数据交互方式可以称为显示模式， 在显示模 式中， 发送端实体与接收端实体不直接进行数据交互 。

通过上述模块的处理， 混合语言交互处理系统将物联网终端设备的数 据 信息 （自然语言或混合语言）在社交网络上发布， 供其他用户 （人或物的用 户）分享、 获取。

下面举例说明本发明的混合语言交互处理系统 的数据处理过程。 温度传 感器检测到 "环境温度为 35度" 的数据信息， 第一终端资源管理模块釆集到 该机器语言形式的数据信息。 第一情境感知推理模块根据预设的情境推理逻 辑对数据信息进行推理分析， 得出 "温度大于 35度环境过热， 需要开空调" 的推理结果， 并将推理结果提交至第一触发执行模块。 第一触发执行模块接 收到上述推理结果， 判断启动社交网络混合语言发送功能， 并将所述推理结 果发送至第一混合语言映射解析模块。 第一混合语言映射解析模块根据预设 的机器语言与自然语言之间的对应关系， 将机器语言形式的 "温度大于 35度 环境过热， 需要开空调" 的推理结果生成对应的自然语言形式的数据信 息， 例如可以生成 "今天好热啊， 连屋里都成了蒸笼了" 。 接着， 第一混合交互 模块将上述自然语言形式或者是混合语言形式 的数据信息在社交网络上发 布、 分享数据， 供其他用户获取。 在经过上述的数据信息发布后， 本发明的混合语言交互处理系统继续进 行接收数据的处理过程。

根据本发明实施例的混合语言交互处理系统， 还包括：

第二混合交互模块用于通过社交网络获取自然 语言形式的数据信息， 该 自然语言形式的数据信息是以物联网终端设备 的名义（物联网终端在社交网 络的注册信息）在社交网络上发布的数据信息 。 接着， 第二混合交互模块将 该数据信息发送至第二混合语言映射解析模块 。

第二混合语言映射解析模块用于获取与自然语 言形式的数据信息相对应 的机器语言形式的数据信息。 具体地， 根据之前数据发布的方式， 此处的机 器语言数据获取包括两种方式：

( 1 )通过发送端实体在社交网络平台中的注册信� �及其他寻址方式， 获 得发送端实体的网络地址， 直接向发送端实体发送 "自然语言 -机器语言" 的 解析请求， 通过一定的认证过程， 实现实体间的交互， 完成机器语言数据的 获取。

( 2 )通过向社交网络平台发出解析请求， 通过社交网络平台将对应的机 器语言返回接收端， 或者通过社交网络平台中转请求， 从而实现自然语言的 解析， 完成机器语言数据的获取。

第二情境感知推理模块用于根据预设的情境推 理逻辑对数据信息进行推 理分析， 并将得到的推理结果通知第二触发执行模块。 第二触发执行模块用 于根据推理结果生成对于物联网终端的控制指 令， 并发送至第二终端资源管 理模块。 第二终端资源管理模块， 用于根据控制指令对物联网终端设备进行 控制。

在上述处理之后， 还可以将执行控制指令的物联网终端设备的状 态信息 在社交网络上发布， 作为对于之前发布信息的响应， 从而实现了 "物 -物" 或 "人 -物" 之间的互动。 在本发明的一个实施例中， 上述的第一终端资源管理模块与第二终端资 源管理模块、 第一情境感知推理模块与第二情境感知推理模 块、 第一触发执 行模块与第二触发执行模块、 第一混合语言映射解析模块与第二混合语言映 射解析模块、 第一混合交互模块与第二混合交互模块可以合 一设置， 合一设 置后的模块的结构和功能此处不再赘述。

下面以温度传感器为例详细描述本发明系统 的处理流程。 参考图 2 , 是 本发明实施例的数据发布流程， 具体包括：

步骤 S202 , 物联网终端温度传感器检测到室内环境温度大 于 35度， 并 将机器语言表示的相关数据传输给资源管理模 块；

步骤 S204 , 资源管理模块收到消息后将终端数据提交给情 境建模推理模 块进行推理分析；

步骤 S206 , 情境建模推理模块调用情境数据库知识， 推理出温度太热， 需要开空调的结果， 并将机器语言表示的推理结果提交给触发执行 模块； 步骤 S208 , 触发执行模块收到消息后启动混合语言发送程 序， 并将推理 机器语言表示的推理结果提交给混合语言映射 解析模块；

步骤 S210 , 混合语言映射解析模块调用语料库生成自然语 言 "今天好热 啊， 连屋里都成了蒸笼了" ， 并结合机器语言表示的原始数据进一步生成混 合语言表示的发布信息， 并将此消息发送给混合交互模块；

步骤 S212 , 混合交互模块将消息发送到社交网络平台， 此时传感器资源 数据以自然语言形式或者是自然语言和机器语 言混合的形式发布在社交网络 上。

下面继续参考图 3 , 是本发明实施例的数据接收流程， 具体包括： 步骤 S302 , 混合交互模块从社交网络平台接收到消息 "今天好热啊， 连 屋里都成了蒸笼了" ， 这个消息可以通过对方的指定发送（@ ) 实现， 也可 以自己进行周期性消息搜索实现， 例如， 通过自己关注的用户或者好友用户 发布的微博消息等社交关系实现。

步骤 S304， 混合模块将自然语言表示的消息提交给混合语 言映射解析模 块进行解析；

步骤 S306 , 混合语言映射解析模块调用语料库， 将自然语言解析为对应 的机器语言， 并将解析结果提交给情境建模推理模块进行推 理； 步骤 S308, 情境建模推理模块调用情境数据库， 推理出温度大于 35度 导致环境过热， 需要开空调， 并将推理结果提交给触发执行模块；

步骤 S310, 此消息满足触发开空调事件的条件， 因此触发执行模块收到 消息后发送开空调的执行指令至终端资源管理 模块；

步骤 S312, 终端资源管理模块收到执行指令后打开空调； 空调打开后将 自己的状态 （温度， 扫风， 湿度等）反馈给终端资源管理模块。

之后， 执行如步骤 S202-S212的流程， 此处不赘述。

通过上述处理，融合了计算机人机交互技术和 社交网络社会化交互思想， 通过微博发布平台及微博 API对各类物联网终端设备数据和状态进行开放 ， 并借助微博关注、 评论、 转发等功能实现 "人 -物" 、 "物 -物" 的自然语言交 互。

根据本发明实施例，还提供了一种用于物联 网的混合语言交互处理方法， 参考图 4, 至少包括以下步骤：

步骤 S402, 釆集物联网终端设备的机器语言形式的数据信 息；

步骤 S404, 根据预设的情境推理逻辑对所述数据信息进行 推理分析， 得 到机器语言形式的推理结果；

步骤 S406, 启动社交网络混合语言发送功能， 根据预设的机器语言与自 然语言之间的对应关系， 将机器语言形式的推理结果解析为对应的自然 语言 形式的推理结果；

步骤 S408, 在社交网络上发布所述自然语言形式的推理结 果。

此外， 同时在社交网络上发布与所述自然语言形式的 数据信息相对应的 机器语言形式的数据信息。

参考图 5 , 在步骤 S408之后， 本发明的方法还包括：

步骤 S512, 通过社交网络接收自然语言形式的数据信息；

步骤 S514, 获取与自然语言形式的数据信息相对应的机器 语言形式的数 据信息。 根据数据发布形式的不同， 此处可以分为显示模式和隐式模式两种 方式， 具体请参见本文之前的描述， 此处不再赘述。

步骤 S516, 根据预设的情境推理逻辑对数据信息进行推理 分析， 得到推 理结果；

步骤 S518, 根据推理结果生成对于物联网终端的控制指令 ， 并根据控制 指令对物联网终端进行控制。

综上所述， 根据本发明的上述实施例， 混合语言交互处理系统构建自然 语言与机器语言的映射 /解析， 结合情境信息将物联网终端设备的数据信息

(自然语言或混合语言形式）在社交网络上� �布， 实现社交网络信息的解析 和反应， 从而完成不同属性实体间的社会化消息交互及 控制， 实现了一种新 型的 "人 -物" ， "物 -物" 共存的社交网络。

以上所述仅为本发明的实施例而已， 并不用于限制本发明， 对于本领域 的技术人员来说， 本发明可以有各种更改和变化。 凡在本发明的精神和原则 之内， 所作的任何修改、 等同替换、 改进等， 均应包含在本发明的权利要求 范围之内。

10

P1310092CN-PCT-BUPT