備忘錄事件提醒方法及系統技術方案

本發明專利技術公開了一種備忘錄事件提醒方法及終端，其中，所述方法包括如下步驟：接收來自用戶的多模態輸入信息，所述多模態輸入信息至少包括語音數據；解析所述多模態輸入信息，提取語義信息；生成與所述語義信息對應的文本信息，對所述文本信息進行語義理解，并基于語義理解后的結果確定用戶意圖；針對用戶意圖所指示的備忘查詢目的，從備忘錄數據庫查找匹配的目標備忘事件信息；將所述目標備忘事件信息以多模態方式向所述用戶輸出。本發明專利技術能夠對用戶的目標備忘事件進行多模態查詢搜索，提高了系統的智能性，改善了用戶體驗。

【技術實現步驟摘要】
備忘錄事件提醒方法及系統
本專利技術涉及通信領域，尤其涉及一種備忘錄事件提醒方法及系統。
技術介紹
隨著現代社會生活和工作節奏的變快，現代人的日程安排就顯得非常緊張，有時候甚至因為太忙，把該做的事情給忘掉了，于是出現了備忘錄系統來提醒人們需要處理的事情。現有的備忘錄系統一般都只能以日期、時間作為判別依據，即當到達使用者預先設定之日、設定時間時提醒人們辦理相關事項。但是，現有技術在形式上比較單一，無法實現備忘事件的搜索，智能性差，給用戶帶來了不好的體驗。
技術實現思路
本專利技術所要解決的技術問題之一是需要提供一種能夠對用戶的目標備忘事件進行多模態查詢搜索的技術方案。為了解決上述技術問題，本申請的實施例首先提供了一種備忘錄事件提醒方法，該方法包括如下步驟：接收來自用戶的多模態輸入信息，所述多模態輸入信息至少包括語音數據；解析所述多模態輸入信息，提取語義信息；生成與所述語義信息對應的文本信息，對所述文本信息進行語義理解，并基于語義理解后的結果確定用戶意圖；針對用戶意圖所指示的備忘查詢目的，從備忘錄數據庫查找匹配的目標備忘事件信息；將所述目標備忘事件信息以多模態方式向所述用戶輸出。優選地，在從備忘錄數據庫查找匹配的目標備忘事件信息的步驟中，包括：以語義理解的切詞結果中的至少一個關鍵詞為索引從備忘錄數據庫中查找目標備忘事件信息。優選地，該方法還包括：若語義理解的切詞結果中包括事件提醒的時間信息，則抽取與所述時間信息對應的備忘事件進行輸出。優選地，所述關鍵詞為名詞詞匯與疑問詞的組合，或者，為名詞詞匯、動詞詞匯與疑問詞的組合。優選地，在解析所述多模態輸入信息的步驟中，包括：解析獲取的視覺采集數據，得到環境識別信息、人物肢體信息和/或人臉信息。優選地，還包括：根據所識別的環境識別信息、人物肢體信息和/或人臉信息，則主動推送與上述信息所匹配的備忘事件信息另外，本專利技術實施例還提供了一種備忘錄事件提醒系統，所述系統包括：多模態信息接收單元，其接收來自用戶的多模態輸入信息，所述多模態輸入信息至少包括語音數據；多模態信息解析單元，其解析所述多模態輸入信息，提取語義信息；用戶意圖確認單元，其生成與所述語義信息對應的文本信息，對所述文本信息進行語義理解，并基于語義理解后的結果確定用戶意圖；目標備忘事件查找單元，其針對用戶意圖所指示的備忘查詢目的，從備忘錄數據庫查找匹配的目標備忘事件信息；多模態信息發送單元，其將所述目標備忘事件信息以多模態方式向所述用戶輸出。優選地，所述目標備忘事件查找單元，其進一步以語義理解的切詞結果中的至少一個關鍵詞為索引從備忘錄數據庫中查找目標備忘事件信息，所述關鍵詞為名詞詞匯與疑問詞的組合，或者，為名詞詞匯、動詞詞匯與疑問詞的組合。優選地，所述目標備忘事件查找單元，其在語義理解的切詞結果中包括事件提醒的時間信息時，抽取與所述時間信息對應的備忘事件進行輸出。優選地，所述多模態信息解析單元，其進一步解析獲取的視覺采集數據，得到環境識別信息、人物肢體信息和/或人臉信息；所述目標備忘事件查找單元根據所識別的環境識別信息、人物肢體信息和/或人臉信息，則主動推送與上述信息所匹配的備忘事件信息。與現有技術相比，上述方案中的一個或多個實施例可以具有如下優點或有益效果：本專利技術實施例的備忘錄事件提醒方法，通過對用戶發出的多模態輸入信息進行解析、生成與之對應的文本信息，然后對文本信息進行語義理解確定用戶意圖，并以與該用戶意圖對應的關鍵詞搜索備忘錄數據庫，從而實現查找匹配的目標備忘事件信息的功能。本專利技術實施例能夠對用戶的目標備忘事件進行多模態查詢搜索，提高了系統的智能性，改善了用戶體驗。本專利技術的其它特征和優點將在隨后的說明書中闡述，并且，部分地從說明書中變得顯而易見，或者通過實施本專利技術的技術方案而了解。本專利技術的目的和其他優點可通過在說明書、權利要求書以及附圖中所特別指出的結構和/或流程來實現和獲得。附圖說明附圖用來提供對本申請的技術方案或現有技術的進一步理解，并且構成說明書的一部分。其中，表達本申請實施例的附圖與本申請的實施例一起用于解釋本申請的技術方案，但并不構成對本申請技術方案的限制。圖1表示本申請實施例的備忘錄事件提醒系統的概略結構圖。圖2表示圖1所示的系統的智能機器人1一側的處理步驟。圖3表示圖1所示的系統的云端服務器2一側進行備忘錄事件提醒的示例一的流程示意圖。圖4表示圖1所示的系統的云端服務器2一側進行備忘錄事件提醒的示例二的流程示意圖。圖5表示圖1所示的系統的云端服務器2一側進行備忘錄事件提醒的示例三的流程示意圖。具體實施方式以下將結合附圖及實施例來詳細說明本專利技術的實施方式，借此對本專利技術如何應用技術手段來解決技術問題，并達成相應技術效果的實現過程能充分理解并據以實施。本申請實施例以及實施例中的各個特征，在不相沖突前提下可以相互結合，所形成的技術方案均在本專利技術的保護范圍之內。下面一邊參照圖1，一邊對本專利技術的備忘錄事件提醒系統的實施例進行說明。作為備忘錄事件提醒系統的一個例子，可以為個人事務助理終端，也可以是安裝了機器人操作系統的智能機器人，該機器人具備多模態數據交互功能。以下，以實現多模態交互及語義理解的機器人為例，來說明本專利技術的備忘錄事件提醒系統。該備忘錄事件提醒系統適用于多種平臺，以及，人形機器人的應用及功能支持。另外，備忘錄事件提醒系統可為機器人的應用，所述應用可搭載于機器人操作系統中，或為機器人某種模式下所實現的功能。如圖1所示，該備忘錄事件提醒系統包括智能機器人1和云端服務器2。此處云端服務器2作為機器人1的云端大腦，使得機器人能夠無限制地使用云平臺的幾乎任何資源，而不用考慮計算能力、存儲能力、帶寬、可靠性和安全性等問題，盡可能改善機器人的數據處理負擔，提高運算速度，當然，將該云端服務器2的大部分功能轉嫁到該機器人內部也是可行的。本例的智能機器人1包括多模態信息接收單元11、控制器10和備忘事件展示單元。多模態信息接收單元11，其接收來自用戶的多模態輸入信息，所述多模態輸入信息至少包括語音數據；控制器10，其主要對多模態輸入信息進行處理和解析提取語義信息；備忘事件展示單元，其對來自云端服務器2的經模式轉換后的目標備忘事件信息進行多模態展示。下面具體來說明該智能機器人1的各個部件的組成和功能。再次參考圖1，如圖1所示，多模態信息接收單元11包括攝像機111、麥克風112和文本輸入設備113等，另外還可以包括其他的信息輸入設備，如掃描儀。攝像機111例如為將電荷耦合元件CCD(Charge-coupledDevice)傳感器或者互補金屬氧化物半導體(CMOS)傳感器用作攝像元件的結構。如此，攝像機111可以對于被攝體即用戶表情、動作、所處環境等進行拍攝。另外，攝像機111不局限于視頻攝像機，也可以是拍攝靜止圖像的裝置。麥克風112為音頻輸入設備中的一種，可以為動圈式麥克風、MEMS麥克風和駐極體電容麥克風。其中，駐極體電容麥克風尺寸小、功耗低、價格低廉而且性能不錯，因此采用這類麥克風作為該終端的聲音傳感器。文本輸入設備113用來供用戶輸入文本信息，該文本輸入設備113可以為鍵盤、觸控屏等設備。優選地，上述這些設備與控制器10通過串行通信接口連接，將目標物理特征轉換成電信號通過該串行通信接口傳輸至控制器10中。本文檔來自技高網...

【技術保護點】
一種備忘錄事件提醒方法，該方法包括如下步驟：接收來自用戶的多模態輸入信息，所述多模態輸入信息至少包括語音數據；解析所述多模態輸入信息，提取語義信息；生成與所述語義信息對應的文本信息，對所述文本信息進行語義理解，并基于語義理解后的結果確定用戶意圖；針對用戶意圖所指示的備忘查詢目的，從備忘錄數據庫查找匹配的目標備忘事件信息；將所述目標備忘事件信息以多模態方式向所述用戶輸出。

【技術特征摘要】
1.一種備忘錄事件提醒方法，該方法包括如下步驟：接收來自用戶的多模態輸入信息，所述多模態輸入信息至少包括語音數據；解析所述多模態輸入信息，提取語義信息；生成與所述語義信息對應的文本信息，對所述文本信息進行語義理解，并基于語義理解后的結果確定用戶意圖；針對用戶意圖所指示的備忘查詢目的，從備忘錄數據庫查找匹配的目標備忘事件信息；將所述目標備忘事件信息以多模態方式向所述用戶輸出。2.根據權利要求1所述的方法，其特征在于，在從備忘錄數據庫查找匹配的目標備忘事件信息的步驟中，包括：以語義理解的切詞結果中的至少一個關鍵詞為索引從備忘錄數據庫中查找目標備忘事件信息。3.根據權利要求1所述的方法，其特征在于，該方法還包括：若語義理解的切詞結果中包括事件提醒的時間信息，則抽取與所述時間信息對應的備忘事件進行輸出。4.根據權利要求2所述的方法，其特征在于，所述關鍵詞為名詞詞匯與疑問詞的組合，或者，為名詞詞匯、動詞詞匯與疑問詞的組合。5.根據權利要求1所述的方法，其特征在于，在解析所述多模態輸入信息的步驟中，包括：解析獲取的視覺采集數據，得到環境識別信息、人物肢體信息和/或人臉信息。6.根據權利要求5所述的方法，其特征在于，還包括：根據所識別的環境識別信息、人物肢體信息和/或人臉信息，主動推送與上述信息所匹配的備忘事件信息。7.一種備忘錄事...

【專利技術屬性】
技術研發人員：安祺，
申請(專利權)人：北京光年無限科技有限公司，
類型：發明
國別省市：北京,11