TWI602174B

TWI602174B - 基於聲音辨識的情緒紀錄與管理裝置、系統以及方法

Info

Publication number: TWI602174B
Application number: TW105143348A
Authority: TW
Inventors: 李景峰
Original assignee: 李景峰
Priority date: 2016-12-27
Filing date: 2016-12-27
Publication date: 2017-10-11
Also published as: TW201824254A

Description

基於聲音辨識的情緒紀錄與管理裝置、系統以及方法

本發明涉及一種情緒紀錄與管理裝置、系統以及方法，特別是涉及一種基於聲音辨識的情緒紀錄與管理裝置、系統以及方法。

美國史丹福大學對企業家做了調查，發現使企業家能成功的因素中，靠專業能力成功的因素只佔12%，其餘的因素都是靠人脈；另外英國也用電話連絡的種類，對富人區與窮人區作了分析，結果發現：富人區的連絡電話種類遠高於窮人區，表示富人之所以能成為富有跟人脈的多樣化有關。由以上說明可知，現代化的社會中，人際間的互動關係深刻的影響著我們的生活品質與成就。

另外，身處在現代社會的各種壓力之下，如何處理與他人之間互動的情緒，不僅緊密地連結著人際關係建立的好壞，也影響著人們的心理與身體健康。在人與人的互動過程中，我們總會希望能夠有愉快的相處經驗，為自己與互動對象都留下美好的經驗，但是，目前卻沒有有效進行記錄與管理的工具。此外，現代人際關係越來越複雜化，同一個人必須與各種各樣的人互動，如活妥善分配時間不要偏廢，也是一個十分困難的問題。同樣地，目前仍缺乏有效且好用的協助工具。

故，如何設計一個情緒紀錄與管理裝置、建立一套情緒紀錄與管理系統以及/或發展出一種情緒紀錄與管理方法，以協助現代忙碌的，已成為今日人際管理甚至身心健康管理等相關產業所欲解決的重要課題之一。

本發明所要解決的技術問題在於，針對現有技術的不足提供一種基於聲音辨識的情緒紀錄與管理裝置、系統以及方法。

為了解決上述的技術問題，本發明所採用的其中一技術方案是，提供一種基於聲音辨識的情緒紀錄與管理裝置，其包括一偵測模組、一處理單元、一儲存單元以及一計時單元，所述偵測模組包括一用於接收一聲音的音訊接收單元，其中，所述音訊接收單元根據所接收到的所述聲音以產生一聲音資訊，且所述偵測模組根據所接收到的偵測結果以產生包括所述聲音資訊的一偵測訊號；所述處理單元與所述偵測模組訊號連接，以接收所述偵測訊號；所述儲存單元與所述處理單元訊號連接，其中，所述儲存單元儲存有多個判別條件、多個聲紋特徵以及多個類別，每一個所述類別分別儲存有一對象資料，且每一個所述聲紋特徵分別對應於一個所述對象資料；所述計時單元與所述處理單元訊號連接；其中，所述處理單元通過接收所述偵測訊號以讀取儲存於所述儲存單元中的多個所述判別條件，且所述處理單元根據至少一所述判別條件以判別所述偵測訊號是否對應於一情緒反應特徵；其中，所述處理單元通過接收所述偵測訊號以讀取儲存於所述儲存單元中的多個所述聲紋特徵，且所述處理單元根據所述偵測模組所接收的所述聲音資訊執行一聲紋比對功能，以判斷對應於所述聲音資訊的一對象資料以及判斷所述對象資料所屬的一類別；其中，所述計時單元通過所述處理單元的驅動，以根據所述偵測模組所獲取的所述偵測訊號以及所述聲音資訊來獲取一互動時間，且所述互動時間被記錄於對應所述聲音資訊的所述對象資料中。

如此，當使用者與他人溝通而感到愉悅時，所述裝置通過所述偵測訊號判斷使用者的情緒反應特徵是快樂的，就會主動記錄使用者與所述他人的互動時間，且通過所述聲紋特徵，可以精確地判別並紀錄不同的互動對象，因此，使用者可以很清楚地了解到與那些人互動是能夠令自己感到愉悅的。此外，通過將互動對象分類，使用者也可以充分了解自己與不同類的對象互動的時間分配，以便反省與調整自己人際互動上的時間規劃。

較佳地，所述偵測模組還進一步包括一用於擷取一個體生理參數的生理參數偵測單元，所述生理參數偵測單元根據所擷取的所述個體生理參數以產生所述偵測訊號中的一生理參數偵測資訊，且所述處理單元根據至少一所述判別條件以判別所述生理參數偵測資訊是否對應於所述情緒反應特徵。

如此，通過所述生理參數偵測單元偵測各種不同的生理參數，使所述裝置在判斷使用者的所述情緒反應特徵時，不僅能夠在判別條件的設定上有更多樣化的彈性，已適配每一個個體的生理反應差異，也能夠有效地增進判斷結果的準確性。

較佳地，所述裝置，還進一步包括一顯示單元，所述顯示單元與所述處理單元訊號連接，以接收所述處理單元所發送的一顯示訊號，且所述顯示單元根據所述顯示訊號顯示至少一顯示畫面。

如此，使用者可以通過所述裝置的所述顯示單元便利地檢視紀錄於所述裝置的資訊。

較佳地，其中，至少一所述顯示畫面還進一步包括一類別選單，所述類別選單包括多個類別選項，每一個所述類別選項分別對應於一個所述類別，所述各類別選項的顯示方式具備至少兩個類別特徵，且每一個所述類別特徵至少包括兩個特徵狀態顯示方式。

如此，通過所述類別選單，使用者可以清楚地看到針對互動對象的各種分類，且根據各種類別的類別特徵，以不同的特徵狀態顯示方式呈現畫面，有助於使用者以視覺化的方式了解和不同對象互動，可能帶來的正面或負面效果，進而能做為調整自己與不同對象間的互動時間的重要參考指標。

較佳地，所述特徵狀態顯示方式至少包括一單向箭頭圖標以及一雙向箭頭圖標、一實線圖標以及一虛線圖標及/或一第一色彩圖標以及一第二色彩圖標。

如此，通過所述單向箭頭圖標以及所述雙向箭頭圖標的顯示方式，使用者可以輕易地了解到某些愉悅的感受是因為使用者與對應類別的對象間發生互動(雙向箭頭圖標)而產生的，而某些愉悅的感受則僅僅是使用者自身情感的寄託(單向箭頭圖標)，例如繪畫、音樂或閱讀等其他嗜好；又，通過所述實線圖標以及所述虛線圖標的顯示方式，使用者可以了解到，某些互動對象一般是會較深入交心的對象(實線圖標)，而某些對象間的互動則通常較為表面、淺層(虛線圖標)；另外，通過所述第一色彩圖標以及所述第二色彩圖標甚至地色彩圖標的顯示方式，使用者可以判斷某些對象間的互動原則上是有益而無害的，但有些對象間的互動雖然可以帶來愉悅的感受，卻有可能潛藏負面的效果，據此，使用者可以適度的調整自己與不同對象間的互動時間，以充分掌握自己的生活主控權。

較佳地，其中，至少一所述顯示畫面還進一步包括一統計結果顯示畫面，所述統計結果顯示畫面的畫面配置方式對應於所述類別選單，且所述統計結果顯示畫面根據每一個所述類別中所述對象資料的所述互動時間的總值，以顯示對應於每一個所述類別的一統計結果。

如此，使用者可以通過所述統計結果顯示畫面輕易地了解，自己與不同類別對象互動的時間分配比重，且通過此等視覺化的統計畫面呈現，也能使相關資訊的呈現更一目了然，非常清楚明確。

較佳地，所述的裝置，還包括一輸入單元，所述輸入單元與所述處理單元訊號連接，且所述輸入單元根據一輸入操作以發送相對應的一預定指令給所述處理單元；其中，當所述預定指令為一判別條件設定指令時，所述處理單元根據所述判別條件設定指令，以將所述偵測模組所接收的至少一偵測訊號新增為一判別條件；其中，當所述預定指令為一對象資料新增指令時，所述處理單元根據所述對象資料新增指令，以在所述類別中新增一對象資料；其中，當所述預定指令為一類別變更指令時，所述處理單元驅動所述顯示單元顯示所述類別選單；其中，當所述預定指令為一類別選擇指令時，所述處理單元將所述對象資料自原先所屬的所述類別移動至對應於所述類別選擇指令的另一所述類別中；以及，當所述預定指令為一統計結果顯示指令時，所述處理單元驅動所述顯示單元顯示所述統計結果顯示畫面。

如此，當使用者要通過手動設定的方式，執行新增判別條件、新增對象資料或變更對象資料的所屬類別等設定操作時，便能夠通過所述輸入單元輸入對應的預定指令，大幅提升所述裝置在使用上的方便性與靈活度。

為了解決上述的技術問題，本發明所採用的另外一技術方案是，提供一種基於聲音辨識的情緒紀錄與管理系統，包括一偵測端以及一輸入輸出終端，所述偵測端包括一用於接收一聲音的音訊接收單元，其中，所述音訊接收單元根據所接收到的所述聲音以產生一聲音資訊，且所述偵測端根據所接收到的偵測結果以產生包括所述聲音資訊的一偵測訊號；所述輸入輸出終端與所述偵測端訊號連接，以接收所述偵測訊號，所述輸入輸出終端儲存有多個判別條件、多個聲紋特徵以及多個類別，每一個所述類別分別儲存有一對象資料，且每一個所述聲紋特徵分別對應於一個所述對象資料；其中，所述輸入輸出終端通過接收所述偵測訊號以根據至少一所述判別條件判別所述偵測訊號是否對應於一情緒反應特徵；其中，所述輸入輸出終端通過接收所述偵測訊號的一聲音資訊以執行一聲紋比對功能，以判斷對應於所述聲音資訊的一對象資料以及判斷所述對象資料所屬的一類別；其中，所述輸入輸出終端根據所述偵測端所獲取的所述偵測訊號以及所述聲音資訊來獲取一互動時間，且所述互動時間被記錄於對應所述聲音資訊的所述對象資料中。

如此，當使用者與他人溝通而感到愉悅時，所述系統通過所述偵測端偵測使用者的聲音等資訊，且向所述輸入輸出終端發送所述偵測訊號，便能夠在所述輸入輸出終端判斷使用者的情緒反應特徵是快樂的時候，使得所述輸入輸出終端主動記錄使用者與所述他人的互動時間，且通過所述聲紋特徵，可以精確地判別並紀錄不同的互動對象，因此，使用者可以很清楚地了解到與那些人互動是能夠令自己感到愉悅的。此外，通過將互動對象分類，使用者也可以充分了解自己與不同類的對象互動的時間分配，以便反省與調整自己人際互動上的時間規劃。

較佳地，所述偵測端還進一步包括一用以擷取一個體生理參數的生理參數偵測單元，所述生理參數偵測單元根據所擷取的所述個體生理參數以產生所述偵測訊號中的一生理參數偵測資訊，且所述輸入輸出終端根據至少一所述判別條件以判別所述生理參數偵測資訊是否對應於所述情緒反應特徵。

如此，通過所述生理參數偵測單元偵測各種不同的生理參數，使所述系統在判斷使用者的所述情緒反應特徵時，不僅能夠在判別條件的設定上有更多樣化的彈性，已適配每一個個體的生理反應差異，也能夠有效地增進判斷結果的準確性。

較佳地，所述輸入輸出終端還進一步包括一輸出單元，所述輸出單元根據每一個所述類別中所述對象資料的所述互動時間的總值，以輸出對應於每一個所述類別的一統計結果。

如此，使用者不儘可以通過所述輸入輸出終端的所述輸出單元便利地檢視所述統計結果，甚至在某些實施方式中，使用者也可以將統計結果輸出成紙本的表單，以提供給專業的人員(如心理醫師或社工師等等)參考，以便能聽取專業人員經過分析後所提出的建議。

較佳地，所述的系統，還進一步包括一伺服器端，所述伺服器端與所述輸入輸出終端訊號連接；其中，所述伺服器端接收所述輸入輸出終端根據紀錄的所述互動時間所發送的一紀錄資訊；其中，所述伺服器端根據所接收的所述紀錄資訊向所述輸入輸出終端發送一建議資訊。

如此，不僅可以將所述輸入輸出終端的所述紀錄資訊發送至所述伺服器端，以儲存於所述伺服器端，甚至在所述伺服器端進行較複雜的運算分析，再由所述伺服器端根據運算分析的結果向所述輸入輸出終端發送所述建議資訊，以令使用者能夠參考所述建議資訊，更進一步，所述伺服器端也可以向所述輸入輸出終端提供韌體或軟體更新等服務，或者，倘若所述伺服器端尚提供一個放置電子書的平台，使用者也可以隨時通過所述輸入輸出終端連接所述伺服器端，進而隨時獲取所述伺服器端所提供的及時新知資訊，進而能在新的人際或情緒管理理論被研究出來時，能夠參考最先進的理論，調整自己的生活步調與方式，而達到最完滿的人生。

為了解決上述的技術問題，本發明所採用的另外再一技術方案是，提供一種基於聲音辨識的情緒紀錄與管理方法，包括下列步驟：從一偵測模組接收一偵測訊號以根據至少一判別條件以判別所述偵測訊號是否對應於一情緒反應特徵；當所述偵測訊號對應於任一所述情緒反應特徵的狀態下，根據所述偵測模組所接收的一聲音資訊執行一聲紋比對功能，且根據一聲紋特徵判斷對應於所述聲音資訊的一對象資料以及判斷所述對象資料所屬的一類別；以及根據所述偵測模組所獲取的所述偵測訊號以及所述聲音資訊來獲取一互動時間，且所述互動時間被記錄於對應所述聲音資訊的所述對象資料中。

如此，通過所述方法，可以在使用者與他人溝通而感到愉悅時，通過偵測使用者的聲音等資訊，主動記錄使用者與所述他人的互動時間，並且精確地判別與紀錄不同的互動對象，以令使用者可以很清楚地了解到與那些人互動是能夠令自己感到愉悅的。此外，通過將互動對象分類，使用者也可以充分了解自己與不同類的對象互動的時間分配，以便反省與調整自己人際互動上的時間規劃。

較佳地，所述的方法，還進一步包括根據一判別條件設定指令，將所述偵測模組所接收的至少一所述偵測訊號，新增為所述判別條件。

如此，有鑑於每一個個體在感受到愉悅情緒時的生理反應可能不盡相同，彼此間可能有個體差異，假如使用者自認為心情愉悅，但並未被預設的判別條件判斷為符合愉悅的情緒反應特徵，則使用者可以通過新增判別條件的方式，將當下自己的聲音語調或生理參數等數值，紀錄為新的判別條件，以使得判定的結果能夠更符合每一個使用者的實際情況，而能夠在長期使用後使得判別結果越來越精準。

較佳地，當所述偵測訊號所包含的聲音資訊不具有聲紋特徵時，還進一步包括顯示一分類提示訊息；根據一類別選擇指令，以開啟對應所述類別的一對象資料選單；根據一對象資料選擇指令選擇所述類別中的所述對象資料之一；根據一對象資料新增指令，在所述類別中新增另一對象資料；以及根據所述偵測模組所獲取的所述偵測訊號獲取一互動時間，並將所述互動時間記錄於對應所述對象資料選擇指令的所述對象資料中，或者將所述互動時間記錄於對應所述對象資料新增指令的所述對象資料中。

如此，當使用者因為繪畫、閱讀或其他任何個人嗜好而感到心情愉悅，因此沒有記錄到使用者與他人交談的聲音時，仍然可以有效地記錄下使用者從事這些活動的時間，然而，由於沒有聲音供判別所從事的活動，因此需藉由選單呈現的方式，以將從事活動的時間準確地記錄到對應的類別中。其中，倘若是已經記錄過的活動類型，使用者可以通過所述對象資料選擇指令直接選擇既存的所述對象資料；反之，若是首次接觸的一活動，則使用者可以通過所述對象資料新增指令，新增對應於所述活動的另一對象資料。通過這些紀錄過程，使用者不但可以得知自己在從事那些活動時會感受到快樂的情緒，甚至可以在長期的追蹤下，了解自己嗜好的變化，進而成為一種人生歷程的特別紀錄。

較佳地，當所述偵測模組接收到的所述聲音資訊並未對應於已儲存的任一所述對象資料時，還進一步包括顯示一新增對象提示訊息；根據一對象資料新增指令，新增一對象資料；顯示一分類提示訊息；以及根據一類別選擇指令，將所述對象資料儲存至對應於所述類別選擇指令的所述類別中，並將所述互動時間記錄於所述對象資料中。

如此，每當使用者與不同的對象(尤其指原先未被記錄的對象)互動時，本發明的方法就會自動提醒使用者新增對象資料，因此，在長期使用後互動對象資料會越來越豐富，而能夠忠實地反映出使用者人生中真實的人際互動關係。

較佳地，在判斷所述對象資料所屬的所述類別後，還進一步包括顯示一分類結果提示訊息；在接收到一類別變更指令的狀態下，顯示一類別選單；以及根據一類別選擇指令，將所述對象資料自原先所屬的所述類別，移動至對應於所述類別選擇指令的另一所述類別中。

如此，不僅可以讓使用者確認互動對象被自動歸類的類別，若使用者與互動對象間的關係發生變化時，使用者也可以通過所述類別變更指令，將原先被歸類到一類別的對象資料，移動到另一類別下，以即時且忠實地反應兩者間的實際互動關係。

較佳地，在顯示所述分類結果提示訊息後，還進一步包括在超過一預定時間而未接收到任何指令時，停止顯示所述分類結果提示訊息。

如此，倘若使用者認為自動歸的類別沒有需要變更，而沒有執行任何進一步的操作，表示原本歸類的類別是妥適的，因此，在經過一預定時間後，便停止顯示所述分類結果提示訊息，除了能節省執行功能所需的運算資源外，也可以避免不經意的誤觸導致錯誤操作。

本發明的有益效果在於，本發明所提供的基於聲音辨識的情緒紀錄與管理裝置、系統以及方法，其能夠有效地協助使用者紀錄並管理與他人互動下所產生的情緒反應，以及使用者個人從事嗜好休閒活動時產生的愉悅情緒，進而能夠在充分了解自己與不同對象互動下的情緒反應的前提下，調整與不同對象互動的時間。舉例而言，當使用者與兩個不同對象互動的時間相衝突時，要決定如何分配自己的時間，則可通過本發明所提供的解決方案，輔助進行決策；又因為通過本發明所提供的方案進行決策後，能夠適當地在不同對象的互動間取得最佳的平衡，因此，可以有效地改善人際關係，不僅不容易得罪人，也可以使做人處事更得心應手；再者，能夠充分掌握自己的情緒後，就不容易被預料之外的情緒起伏所影響，因此有助於消除自我的偏執，而能夠避免不必要的煩惱；此外，通過長期記錄與不同對象間的互動情緒，也有助於知人、識人，而能夠判斷出值得信任交往的對象。綜合以上可知，本發明的效果能夠有效改善使用者的生活步調與人際關係，真正成為自己人生的主人。

為使能更進一步瞭解本發明的特徵及技術內容，請參閱以下有關本發明的詳細說明與附圖，然而所提供的附圖僅用於提供參考與說明，並非用來對本發明加以限制。

D‧‧‧裝置

11‧‧‧偵測模組

111‧‧‧音訊接收單元

112‧‧‧生理參數偵測單元

12‧‧‧處理單元

13‧‧‧儲存單元

A‧‧‧判別條件資料庫

A1‧‧‧判別條件

B‧‧‧聲紋資料庫

B1‧‧‧聲紋特徵

C‧‧‧對象分類資料庫

C1‧‧‧第一類別

C2‧‧‧第二類別

C3‧‧‧第三類別

C4‧‧‧第四類別

C5‧‧‧第五類別

C6‧‧‧第六類別

C7‧‧‧第七類別

C8‧‧‧第八類別

O‧‧‧對象資料

14‧‧‧計時單元

15‧‧‧顯示單元

16‧‧‧輸入單元

151A、151C‧‧‧提示分類訊息

151B‧‧‧提示新增對象訊息

151D‧‧‧分類結果

151E‧‧‧類別選單

X1~X8‧‧‧類別選項

151F‧‧‧統計結果顯示畫面

Y1~Y8‧‧‧類別

S‧‧‧系統

T1‧‧‧偵測端

T11‧‧‧音訊接收單元

T12‧‧‧生理參數偵測單元

T2‧‧‧輸入輸出終端

T21‧‧‧輸入單元

T22‧‧‧輸出單元

T3‧‧‧伺服器端

W‧‧‧網際網路

圖1為本發明第一實施例的裝置中各元件間的功能方塊圖。

圖2為使用者操作本發明第一實施例的裝置的使用狀態示意圖。

圖3為本發明第一實施例的方法流程圖。

圖4為本發明第一實施例的通過顯示畫面顯示一提示分類訊息的顯示畫面示意圖。

圖5為本發明第一實施例的通過顯示畫面顯示一提示新增對象訊息的顯示畫面示意圖。

圖6為本發明第一實施例的通過顯示畫面顯示另一提示分類訊息的顯示畫面示意圖。

圖7為本發明第一實施例的通過顯示畫面顯示一分類結果的顯示畫面示意圖。

圖8為本發明第一實施例的顯示畫面顯示一類別選單的畫面示意圖。

圖9為本發明第一實施例的顯示畫面顯示一統計結果顯示畫面的畫面示意圖。

圖10為本發明第二實施例的系統功能方塊圖。

以下是通過特定的具體實施例來說明本發明所公開有關“基於聲音辨識的情緒紀錄與管理裝置、系統以及方法”的實施方式，本領域技術人員可由本說明書所公開的內容瞭解本發明的優點與效果。本發明可通過其他不同的具體實施例加以施行或應用，本說明書中的各項細節也可基於不同觀點與應用，在不悖離本發明的精神下進行各種修飾與變更。另外，本發明的附圖僅為簡單示意說明，並非依實際尺寸的描繪，予以聲明。以下的實施方式將進一步詳細說明本發明的相關技術內容，但所公開的內容並非用以限制本發明的保護範圍。

[第一實施例]

請參閱圖1以及圖2所示，圖1為本發明第一實施例的裝置中各元件間的功能方塊圖。圖2為使用者操作本發明第一實施例的裝置的使用狀態示意圖。本發明第一實施例提供一種基於聲音辨識的情緒紀錄與管理裝置D，在此第一實施例中，裝置D是一手錶型的穿戴裝置(如時下的小米手環等)，但本發明並不以此為限，裝置D也可以是眼鏡型的穿戴裝置(如Google眼鏡等)或其他類型的非穿戴裝置，合先敘明。

承上，裝置D包括偵測模組11、處理單元12、儲存單元13以及計時單元14。偵測模組11主要是用來偵測、擷取使用者與人交談時的談話聲，以及使用者的個體生理參數。在此一較佳實施例中，偵測模組11包括音訊接收單元111以及生理參數偵測單元112，音訊接收單元111可以根據所接收到的聲音以產生聲音資訊，生理參數偵測單元112則可以根據所擷取的個體生理參數以產生生理參數偵測資訊。舉例來說，當使用者與好友聊天，並感到心情愉悅時，音訊接收單元111會接收使用者以及好友在交談的過程中所發出的聲音，並且根據這些聲音產生聲音資訊；此外，生理參數偵測單元112會記錄使用者的各種個體生理參數，例如脈搏、血壓、皮膚電阻值或腦波等各種參數。更有甚者，由於近年來影像辨識等技術的長足進步，無論是通過人臉辨識來識別對象身分，或者是通過臉部辨識來判別受測者的情緒反應，都已經獲得了十分可靠的結果，因此，在本發明的其他實施方式中，也可以將圖像擷取與臉部辨識功能做為本發明的一種生理參數，並以生理參數偵測單元112進行偵測。偵測模組11根據音訊接收單元111以及生理參數偵測單元112的偵測結果，產生包括聲音資訊以及生理參數偵測資訊的偵測訊號。需特別說明的是，由於已有相關研究指出，通過對聲調的分析，也可以判斷出發出聲音者的情緒狀況，因此，在本發明的其他可能實施方式中，偵測模組11也可以僅包括音訊接收單元111，並根據音訊接收單元111接收聲音以產生的聲音資訊，產生僅包括聲音資訊的偵測訊號，其他相關機制容後詳述。

再請參閱圖1所示，處理單元12與偵測模組11訊號連接，以接收偵測訊號。處理單元12一般來說是裝置D的中央處理器(CPU,central processing unit)，具體而言，也可以是其他能執行運算處理的任何元件。儲存單元13可以是硬碟、記憶體、快閃記憶體甚至各種軟碟片等能夠提供儲存功能的元件，且儲存單元13與處理單元12訊號連接，以使處理單元12能夠讀取儲存於儲存單元13中的資訊。在本發明的第一實施例中，儲存單元13儲存有判別條件資料庫A、聲紋資料庫B以及對象分類資料庫C，但以上所指明的各個資料庫只是為了便於理解本發明的技術，具體實施的時候，以下所描述的各種資訊也可以以其他不同的分類形式被儲存於儲存單元13中，合先敘明。在此第一實施例中，判別條件資料庫A中儲存有多個判別條件A1，舉例而言，可以是脈搏數或血壓值高於某特定數值、皮膚電阻值的改變或者聲音音調以及語速的特徵等，以使處理單元12能根據至少一判別條件A1以判別生理參數偵測資訊是否對應於特定的情緒反應特徵。如同先前所說，在本發明的其他可能實施方式中，偵測模組11可能僅包括音訊接收單元111，此時，所儲存的各種判別條件A1即是各種不同的聲調以及語速等特徵，此時，由於所要取得的是使用裝置D的使用者本人的情緒狀態，因此，需要先辨識出對話中的多個聲音，哪一個聲音來源是使用者本人，再將來自使用者本人的聲音與判別條件A1進行比對。判斷聲音來源的相關機制在下一段落說明。

承前所述，聲紋資料庫B中儲存有多個聲紋特徵B1，在此第一實施例中，對象分類資料庫C則儲存有第一類別C1、第二類別C2、第三類別C3、第四類別C4、第五類別C5、第六類別C6、第七類別C7以及第八類別C8這八個類別，且每一個類別分別儲存有多個對象資料O。

為便於說明本發明的有益功效，以下通過較具體的實施方式描述各個類別，但本發明的類別表示方式並不以此為限，在此先予指明。在此第一實施例中，第一類別C1為親情類、第二類別C2為友情類、第三類別C3為愛情類、第四類別C4為鄉情類、第五類別C5為畸情類、第六類別C6為媒情類、第七類別C7為托情類而第八類別C8為仁情類。其中第一類別C1親情類的關係主要包括夫妻、父子、兄弟、妯娌等，換言之，與使用者間具有這一些親屬關係的對象，他們的對象資料O應該被歸類並儲存於第一類別C1中。第二類別C2的友情類主要包括可以深入交心的朋友，倘若感情日深發展成愛情時，則應歸類到第三類別C3的愛情類。第四類別C4鄉情類的關係主要包括同屆同學、同校同學、同鄉或同種族的人之間，一般只有在特殊情況下才會產生。例如隻身在外國求學或工作，遇到故鄉來的陌生人，雖然彼此不認識，但自然而然會產生出這種情誼，通常離鄉越久的人越會有鄉情，也更容易被鄉情吸引，例如辦理同學會時，與會者通常都是受到鄉情吸引而參加。第五類別C5的畸情類主要指一些受到影響或比較後所產生的情感，例如與人聊八卦是非、在人背後道人長短等等行為，甚至與人偷情等行為，都屬於此一類別，雖然似乎不應鼓勵這些行為，但不可否認的是人們在從事這些行為時也很容易獲得快樂，因此，通過本發明去記錄這些情緒的發生，並時時提醒自己縱使偶爾放縱這一類的情感宣洩(例如偶爾與人聊聊八卦是非)，但要適度為之，以避免樂極生悲帶來負面的影響。第六類別C6的媒情類主要指將情感加入「中間的人與物」之後所變成的情感關係，又可稱為間接情，例如算不上朋友的同事(因工作關係處在同一時空之下)、師生關係或同學關係(因在校求學而互有聯繫)等。第七類別C7的托情類是將情感寄託在「非人」的事物上所產生的情感，例如喜愛藝術、音樂或舞蹈等，甚至通過個人電腦或手機等裝置進行各種娛樂，都屬於此一類別。至於第八類別C8的仁情類，則是一種大公無私，為陌生人奉獻的精神，因為助人為快樂之本，人們通常也可以從中快樂，甚至因宗教的因素，獲得另一種層次的心靈慰藉。

如同前述，本發明的對象分類資料庫C儲存有多個對象資料O(分別儲存於不同類別下)，要進一步說明的是，本發明的每一個聲紋特徵B1分別對應於一個對象資料O，具體來說，本發明的裝置D通過偵測模組11中的音訊接收單元111接收使用者與家人(第一類別C1)、朋友(第二類別C2)或同事(第六類別C6)等對象交談的聲音，並通過所記錄的聲音所具有的聲紋特徵B1，以判別出個別交談對象。在剛開始使用本發明的裝置D時，首先會辨識使用者本身的聲紋特徵B1，以便在後續的程序中區分出是使用者本身發出的聲音或交談對象發出的聲音，在這之後，當使用者與他人交談，裝置D就可以記錄他人的聲紋特徵B1，並建立對應於這一個聲紋特徵B1的對象資料O，並將這一筆對象資料O歸類到一個類別(例如第六類別C6)中，有關建立對象資料O以及分類的更詳細流程會在後面進一步說明。當使用者與同一個對象再次交談時，裝置D就可以根據偵測模組所接收的聲音資訊，與儲存於儲存單元13的聲紋特徵B1比對，以執行一聲紋比對功能，並判斷對應於聲音資訊的對象資料O以及判斷對象資料O所屬的第六類別C6。

本發明的裝置D還包括有計時單元14，計時單元14與處理單元12訊號連接，因此能被處理單元12驅動以執行計時功能。在判斷出與史用者交談的聲音對應於特定對象資料O後，為了達成本發明情緒紀錄與管理的目的，必須記錄雙方之間的互動時間，其具體計算方式，可以通過分析音訊接收單元111所接收的聲音，以判斷雙方交談時間的總長度，也可以是根據音訊接收單元111所接收到的聲音聲調或語速，或是根據生理參數偵測單元112所接收到的生理參數，判斷使用者的情緒屬於愉悅的情緒時，紀錄使用者感到愉悅的總時間長度，端視使用者較側重的目的在於紀錄與不同對象的相處時間，或是讓使用者感到愉悅的時間，而進行不同的設定。

另外，在此第一實施例中，裝置D還包括了顯示單元15以及一輸入單元16，顯示單元15以及輸入單元16都與處理單元12訊號連接。因此，顯示單元15能接收處理單元12所發送的顯示訊號，並根據顯示訊號顯示至少一顯示畫面；而輸入單元16能根據輸入操作以發送相對應的預定指令給處理單元12。在此第一實施例中，顯示單元15以及輸入單元16主要是裝置D上的觸控螢幕，但本發明並不以此為限，凡是可以在裝置D上呈現資訊的其他設計，也都可以作為本發明的顯示單元15；另外，輸入單元16也可以是實體按鍵，甚至整組的輸入鍵盤等輸入裝置。此外，在採用觸控式螢幕的情況下，觸控式螢幕本身可以同時做為本發明的顯示單元15以及輸入單元16。顯示單元15以及輸入單元16的其他功能細節，在後面的段落會再詳細介紹。

請搭配參閱圖1的元件符號，並一併參閱圖3所示，圖3為本發明第一實施例的方法流程圖。以下通過圖3說明本發明所提供的情緒紀錄方法。本發明的處理單元12能夠從偵測模組11接收偵測訊號(步驟S100)，且處理單元12會根據至少一判別條件A1以判別偵測訊號是否對應於特定的情緒反應特徵(步驟S102)。在判斷偵測訊號對應於特定情緒反應特徵的狀態下，表示使用者的心理狀態符合所欲紀錄的狀態(例如，感到愉悅)，此時，會進一步根據偵測模組所接收的聲音資訊執行聲紋比對功能(步驟S104)。在此要特別說明的是，由於每個人的生理狀態會有些微的差異，有時候雖然使用者本身很確實地感受到快樂的情緒，但卻沒有被裝置D內建的判別條件A1判斷為符合情緒反應特徵(例如天生低血壓，雖然感到高興但血壓值還是沒有超過預設的範圍等)，此時，使用者可以通過輸入單元16輸入判別條件設定指令，換句話說，處理單元12會判斷是否接受到條件設定操作訊號(步驟S106)，如果並而未接收到條件設定操作訊號，則持續執行步驟S100的訊號偵測功能，反之，若有接收到條件設定操作訊號，則處理單元12會根據判別條件設定指令，以將偵測模組11所接收的至少一偵測訊號新增為判別條件A1(步驟S108)，並且在完成新增判別條件A1的作業後，進入步驟S104執行聲紋比對功能。因此，能夠使裝置D在使用上更貼近每一個使用者的真實狀況，而達到個人化的適配效果。

承上，處理單元12會通過執行聲紋比對功能以判斷使用者的交談對象。然而，如同前文提到的，有時候使用者感到快樂並非是因為與他人溝通對話的緣故，而是因為繪畫、閱讀或其他任何個人嗜好而感到心情愉悅，因此偵測模組11並不會記錄到使用者與他人交談的聲音，更無法獲得符合已經儲存於儲存單元13的聲紋特徵B1的聲音資訊；或者，使用者交談的對象可能是使用者開始使用裝置D之後第一次接觸的對象，儲存單元13中尚未儲存有對應於此一交談對象的聲紋特徵B1，因此，所獲取的聲音資訊也不會符合已經儲存於儲存單元13的聲紋特徵B1。

這些情形下，處理單元12會驅動顯示單元15在顯示畫面上呈現出提示分類訊息(步驟S110)，具體而言，請搭配參閱圖1的元件符號，並一併參閱圖4所示，圖4為本發明第一實施例的通過顯示畫面顯示一提示分類訊息151A的顯示畫面示意圖。處理單元12可以通過顯示畫面顯示一提示訊息151A，以提醒使用者裝置D並未偵測到聲音，而向使用者確認是否進行分類的提示分類訊息；或者是，請搭配參閱圖1的元件符號，並一併參閱圖5所示，圖5為本發明第一實施例的通過顯示畫面顯示一提示新增對象訊息151B的顯示畫面示意圖。處理單元12可以在偵測到的聲音與已儲存的聲紋特徵B1不符合時，提示使用者裝置D接收到未定義的聲音，以向使用者確認是否要新增對象，並於使用者新增對象後，請搭配參閱圖1的元件符號，並一併參閱圖6所示，圖6為本發明第一實施例的通過顯示畫面顯示另一提示分類訊息151C的顯示畫面示意圖。處理單元12提醒使用者將新增的對象進行分類。如此，倘若使用者選擇要新增對象資料O到儲存單元13(例如新增「繪畫」的對象資料O)，驅動顯示單元15會進一步顯示類別選項(步驟S112)，以便使用者能將新增的對象資料O歸類到儲存於儲存單元13的一個類別中(例如將有關「繪畫」的對象資料O儲存到第七類別C7的托情類)。

如此，即使偵測模組11並沒有記錄到使用者與他人交談的聲音，仍然可以有效地記錄下使用者從事這些活動的時間，通過這些紀錄過程，使用者不但可以得知自己在從事那些活動時會感受到快樂的情緒，甚至可以在長期的追蹤下，了解自己嗜好的變化，進而成為一種人生歷程的特別紀錄。此外，每當使用者與不同的對象(尤其指原先未被記錄的對象)互動時，就能夠通過新增對象資料O豐富儲存於儲存單元13內的資料內容，因此，在長期使用後，互動對象的對象資料O會越來越豐富，而能夠忠實地反映出使用者人生中真實的人際互動關係。

以上描述的是聲音資訊不符合已儲存的聲紋特徵B1的情形，以下回到一般情形。通常，在長久使用本發明的裝置D後，儲存單元13會儲存使用者生活上會接觸的大部分對象的聲紋特徵B1，因此，能夠根據已經儲存於儲存單元13的聲紋特徵B1，判斷出對應於聲音資訊的對象資料O(換句話說，通過聲紋比對判斷交談對象)，並且因為使用者已經預先將對象資料O歸類到適當的類別中(例如第六類別C6)，因此也會同時判斷出對象資料O所屬的類別。為了能夠供使用者確認裝置D所判斷的結果，顯示單元15會顯示分類結果提示訊息，以供使用者確認對應聲紋特徵A1的對象以及類別(步驟S114)。此一作法除了能讓使用者確認裝置D所執行的所有判斷皆正確無誤，還可以讓使用者有思考是否要變更類別的機會。舉例來說，當使用者與同事王小明的感情越來越深厚，使用者可能會想把王小明的對象資料O從原來歸類的第六類別C6(媒情，同事間的情誼)，移動至第二類別C2(友情，知心好友間的情誼)，因此，請搭配參閱圖1的元件符號，並一併參閱圖7所示，圖7為本發明第一實施例的通過顯示畫面顯示一分類結果151D的顯示畫面示意圖。通過將裝置D的判斷結果顯示在顯示單元15的顯示畫面上，若使用者想要變更類別，就可以通過輸入單元16輸入類別變更指令，以執行類別變更操作。更具體地說，處理單元12會判斷是否接收到變更類別設定操作(步驟S116)，且在判斷接收到類別變更指令時，處理單元12會驅動顯示單元15顯示類別選單，請搭配參閱圖1的元件符號，並一併參閱圖8所示，圖8為本發明第一實施例的顯示畫面顯示一類別選單的畫面示意圖。處理單元12通過驅動顯示單元15顯示類別選單，以供使用者選擇欲將對象資料O移動至哪一個目的類別，並根據類別選擇指令將對象資料O自原先所屬的類別移動至對應於類別選擇指令的另一類別中。

在此順帶說明此類別選單151E的設計。類別選單151E包括多個類別選項X1~X8，每一個類別選項分別對應於一個類別，各類別選項的顯示方式具備至少兩個類別特徵，且每一個類別特徵至少包括兩個特徵狀態顯示方式。在本發明的第一實施例中，特徵狀態顯示方式至少包括單向箭頭圖標以及雙向箭頭圖標的顯示方式、實線圖標以及虛線圖標的顯示方式及/或第一色彩圖標以及第二色彩圖標的顯示方式。換句話說，此第一實施例中包括三組類別特徵，而單向箭頭圖標以及雙向箭頭圖標屬於同一組類別特徵中的兩種特徵狀態顯示方式，其餘依此類推。如此，通過單向箭頭圖標以及雙向箭頭圖標的顯示方式，使用者可以輕易地了解到某些愉悅的感受是因為使用者與對應類別的對象間發生互動(雙向箭頭圖標)而產生的，而某些愉悅的感受則僅僅是使用者自身情感的寄託(單向箭頭圖標)，例如繪畫、音樂或閱讀等其他嗜好；又，通過實線圖標以及虛線圖標的顯示方式，使用者可以了解到，某些互動對象一般是會較深入交心的對象(實線圖標)，而某些對象間的互動則通常較為表面、淺層(虛線圖標)；另外，通過第一色彩圖標以及第二色彩圖標甚至地色彩圖標的顯示方式，使用者可以判斷某些對象間的互動原則上是有益而無害的，但有些對象間的互動雖然可以帶來愉悅的感受，卻有可能潛藏負面的效果。舉例而言，親情、友情、仁情或托情原則上不會帶來負面的效果，但愛情可能使人痛苦、鄉情也可能產生鄉愁，更不說畸情。因此，可以將親情、友情、仁情與托情以藍色表示，將其他以紅色表示，甚至區分不同程度的紅色。據此，使用者可以適度的調整自己與不同對象間的互動時間，以充分掌握自己的生活主控權。

回到本發明的流程，倘若處理單元12在顯示分類結果提示訊息後超過一預定時間(例如15秒)而未接收到任何指令，處理單元12便會驅動顯示單元15停止顯示分類結果提示訊息。因為倘若使用者並沒有意願變更類別，表示原本歸類的類別是妥適的，因此，停止顯示分類結果提示訊息，除了能節省執行功能所需的運算資源外，也可以避免使用者不經意的誤觸導致錯誤操作。

承前所述，假如前述判斷流程都順利進行，裝置D確實判斷出使用者與特定對象間的溝通過程，為使用者帶來了愉快的情緒，此時，為了記錄與管理這些情緒反應，處理單元12根據偵測模組11所獲取的偵測訊號以及聲音資訊來獲取一互動時間，且將互動時間記錄於對應聲音資訊的對象資料O中(步驟S118)。如此，通過上述的流程，不但可以忠實的記錄使用者與他人互動時的情緒變化，且這些情緒紀錄所針對的互動對象也被非常明確地記錄在儲存單元13中，因此使用者可以通過後續分析有效地管理這些資訊，並安排、調整與不同對象間互動時間的比重。

最後，請參閱圖9所示，圖9為本發明第一實施例的顯示畫面顯示一統計結果顯示畫面的畫面示意圖。為了便於使用者參考所記錄的互動時間，顯示畫面還進一步包括統計結果顯示畫面151F，統計結果顯示畫面151F的畫面配置方式對應於類別選單151E，換言之，統計結果顯示畫面151F的類別Y1~Y8分別對應類別選項X1~X8，以便使用者能以最直觀的方式參照統計的結果。此外，統計結果顯示畫面151F根據每一個類別中對象資料O的互動時間的總值，以顯示對應於每一個類別的統計結果。使用者可以從面積大小直接看出花費在人際交流上的時間。

如此，使用者可以通過統計結果顯示畫面輕易地了解，自己與不同類別對象互動的時間分配比重，且通過此等視覺化的統計畫面呈現，也能使相關資訊的呈現更一目了然，非常清楚明確。

簡單地說，在使用本發明的裝置D紀錄並管理情緒反應時，主要是藉由處理單元12通過接收偵測訊號以讀取儲存於儲存單元13中的多個判別條件，且使得處理單元12能根據至少一判別條件以判別偵測訊號是否對應於情緒反應特徵(例如愉悅的情緒，但並不以此為限)。在處理單元12判斷偵測訊號對應於預先設定的情緒反應特徵時，處理單元12會通過接收偵測訊號以讀取儲存於儲存單元13中的多個聲紋特徵，且根據偵測模組所接收的聲音資訊執行聲紋比對功能，以判斷對應於聲音資訊的對象資料O以及判斷對象資料O所屬的類別(例如第六類別C6)。此時，計時單元14通過處理單元12的驅動，以根據偵測模組11所獲取的偵測訊號以及聲音資訊來獲取一互動時間，且互動時間將會被記錄於對應聲音資訊的對象資料O中。通過這些步驟完成情緒的紀錄工作。

[第二實施例]

請參閱圖10所適，圖10為本發明第二實施例的系統功能方塊圖。本發明第二實施例提供一種基於聲音辨識的情緒紀錄與管理系統S，在此第二實施例中，系統S包括偵測端T1、輸入輸出終端T2以及伺服器端T3。偵測端T1可以是各種穿戴式裝置或使用者一般會隨身攜帶的電子裝置，甚至在未來科技發展下，製作成植入式的生理參數偵測裝置。偵測端T1包括用於接收一聲音的音訊接收單元T11以及用以擷取一個體生理參數的生理參數偵測單元T12，其中，音訊接收單元T11根據所接收到的聲音以產生聲音資訊，生理參數偵測單元T12根據所擷取的個體生理參數以產生生理參數偵測資訊，偵測端T1根據所接收到的偵測結果以產生包括聲音資訊以及生理參數偵測資訊的偵測訊號。如同在本發明第一實施例中所說，在完全通過聲音紀錄判斷使用者情緒的實施方式中，也可以省略生理參數偵測單元T12，換句話說，在這種實施方式中，偵測訊號就不會包含有生理參數偵測資訊。

輸入輸出終端T2與偵測端T1訊號連接，以接收偵測訊號，實際施作時，輸入輸出終端T2可以通過短距離的訊號傳輸手段與偵測端T1互相傳輸資訊，例如藍芽、紅外線或者局域性的無線網路，然而，輸入輸出終端T2也可以通過網際網路W與偵測端T1互相傳輸資訊。輸入輸出終端T2儲存有多個判別條件、多個聲紋特徵以及多個類別，且每一個類別分別儲存有對象資料，每一個聲紋特徵分別對應於一個對象資料。輸入輸出終端T2通過接收偵測訊號以根據至少一判別條件判別偵測訊號是否對應於情緒反應特徵，在此第二實施例中，輸入輸出終端T2是根據至少一判別條件以判別偵測訊號中的生理參數偵測資訊是否對應於情緒反應特徵。在輸入輸出終端T2判斷偵測訊號中的生理參數偵測資訊對應於情緒反應特徵後，輸入輸出終端T2通過接收偵測訊號的聲音資訊以執行聲紋比對功能，並判斷對應於聲音資訊的對象資料以及判斷對象資料所屬的類別。進一步，輸入輸出終端T2根據偵測端T1所獲取的偵測訊號以及聲音資訊來獲取互動時間，並將互動時間記錄於對應聲音資訊的對象資料中。

在此第二實施例中，比較特別的是，輸入輸出終端T2可以是使用者的一般手機、平板電腦甚至是個人電腦這一類的裝置，雖然這些輸入輸出終端T2本身可能沒有能供偵測生理資訊的硬體零件，但可以搭配具備對應功能的偵測端T1，並在輸入輸出終端T2中安裝必要的軟體，以完成本發明所欲達成的整體功能。輸入輸出終端T2可以進一步包括輸入單元T21以及輸出單元T22。輸入單元T21原則上與前述圖1的輸入單元16功能類似，在此不另行贅述；輸出單元T22根據每一個類別中對象資料的互動時間的總值，以輸出對應於每一個類別的統計結果。輸出單元T22可以是輸入輸出終端T2的螢幕，甚至可以是印表機，因此，使用者可以通過印表機把統計結果輸出成紙本的表單，以提供給專業的人員(如心理醫師或社工師等等)參考，以便能聽取專業人員經過分析後所提出的建議。

在此第二實施例中，另外一個比較特別的點是，系統S還包括伺服器端T3，伺服器端T3通過網際網路W與輸入輸出終端T2訊號連接，也可以與偵測端T1訊號連接。伺服器端T3接收輸入輸出終端T2根據紀錄的互動時間所發送的紀錄資訊後，能夠根據所接收的紀錄資訊向輸入輸出終端T2發送一建議資訊。如此，不僅可以將輸入輸出終端T2的紀錄資訊發送至伺服器端，以儲存於伺服器端T3，甚至能夠在伺服器端T3進行較複雜的運算分析，再由伺服器端T3根據運算分析的結果向輸入輸出終端T2發送建議資訊，以令使用者能夠參考經過嚴謹分析所得出的建議資訊。更進一步來說，伺服器端T3也可以向輸入輸出終端T2提供韌體或軟體更新等服務，或者，倘若伺服器端T3尚提供一個放置電子書的平台，使用者也可以隨時通過輸入輸出終端T2連接伺服器端T3，進而隨時獲取伺服器端T3所提供的及時新知資訊，因此，每當有新的人際或情緒管理理論被研究出來時，使用者就能夠第一時間參考到最先進的理論，時時刻刻調整自己的生活步調與方式，而達到最完滿的人生。

[實施例的有益效果]

本發明的有益效果在於，本發明的基於聲音辨識的情緒紀錄與管理裝置D、系統S以及方法，能夠有效地協助使用者紀錄並管理與他人互動下所產生的情緒反應，甚至使用者個人從事嗜好休閒活動時產生的愉悅情緒，進而能夠在充分了解自己與不同對象互動下的情緒反應的前提下，調整與不同對象互動的時間，而能夠有效改善使用者的生活步調與人際關係，真正成為自己人生的主人。

需要特別說明的是，雖然在前揭實施例中多以愉悅的、快樂的或高興等情緒為例，說明本發明的並用情形，但實際施作時，本發明並不以此為限，本發明的目的既然在於提供基於聲音辨識的情緒紀錄與管理裝置D、系統S以及方法，理所當然，也可以被應用至其他各種情緒的紀錄與管理，例如悲傷、痛苦或憤怒等情緒的管理。上列各個實施例統一以愉悅的情緒作為說明，其目的只是要便於參閱本說明書的讀者了解內容，而保持前後的一貫性，並非要用以限制本發明的專利範圍，特此指明。

以上所公開的內容僅為本發明的優選可行實施例，並非因此侷限本發明的申請專利範圍，所以凡是運用本發明說明書及附圖內容所做的等效技術變化，均包含於本發明的申請專利範圍內。