本發(fā)明涉及心理狀態(tài)的估計技術(shù)。

背景技術(shù)：

1、在由勞動者的疲勞而引起的過勞死、事故、心理健康(mental?health)問題等正在成為社會問題的現(xiàn)代社會中，使疲勞、壓力(stress)等的心理狀態(tài)可視化并進(jìn)行管理被重視。此外，還有遠(yuǎn)程辦公(remote?work)等比以往更加難以掌握勞動者的心理狀態(tài)的工作方式，希望能夠在各種各樣的環(huán)境下簡便地估計心理狀態(tài)的技術(shù)。

2、作為估計心理狀態(tài)的技術(shù)，例如有利用心跳、腦波等的生物體信息的方法。然而，在利用生物體信息的方法中，有時也使用專用的計測設(shè)備，因此難以在自家等簡便地估計心理狀態(tài)。

3、作為估計心理狀態(tài)的其他的技術(shù)，有利用用戶的臉部圖像的方法。例如，在專利文獻(xiàn)1所公開的技術(shù)中，根據(jù)用戶的臉部圖像，使用將專家的見識數(shù)值化而得的診斷矩陣(matrix)，來判斷心因性疾病(psychogenic?disease)的程度。在專利文獻(xiàn)2所公開的技術(shù)中，根據(jù)用戶的臉部圖像，計算臉部的器官(parts)的相對位置等所涉及的特征量來估計感情。

4、現(xiàn)有技術(shù)文獻(xiàn)

5、專利文獻(xiàn)

6、專利文獻(xiàn)1：日本特開2006-305260號公報

7、專利文獻(xiàn)2：日本特開2021-024378號公報

技術(shù)實現(xiàn)思路

1、發(fā)明要解決的課題

2、然而，在專利文獻(xiàn)1所公開的技術(shù)中，沒有考慮心理狀態(tài)在表情上表現(xiàn)出的個人差異，因此有時心因性疾病的估計精度會變低。在專利文獻(xiàn)2所公開的技術(shù)中，沒有考慮所估計的感情與用戶本人感受到的感情是否一致，因此有時感情的估計精度會變低。

3、本發(fā)明是鑒于上述課題而完成的，其目的在于簡便且高精度地估計用戶的心理狀態(tài)。

4、用于解決課題的手段

5、本發(fā)明的第一方面提供的心理狀態(tài)估計裝置的特征在于包括：顯示單元，顯示規(guī)定的圖像；攝像單元，對觀察通過所述顯示單元所顯示的所述規(guī)定的圖像的觀察者的臉部進(jìn)行拍攝；表情估計單元，根據(jù)通過所述攝像單元拍攝到的所述臉部的圖像，估計所述觀察者的表情；以及狀態(tài)估計單元，基于通過所述表情估計單元所估計的、觀察所述規(guī)定的圖像的所述觀察者的表情的變化，估計所述觀察者的心理狀態(tài)。

6、所述規(guī)定的圖像既可以是靜態(tài)圖像也可以是動態(tài)圖像。此外，所述規(guī)定的圖像例如可以是人表示了某種感情的圖像等誘導(dǎo)表情模仿的圖像。所述臉部圖像只需拍攝觀察者(用戶)的臉部即可，也可以包括頭部、頸部、上半身等。表情的估計既可以估計多個表情(例如無表情、喜悅、驚訝、悲傷、憤怒等)，也可以估計一個表情(例如喜悅度為百分之幾)。心理狀態(tài)的估計也同樣地，既可以估計多個心理狀態(tài)，也可以估計一個心理狀態(tài)。心理狀態(tài)估計裝置使用觀察規(guī)定的圖像的觀察者的臉部圖像，而不是用于估計心理狀態(tài)的專用的計測設(shè)備等，因此能夠簡便地估計心理狀態(tài)。此外，心理狀態(tài)估計裝置捕捉觀察規(guī)定的圖像時的表情的變化這樣的、在無意識下的感情的表現(xiàn)而在估計中使用，因此能夠高精度地估計心理狀態(tài)。因此，根據(jù)該結(jié)構(gòu)，能夠簡便而高精度地估計用戶的心理狀態(tài)。

7、所述狀態(tài)估計單元也可以分析所述表情的變化與所述心理狀態(tài)的相關(guān)關(guān)系，估計所述觀察者的心理狀態(tài)。所述表情的變化既可以是獲取了臉部圖像的期間全體的變化，也可以是獲取了臉部圖像的期間中規(guī)定的期間。根據(jù)該結(jié)構(gòu)，能夠根據(jù)觀察規(guī)定的圖像的觀察者的表情變化來估計心理狀態(tài)。

8、所述狀態(tài)估計單元可以分析每個觀察者的所述相關(guān)關(guān)系。感情在表情上表現(xiàn)出的程度有個人差異。因此，根據(jù)該結(jié)構(gòu)，能夠考慮每個觀察者的個人差異，高精度地估計心理狀態(tài)。

9、所述表情估計單元可以計算將所述表情數(shù)值化而得的表情得分(score)。根據(jù)該結(jié)構(gòu)，能夠使用計算出的表情得分的變化來估計心理狀態(tài)。

10、所述狀態(tài)估計單元可以基于規(guī)定的期間中的所述表情得分的時間上的變化來估計所述心理狀態(tài)。規(guī)定的期間例如既可以是獲取了臉部圖像的全體的期間，也可以是顯示了規(guī)定的圖像的前后的期間等某個規(guī)定的期間。時間上的變化例如也可以根據(jù)表情得分的時間序列數(shù)據(jù)所表示的波形的特征量來計算。根據(jù)該結(jié)構(gòu)，能夠根據(jù)表情得分的時間上的變化來判定例如與平時相比表情變化是否匱乏。

11、所述狀態(tài)估計單元可以基于顯示了所述規(guī)定的圖像的顯示期間所對應(yīng)的期間的所述表情得分的平均值，估計所述心理狀態(tài)。與顯示期間對應(yīng)的期間例如是能夠視為獲取表情模仿時的觀測者的臉部圖像的期間。所述表情得分的平均值既可以是與多個顯示期間對應(yīng)的期間的平均值，也可以是與1次顯示期間對應(yīng)的期間的平均值。根據(jù)該結(jié)構(gòu)，能夠根據(jù)表情模仿時的表情得分的平均值的變化來判定例如與平時相比表情變化是否匱乏。

12、所述攝像單元對與顯示所述規(guī)定的圖像的顯示期間對應(yīng)的期間的所述臉部和與沒有顯示所述規(guī)定的圖像的非顯示期間對應(yīng)的期間的所述臉部進(jìn)行拍攝，所述狀態(tài)估計單元可以基于與所述顯示期間對應(yīng)的期間的表情得分和與所述非顯示期間對應(yīng)的期間的表情得分的變化，估計所述心理狀態(tài)。與所述顯示期間對應(yīng)的期間的表情得分和與所述非顯示期間對應(yīng)的期間的表情得分的變化例如既可以使用平均值來計算，也可以使用方差來計算。根據(jù)該結(jié)構(gòu)，根據(jù)與顯示期間對應(yīng)的期間的表情得分和與非顯示期間對應(yīng)的期間的表情得分的變化，能夠判定例如與平時相比表情變化是否匱乏。

13、所述顯示單元可以按照每個規(guī)定時間顯示不同的圖像。心理狀態(tài)估計裝置例如在將規(guī)定的圖像顯示10秒的情況下，可以按每2秒顯示不同的圖像。此外，規(guī)定的時間經(jīng)過后(例如經(jīng)過2小時后)，在顯示規(guī)定的圖像的情況下，心理狀態(tài)估計裝置例如可以顯示與在上次的顯示期間中顯示了的圖像不同的圖像。根據(jù)該結(jié)構(gòu)，能夠避免觀察者看慣顯示的圖像而表情模仿的程度發(fā)生變化等心理狀態(tài)的估計精度降低。

14、所述規(guī)定的圖像可以包括用于對所述觀察者誘導(dǎo)積極的感情的積極圖像和用于對觀察者誘導(dǎo)消極的感情的消極圖像。積極圖像和消極圖像既可以是與觀察者無關(guān)的相同的圖像，也可以根據(jù)觀察者的嗜好而是不同的圖像。根據(jù)該結(jié)構(gòu)，能夠判定針對規(guī)定的表情的表情模仿的程度是否發(fā)生了變化。

15、可以還具有輸出單元，所述輸出單元基于通過所述狀態(tài)估計單元所估計的所述心理狀態(tài)，輸出表示一個以上的感情的信息。表示一個以上的感情的信息可以以能夠掌握觀察者的心理狀態(tài)那樣的方式而被輸出。輸出目的地既可以是觀察者所使用的裝置，也可以是與觀察者使用的裝置不同的裝置。根據(jù)該結(jié)構(gòu)，觀察者或觀察者的上級等能夠獲知觀察者的心理狀態(tài)的估計結(jié)果。

16、本發(fā)明的第二方面提供的心理狀態(tài)估計方法的特征在于具有：顯示步驟，顯示規(guī)定的圖像；攝像步驟，對觀察通過所述顯示步驟顯示的所述規(guī)定的圖像的觀察者的臉部進(jìn)行拍攝；表情估計步驟，根據(jù)通過所述攝像步驟拍攝到的所述臉部的圖像，估計所述觀察者的表情；以及狀態(tài)估計步驟，基于通過所述表情估計步驟所估計的所述表情的變化，估計所述觀察者的心理狀態(tài)。

17、本發(fā)明的第三方面提供的程序用于使計算機(jī)執(zhí)行上述的心理狀態(tài)估計方法的各步驟。

18、發(fā)明效果

19、根據(jù)本發(fā)明，能夠簡便且高精度地估計用戶的心理狀態(tài)。