透過語音特徵建構基於堆疊稀疏自編碼器演算法之婚姻治療中夫妻互動行為量表自動化評分系統

Automating Behavior Coding for Distressed Couples Interactions based on Stacked Sparse Autoencoder Framework using Speech-acoustic Feature

人與人之間交談互動，常透過語言傳達彼此的想法，並在這交談過程中得知雙方的行為反應。利用人為觀察來分析雙方行為反應，這種人為分析方式最早常應用在心理學和精神醫學方面。人為行為觀察已經相當的成功用於研究親密關係，因為夫妻的互動行為是影響親密關係程度的重要因素之一。然而使用人為觀察行為的方式長年存在根本問題，一方面太消耗時間，另一面也主觀。如果能透過電腦工程的方式來幫忙人為觀察將大大提升效率：即透過低層描述映射高層描述來預測與分析人類行為。這項研究領域是一個新興的領域分。人類行為信號處理（Behavioral Signal Processing, BSP）目的在幫助連接信號處理技術與行為分析的跨領域學科，建立在傳統的信號處理研究，如語音識別，面手部追蹤等等。相關顯著BSP研究已發產於以人為中心的提取音頻，視頻信號，來分析高階人類行為甚或是情感方面。本論文利用BSP的基本思路應用在婚姻治療資料庫上面，婚姻治療資料庫會詳細說明在第二章。這個資料庫紀錄了夫妻在一段對話中談述了他們所選擇婚姻中的問題。觀察評分者在根據他們一段話的種種行為根據兩分精神醫療行為量表進行評分（例如：幽默行為、悲傷行為展現程度等等）。