為了更好地了解人類的行為和認知以及它們的神經(jīng)基礎(chǔ)，研究人員經(jīng)常研究具有類似特征的其他哺乳動物。這些研究中最常見的物種之一是恒河猴，這是一種古老的猴子，原產(chǎn)于南亞，中亞和東南亞。

恒河猴作為無數(shù)神經(jīng)科學，心理學醫(yī)學和人類學研究的動物模型，因為它們與人類共享許多行為模式和生物學特征。例如，它們被證明對研究感染，中風，艾滋病和其他健康狀況有用。

明尼蘇達大學的研究人員最近開發(fā)了OpenMonkeyStudio，這是一個基于深度學習的運動捕獲系統(tǒng)，可用于研究自由移動的獼猴的行為。該系統(tǒng)發(fā)表在《自然通訊》上的一篇論文中，可以估計3-D獼猴自由移動的姿勢，這對于研究動物彼此之間以及與周圍環(huán)境的相互作用特別有價值。在這種情況下，“姿勢”一詞是指動物的主要身體部位相互之間以及周圍環(huán)境的位置。

研究人員在論文中解釋說：“目前，可以通過基于商業(yè)標記的運動捕捉系統(tǒng)(例如，Vicon，OptiTrack和PhaseSpace)以高精度完成姿態(tài)估計，” “但是，獼猴特別不適用于這些基于標記的系統(tǒng)。”

由于多種原因，大多數(shù)使用標記的傳統(tǒng)捕獲系統(tǒng)很難應(yīng)用于獼猴。首先，獼猴的皮毛長而致密，這使標記物的附著特別具有挑戰(zhàn)性，并且高度靈活的皮膚會導(dǎo)致標記物隨著動物在環(huán)境中的移動而移動。另外，由于獼猴是高度敏捷和好奇的生物，因此它們通常會試圖去除標記并在被迫穿緊身衣或夾克時感到非常不舒服。

因此，研究人員一直在嘗試設(shè)計不依賴可有效跟蹤獼猴運動的標記的運動捕捉系統(tǒng)。盡管基于深度學習的圖像中人體姿勢估計技術(shù)可能是可行的解決方案，但它們通常需要大量的訓練數(shù)據(jù)才能表現(xiàn)良好，有時還需要手動對其進行注釋。

明尼蘇達大學的團隊開發(fā)的OpenMonkeyStudio是一種無標記的3-D姿勢估計系統(tǒng)，它是使用完全監(jiān)督的學習方法進行訓練的。與先前提出的用于跟蹤獼猴運動的深度學習技術(shù)相反，該系統(tǒng)不需要在大量現(xiàn)有的手動注釋數(shù)據(jù)集上進行訓練。

研究人員在論文中寫道：“我們的系統(tǒng)使用62臺攝像機，這些攝像機可提供多視圖圖像流，這些圖像流可通過利用3-D多視圖幾何來顯著擴展注釋數(shù)據(jù)。” “盡管如此大量的攝像頭對于訓練姿勢檢測器至關(guān)重要，但生成的模型可以在攝像頭較少的其他系統(tǒng)中使用(例如，由其他實驗室使用)，而無需進行訓練。”

研究人員通過一系列涉及四只雄性恒河猴的實驗對OpenMonkeyStudio進行了評估。在這些測試中，他們的系統(tǒng)達到了驚人的精度，優(yōu)于當今市場上一些最佳的基于標記的運動捕捉系統(tǒng)(即OptiTrack，NaturalPoint，Corvallis和OR)。此外，發(fā)現(xiàn)OpenMonkeyStudio可以很好地概括不同獼猴，并且還可以同時跟蹤兩個對象的運動。

除了開發(fā)可以幫助研究獼猴行為的運動捕捉系統(tǒng)之外，研究人員還編譯了一個新的數(shù)據(jù)集，其中包含195,228個帶注釋的圖像，稱為OpenMonkeyPose。將來，該數(shù)據(jù)集(可在GitHub上獲得)可用于訓練基于深度學習的替代系統(tǒng)，以跟蹤恒河猴的運動。