本發(fā)明涉及計算機(jī)視覺，具體的涉及一種基于無實物手勢的皮影戲輔助教學(xué)方法及系統(tǒng)，特別適用于對非物質(zhì)文化遺產(chǎn)領(lǐng)域的表演藝術(shù)，如皮影戲，進(jìn)行數(shù)字化、交互式的技能訓(xùn)練與傳承。
背景技術(shù)：
1、皮影戲，作為一種古老的民間表演藝術(shù)和重要的非物質(zhì)文化遺產(chǎn)，其核心在于表演者通過精妙的手部技巧，操控由獸皮或紙板制成的影偶，并借助光影在幕布上呈現(xiàn)出栩栩如生的人物形象和故事情節(jié)。這項技藝的傳承與學(xué)習(xí)，在很大程度上依賴于練習(xí)者長期、刻苦的訓(xùn)練，以掌握對影偶操控的復(fù)雜性和精準(zhǔn)性。然而，在現(xiàn)有技術(shù)條件下，傳統(tǒng)的皮影戲練習(xí)方法和現(xiàn)有的數(shù)字化輔助手段均存在顯著的局限性，制約了其學(xué)習(xí)效率和普及推廣。
2、傳統(tǒng)線下練習(xí)方法存在固有的操作與視覺反饋分離問題。在標(biāo)準(zhǔn)的皮影戲表演與練習(xí)環(huán)境中，表演者位于半透明幕布的一側(cè)，通過操控數(shù)根簽桿來驅(qū)動影偶；而表演的最終視覺效果——即皮影影像，則呈現(xiàn)在幕布的另一側(cè)供觀眾欣賞。這種物理上的空間分離，導(dǎo)致練習(xí)者無法在進(jìn)行操控動作的同時，實時、直觀地觀測到自己每一個細(xì)微動作所對應(yīng)的影偶姿態(tài)。例如，手腕角度的微小變化、手指對簽桿施加力度的不同，都可能導(dǎo)致影偶在幕布上呈現(xiàn)出截然不同的動態(tài)效果。由于缺乏即時視覺反饋，練習(xí)者難以將自身的操作與最終的藝術(shù)效果建立直接、精確的關(guān)聯(lián)，其動作的調(diào)整和優(yōu)化嚴(yán)重依賴于指導(dǎo)師傅的口頭傳授或在練習(xí)結(jié)束后繞到幕布前進(jìn)行復(fù)盤。這種非直觀、非同步的反饋機(jī)制，不僅極大地增加了學(xué)習(xí)者的認(rèn)知負(fù)荷，延長了學(xué)習(xí)周期，更不利于形成精確、穩(wěn)固的肌肉記憶。
3、傳統(tǒng)練習(xí)方法對物理環(huán)境和道具的依賴性極高，構(gòu)成了準(zhǔn)入壁壘。一次有效的皮影戲練習(xí)，通常需要一個相對固定的、光線可控的半黑暗空間，需要搭建特定尺寸的幕布，配置穩(wěn)定且角度適宜的光源，并需要一套完整的、制作精良的皮影道具。這些硬件要求使得練習(xí)活動在空間和時間上的靈活性受到極大限制，練習(xí)者無法利用碎片化的時間進(jìn)行即興練習(xí)或高頻次的基礎(chǔ)訓(xùn)練。此外，傳統(tǒng)的皮影道具多為手工制作，不僅成本較高，且在使用過程中容易磨損或損壞，進(jìn)一步增加了練習(xí)的成本與維護(hù)難度。這些苛刻的條件，無疑提高了皮影戲愛好者的入門門檻，也為專業(yè)表演者的日常技能維護(hù)帶來了不便，成為制約該藝術(shù)形式在現(xiàn)代社會中傳承與發(fā)展的一大障礙。
4、盡管目前已存在一些數(shù)字化的教學(xué)資源，如皮影戲表演的教學(xué)錄像或二維動畫演示，但這些資源本質(zhì)上屬于單向的、非交互式的內(nèi)容呈現(xiàn)。學(xué)習(xí)者只能被動地進(jìn)行觀看和模仿，系統(tǒng)無法對其自身的練習(xí)動作進(jìn)行糾錯指導(dǎo)。這種被動式學(xué)習(xí)方式，未能有效解決前述的反饋分離和環(huán)境依賴問題，在提升學(xué)習(xí)者的實際操控技能方面作用有限。
5、綜上可知，現(xiàn)有技術(shù)無論在傳統(tǒng)練習(xí)模式還是數(shù)字化輔助方面，均未能有效解決皮影戲?qū)W習(xí)中實時反饋缺失以及練習(xí)門檻過高的問題，因此，開發(fā)一種能夠提供即時交互反饋、且不受物理環(huán)境限制的新型輔助教學(xué)技術(shù)方案，具有重要的現(xiàn)實意義和應(yīng)用價值。
技術(shù)實現(xiàn)思路
1、本發(fā)明提供一種基于無實物手勢的皮影戲輔助教學(xué)方法，該方法具體包括以下步驟：
2、利用圖像采集模塊，獲取在預(yù)設(shè)三維空間內(nèi)的練習(xí)者至少一只手部的視頻圖像；
3、對所述視頻圖像進(jìn)行實時分析，以確定一組用以操控虛擬皮影的控制參數(shù)，所述控制參數(shù)包括：與所述手部姿態(tài)對應(yīng)的姿態(tài)信息，以及與所述手部在所述三維空間中遠(yuǎn)近位置對應(yīng)的深度位置信息，其中，所述姿態(tài)信息包括用于獨立控制的單手獨立參數(shù)和用于協(xié)同控制的雙手關(guān)聯(lián)參數(shù)；
4、基于所述姿態(tài)信息，對虛擬皮影的骨骼姿態(tài)進(jìn)行映射，其中，所述映射的邏輯根據(jù)所述雙手關(guān)聯(lián)參數(shù)在預(yù)設(shè)的獨立操控模式與交互操控模式之間進(jìn)行適配；
5、基于所述映射后的骨骼姿態(tài)和所述深度位置信息，渲染生成所述虛擬皮影的影像并進(jìn)行實時顯示。
6、本說明書實施例還提出了一種基于無實物手勢的皮影戲輔助教學(xué)系統(tǒng)，該系統(tǒng)包括：
7、采集模塊：對所述視頻圖像進(jìn)行實時分析，以確定一組用以操控虛擬皮影的控制參數(shù)，所述控制參數(shù)包括：與所述手部姿態(tài)對應(yīng)的姿態(tài)信息，以及與所述手部在所述三維空間中遠(yuǎn)近位置對應(yīng)的深度位置信息，其中，所述姿態(tài)信息包括用于獨立控制的單手獨立參數(shù)和用于協(xié)同控制的雙手關(guān)聯(lián)參數(shù)；
8、實時分析模塊：基于當(dāng)前天氣圖像序列預(yù)測得到第一回傳信號窗口期
9、映射模塊：基于所述姿態(tài)信息，對虛擬皮影的骨骼姿態(tài)進(jìn)行映射，其中，所述映射的邏輯根據(jù)所述雙手關(guān)聯(lián)參數(shù)在預(yù)設(shè)的獨立操控模式與交互操控模式之間進(jìn)行適配；
10、顯示模塊，基于所述映射后的骨骼姿態(tài)和所述深度位置信息，渲染生成所述虛擬皮影的影像并進(jìn)行實時顯示。
11、一種電子設(shè)備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機(jī)程序，所述處理器執(zhí)行所述計算機(jī)程序時實現(xiàn)上述一種基于無實物手勢的皮影戲輔助教學(xué)方法。
12、一種計算機(jī)可讀存儲介質(zhì)，所述計算機(jī)可讀存儲介質(zhì)存儲有計算機(jī)程序，所述計算機(jī)程序被處理器執(zhí)行時實現(xiàn)上述一種基于無實物手勢的皮影戲輔助教學(xué)方法。
13、本申請所提出的一種基于無實物手勢的皮影戲輔助教學(xué)方法及系統(tǒng)，旨在系統(tǒng)性地解決傳統(tǒng)皮影戲技藝在學(xué)習(xí)和普及中所面臨的困境。
14、本申請打破了傳統(tǒng)皮影戲練習(xí)在物理空間和物質(zhì)條件上的苛刻限制，極大地提升了該藝術(shù)形式的可及性與學(xué)習(xí)的便捷性。傳統(tǒng)皮影戲的練習(xí)，必須依賴于專門的場地，經(jīng)過布置的幕布、特定的光源以及一套完整且易于損耗的實體皮影道具，這構(gòu)成了極高的入門門檻和練習(xí)成本。本申請?zhí)岢隽艘环N完全基于無實物手勢的教學(xué)與練習(xí)方法，練習(xí)者無需任何實體道具，僅利用一部智能手機(jī)或電腦攝像頭等通用設(shè)備，即可在任何日常環(huán)境（如書房桌面）下，隨時隨地展開高仿真的皮影操控訓(xùn)練。這使得皮影戲的練習(xí)，能夠?qū)崿F(xiàn)如同在桌面上進(jìn)行無實物彈奏鋼琴的指法練習(xí)一般的便捷，
15、傳統(tǒng)的計算機(jī)視覺系統(tǒng)在處理皮影戲這種雙手高速協(xié)同、姿態(tài)復(fù)雜多變的特定場景時，往往會因缺乏上下文理解而產(chǎn)生錯誤。本申請將表演者的姿態(tài)習(xí)慣，即支撐手與動作手的功能分工、高低位差、握持姿態(tài)的穩(wěn)定性等以及特定練習(xí)環(huán)境下的視覺特征，即固定視角下的手心手背顏色差異，轉(zhuǎn)化為可計算的先驗?zāi)Ｐ停⑵渲苯幼⑷氲缴窠?jīng)網(wǎng)絡(luò)的結(jié)構(gòu)設(shè)計與學(xué)習(xí)目標(biāo)中。使得本申請的系統(tǒng)能夠以極高的置信度，在復(fù)雜場景下穩(wěn)定地追蹤關(guān)鍵點、并可靠地區(qū)分左右手，為后續(xù)實現(xiàn)精確、非對稱的復(fù)雜操控邏輯提供了干凈且可靠的數(shù)據(jù)基礎(chǔ)。
16、本申請將練習(xí)者手部的三維空間深度信息，與皮影影像的尺寸大小和輪廓模糊度進(jìn)行動態(tài)關(guān)聯(lián)，在數(shù)字世界中復(fù)現(xiàn)了皮影戲虛實相生的藝術(shù)手法。練習(xí)者可以通過自己手部的直觀移動，實時地看到皮影從清晰銳利到模糊寫意的細(xì)膩過渡，從而能夠量化地學(xué)習(xí)和掌握這一傳統(tǒng)口傳心授中極為抽象的高級技巧。
1.一種基于無實物手勢的皮影戲輔助教學(xué)方法，該方法具體包括：
2.根據(jù)權(quán)利要求1所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法，其特征在于，所述對視頻圖像進(jìn)行實時分析的步驟，具體包括：
3.根據(jù)權(quán)利要求1或2所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法，其特征在于，所述實時分析還包括一個確定手部左右屬性的步驟，該步驟包括：
4.根據(jù)權(quán)利要求1所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法，其特征在于，在所述實時分析中，通過神經(jīng)網(wǎng)絡(luò)模型輸出初始的關(guān)鍵點坐標(biāo)后，還包括一個對所述初始關(guān)鍵點坐標(biāo)進(jìn)行校正的步驟，該步驟包括：
5.根據(jù)權(quán)利要求1所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法，其特征在于，所述姿態(tài)信息中的單手獨立參數(shù)，包括第一手的控制參數(shù)和第二手的控制參數(shù)；
6.根據(jù)權(quán)利要求1或5所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法，其特征在于，所述映射的邏輯根據(jù)所述雙手關(guān)聯(lián)參數(shù)進(jìn)行適配的步驟，具體包括：
7.根據(jù)權(quán)利要求1所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法，其特征在于，所述深度位置信息用于調(diào)制所述虛擬皮影影像的景深視覺效果的步驟，具體包括：
8.一種基于無實物手勢的皮影戲輔助教學(xué)系統(tǒng)，該系統(tǒng)用于執(zhí)行如權(quán)利要求1-7任一項所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法，其特征在于，該系統(tǒng)包括：
9.一種電子設(shè)備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機(jī)程序，所述處理器執(zhí)行所述計算機(jī)程序時實現(xiàn)如權(quán)利要求1-7任一項所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法。
10.一種計算機(jī)可讀存儲介質(zhì)，所述計算機(jī)可讀存儲介質(zhì)存儲有計算機(jī)程序，所述計算機(jī)程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1-7任一項所述的一種基于無實物手勢的皮影戲輔助教學(xué)方法。