謝嘉成，鄭子盈，王學(xué)文，孟 浩，劉曙光，李素華

（1.太原理工大學(xué) 機械與運載工程學(xué)院,山西 太原 030024；2.煤礦綜采裝備山西省重點實驗室,山西 太原 030024；3.智能采礦裝備技術(shù)全國重點實驗室,山西 太原 030032）

0 引言

近年來，隨著新一代信息技術(shù)與傳統(tǒng)煤炭開采業(yè)的深度融合[1]，以及煤炭安全高效清潔開采的迫切需求，發(fā)展智能化采煤技術(shù)是必由之路[2]。與制造、汽車、船舶、建筑地面場景相比[3]，智能煤炭場景顯然技術(shù)挑戰(zhàn)更高[4]。例如：近年來煤礦綜采工作面在裝備智能感知、決策和控制等方面建設(shè)效果明顯，實現(xiàn)了地質(zhì)條件較好情況下的初步智能化[5]，但對于地質(zhì)條件復(fù)雜多變、設(shè)備工作環(huán)境惡劣的情況，各智能化子系統(tǒng)存在信息孤島、安全監(jiān)控保障手段不匹配等問題，與深度智能化要求還有一定的差距[6]。

智能化的基礎(chǔ)是數(shù)字化[7]，智采工作面的建設(shè)基礎(chǔ)包括先進可靠智能化水平高的開采裝備、數(shù)字化信息感知元件、可靠帶寬高時延低的信息傳輸模式、信息存儲與云端協(xié)同計算平臺、控制系統(tǒng)的最優(yōu)決策、數(shù)字化呈現(xiàn)、決策以及反向控制等[8-9]。單純在物理層面進行智采工作面建設(shè)存在著信息孤島、不能適應(yīng)復(fù)雜工況、AI 與物理系統(tǒng)較難深入融合等諸多問題。隨著數(shù)字孿生(Digital Twin,DT)等技術(shù)的引入[10-11]，在物理維度與信息維度、物理實體與虛擬孿生體相互協(xié)同形成虛實融合的運行模式越來越關(guān)鍵[12]。通過物理系統(tǒng)的實時信息采集，構(gòu)建信息空間中實時物理世界的虛擬孿生體，對物理世界未來行為進行預(yù)測進而決策優(yōu)化出最優(yōu)策略，最終反控物理設(shè)備運行[13]已成為當(dāng)下研究熱點。

數(shù)字孿生重在構(gòu)建與物理世界完全一致的虛擬孿生體[14]，而工業(yè)元宇宙（IM,Industrial Metaverse）是以數(shù)字孿生為基礎(chǔ)的更為廣泛的未來生產(chǎn)運行模式[15-16]，通過XRAIIoT云計算區(qū)塊鏈數(shù)字孿生等技術(shù)實現(xiàn)人、機、物、系統(tǒng)等的無縫連接，提升對綜采工作面的監(jiān)測能力、決策能力以及反向控制能力，是工業(yè)乃至產(chǎn)業(yè)數(shù)字化、智能化發(fā)展的全新階段。智采工作面未來也將必然發(fā)展到工業(yè)元宇宙階段[17-18]。

工業(yè)元宇宙內(nèi)涵包括虛擬現(xiàn)實-數(shù)字孿生-信息物理系統(tǒng)-工業(yè)元宇宙等方面[19-20]，涉及到綜采工作面的監(jiān)測、決策以及控制。

在實現(xiàn)智能化的難度上，數(shù)字化綜采工作面與數(shù)字化工廠具有很大差異。①從兩者的運行環(huán)境來看，數(shù)字化工廠環(huán)境固定簡單，由建造者決定，易通過視頻圖像和點云等非接觸式和普通的傾角和GPS等接觸式信息進行協(xié)同采集、傳輸與驅(qū)動虛擬監(jiān)控，便于以全局視角透明化監(jiān)測整體運行；然而對于綜采工作面來說，煤層賦存條件復(fù)雜，裝備運行環(huán)境惡劣封閉且處在不斷遷移過程中，傳感器布置較困難且種類受限，受電磁干擾影響，傳輸不穩(wěn)定，同時透明地質(zhì)保障技術(shù)當(dāng)前仍難以支撐透明化開采環(huán)境的實時監(jiān)測，做到實時精準(zhǔn)呈現(xiàn)難度大。②在決策方面，數(shù)字化工廠根據(jù)加工產(chǎn)品的狀態(tài)，以及所要達到的標(biāo)準(zhǔn)，使用智能調(diào)度軟件對生產(chǎn)線整體、各加工和輔助作業(yè)設(shè)備進行全局配置與規(guī)劃，能夠達到理論最優(yōu)，提高生產(chǎn)效率；而對于綜采工作面，裝備連接關(guān)系復(fù)雜，“破-采-裝-運-支”等工作和“調(diào)高-調(diào)直-水平推進”等主線任務(wù)深度耦合，在存在一定程度的信息孤島和導(dǎo)航地圖不透明的條件下，顯著增加了各設(shè)備動作決策的難度。③在反向控制方面，數(shù)字化工廠可以依托資源計劃管理(Enterprise Resource Planning,ERP)、產(chǎn)品生命周期管理(Product Lifecycle Management,PLM)、制造執(zhí)行系統(tǒng)(Manufacturing Execution System,MES)等多個智能保障系統(tǒng)來管理設(shè)備，并實時檢測預(yù)規(guī)劃與在線運行的差異，可實時做出精準(zhǔn)全局調(diào)控；而在綜采工作面內(nèi)，各種智能化管控平臺，尚未做到實時性高且精細(xì)化的全局態(tài)勢分析與管理，不同裝備間缺乏統(tǒng)一的通訊標(biāo)準(zhǔn)，任務(wù)環(huán)境復(fù)雜且部分控制執(zhí)行元件（如開關(guān)閥驅(qū)動的推移油缸等）不能實現(xiàn)精準(zhǔn)控制，這都增加了反向控制的難度。

當(dāng)前綜采工作面的智能化還面臨著如下挑戰(zhàn)：①僅利用數(shù)字孿生難以實現(xiàn)綜采工作面的決策與反向控制，這就需要將綜采工作面與工業(yè)元宇宙相融合。②在綜采工作面內(nèi)實現(xiàn)工業(yè)元宇宙所需要的技術(shù)不夠明確。③人在綜采工作面中有著不可或缺的作用，人機協(xié)同技術(shù)在綜采工作面的應(yīng)用還未成熟。

筆者通過梳理綜采數(shù)字孿生與工業(yè)元宇宙的發(fā)展脈絡(luò)，理清兩者間的特點與關(guān)系，提出綜采工作面工業(yè)元宇宙的構(gòu)想和實現(xiàn)這一構(gòu)想的關(guān)鍵技術(shù)，為構(gòu)建具備人機融合能力的，能完成決策與反向控制的綜采工作面工業(yè)元宇宙系統(tǒng)奠定基礎(chǔ)。

1 綜采+“元宇宙”和“數(shù)字孿生”的發(fā)展脈絡(luò)及其內(nèi)涵特征

1.1 發(fā)展脈絡(luò)

在智能化發(fā)展的需求下，虛實融合歷程階段可分為4 個階段。

1）1.0 階段：虛擬仿真主要是應(yīng)用于培訓(xùn)和教學(xué)。主要目的就是讓操作人員了解井下綜采工作面，掌握設(shè)備操作技能等。雖然利用的信息較少，但可以仿真展示或者可視化井下開采的較真實過程[21]。

2）2.0 階段：在1.0 基礎(chǔ)上加入離線真實運行的數(shù)據(jù)，復(fù)現(xiàn)出真實綜采工作面運行工況。這一階段虛擬場景與真實工作面在時間維度是不統(tǒng)一的，但仿真效率得到了提高。此外可以基于“人-機-環(huán)-法”等信息，對整個物理綜采工作面進行無縫的、多樣化的、參數(shù)化的虛擬規(guī)劃，且能夠和真實控制系統(tǒng)連接到一起，進行真實控制系統(tǒng)的半實物虛擬仿真與調(diào)試[22]。

3）3.0 階段：2.0 由于時間尺度不一致，不能進行在線分析。因此，在2.0 基礎(chǔ)上，3.0 通過實時信息驅(qū)動虛擬場景，追求虛擬場景與真實系統(tǒng)的同步運行，操作人員根據(jù)準(zhǔn)確重構(gòu)的虛擬場景信息進行遠(yuǎn)程的人工干預(yù)[23]。

4）4.0 階段：在實時虛擬重構(gòu)的基礎(chǔ)上，構(gòu)建出能進行預(yù)測、決策、分析的綜采平行系統(tǒng)，對未來規(guī)劃與可行路徑仿真，并與當(dāng)前時刻進行實時狀態(tài)綁定。決策出仿真過程中的最優(yōu)策略，同時與實際控制系統(tǒng)連接，打通雙向閉環(huán)的信息通道，再把最優(yōu)策略轉(zhuǎn)換成控制指令，返回給物理工作面的控制系統(tǒng)，使其按照最優(yōu)策略來運行[24]。

1.2 各層次的內(nèi)涵分析

數(shù)字孿生DT 的基礎(chǔ)是虛擬現(xiàn)實(Virtual Reality,VR)和增強現(xiàn)實(Augmented Reality,AR)，DT 又能夠延伸出平行系統(tǒng)(Parallel System,PS)，加上控制能力后可變成信息物理系統(tǒng)(Cyber Physical System,CPS)，最終都為工業(yè)元宇宙IM 打下基礎(chǔ)。

VR、AR、DT、PS、CPS 和IM 六種技術(shù)的發(fā)展脈絡(luò)如圖1 所示：從物理和信息兩個維度，對VR、AR、DT、PS、CPS 和IM 各系統(tǒng)具備的基本特征進行剖析[25-26]，發(fā)現(xiàn)虛實融合內(nèi)涵由低到高的基本特征包括：①展示與離線模擬；②監(jiān)測與輔助操作；③在線模擬與預(yù)演；④預(yù)測與決策；⑤反向控制；⑥人機融合與管理；通過虛實融合內(nèi)涵由低到高的六大基本特征的支持，從物理維度到數(shù)字孿生再到工業(yè)元宇宙，信息空間的成分逐漸增加，就誕生了實無窮到虛無窮的不斷演變。對于工業(yè)系統(tǒng)來說，最終都是通過信息系統(tǒng)的無限試錯、推演、模擬與運算，最終服務(wù)于物理系統(tǒng)，為其安全高效運行提供支撐。

圖1 發(fā)展與演化脈絡(luò)Fig.1 Development and evolution

虛實融合內(nèi)涵由低到高的基本特征：

1）展示與離線模擬：通過虛擬建模以及在信息空間中的各種仿真來展示運行狀態(tài)，在此過程中由于沒有接入相關(guān)的數(shù)據(jù)，虛擬場景構(gòu)建的可信度取決于相關(guān)的建模水平以及對物理過程機理的掌握。主要功能是培訓(xùn)教學(xué)、產(chǎn)品的展示、科普等。

2）監(jiān)測與輔助操作：在1）的基礎(chǔ)上，接入實時運行數(shù)據(jù)，驅(qū)動虛擬場景同步運行，以實現(xiàn)虛實同步監(jiān)測的運行方式，在生產(chǎn)過程中把實時信息適當(dāng)顯示出來，指導(dǎo)實際生產(chǎn)過程。在這一階段的功能主要是物理過程實時運行狀態(tài)的虛擬可視化，且將時空信息進行深度融合；要保證虛擬監(jiān)測是無延遲地、準(zhǔn)確地與物理場景保持高度同步。在這個層面內(nèi)，人能通過虛擬場景對綜采工作面進行觀測，但對裝備的操作決策和控制只能由人來做。

3）在線模擬與預(yù)演：在數(shù)據(jù)驅(qū)動構(gòu)造的虛擬場景基礎(chǔ)上，通過虛擬引擎復(fù)制出基于實時數(shù)據(jù)的虛擬運行狀態(tài)，對未來運行狀態(tài)進行全流程模擬。利用深度學(xué)習(xí)、強化學(xué)習(xí)等方法，對所有可行路徑上進行全模擬與實時更新與顯示，給人提供充分的決策依據(jù)。

4）預(yù)測與決策：在模擬的基礎(chǔ)上，對各種模擬結(jié)果進行評價，決策出系統(tǒng)最優(yōu)運行路徑。在此基礎(chǔ)上，進行相關(guān)的預(yù)測，根據(jù)預(yù)測結(jié)果，結(jié)合實時虛擬監(jiān)測場景，人通過控制按鈕遠(yuǎn)程控制設(shè)備做出相關(guān)動作。

5）反向控制：將4）決策出的最優(yōu)結(jié)果與設(shè)備的物理控制系統(tǒng)進行全流程信息交互，實現(xiàn)物理與虛擬的無縫銜接。系統(tǒng)可以自動將虛擬控制指令轉(zhuǎn)變?yōu)檎鎸嵉奈锢砜刂浦噶睿鎸嵉奈锢砜刂浦噶钪苯涌刂葡嚓P(guān)設(shè)備做出相應(yīng)的動作。

6）人機融合與管理：通過井上井下的各類人員，包括工作面一線巡檢人員、集控中心操作員、各個關(guān)鍵崗位監(jiān)控員、地面調(diào)度中心人員，佩帶可穿戴式設(shè)備、頭盔、眼鏡等各種人機交互設(shè)備，進入到信息世界中，在一個統(tǒng)一的工作場景中進行虛擬會議，虛擬互動，虛擬評價，從而真正實現(xiàn)整個礦井的時空一致與互聯(lián)。在此層面內(nèi)，虛擬人負(fù)責(zé)整個工作面的運行管理，人只需要對虛擬人監(jiān)督即可。

其中，圖1 中的實線的含義是強包含，虛線的含義是弱包含或者部分包含?？梢钥闯鯠T 包含兩條實線1）和2）和兩條虛線3）和4），說明數(shù)字孿生至少應(yīng)達到數(shù)據(jù)驅(qū)動的虛擬監(jiān)測與輔助協(xié)同，在此基礎(chǔ)上，可以將DT 延伸出來在線模擬與預(yù)演和預(yù)測與決策，信息系統(tǒng)中決策出來最優(yōu)策略，用于指導(dǎo)實際的物理生產(chǎn)過程。但需要注意的是，這里所說的決策與控制不需要對信息傳輸路徑或者自動化程度有所判斷，可以是人工手動操作，也可以是程序智能控制，但最終要利用虛擬高可信度模擬的結(jié)果指導(dǎo)操作人員。如果這里變成自動連接控制系統(tǒng)的反向控制物理設(shè)備，就由數(shù)字孿生DT 過渡到了信息物理系統(tǒng)CPS 階段。而CPS 再加上6）人機融合與管理，使信息系統(tǒng)朝著虛無窮邁進，就變成了IM，更加強調(diào)人機融合，這也是一些學(xué)者探討的工業(yè)5.0 的相關(guān)概念：不再一味地追求黑燈工廠，而是更加注重以人為本，融入了以人為核心的概念，更加重視管理。在綜采工作面內(nèi)，工作環(huán)境復(fù)雜，加上先驗信息缺失，導(dǎo)致了人在綜采工作面內(nèi)有著不可或缺的作用。人機融合與管理能幫助人更好地了解到井下實時的狀況以及裝備運行狀態(tài)，對各種情況做出及時、正確的處理，更好地發(fā)揮人的主觀能動性。

1.3 “工業(yè)元宇宙”和“數(shù)字孿生”驅(qū)動的工作面對比

數(shù)字孿生綜采工作面[23]是現(xiàn)實世界物理元素的復(fù)制、延伸和增強，是物理元素和規(guī)律在虛擬空間的投影，是形成“完全同步”的“克隆工作面”。在這里，物理和信息系統(tǒng)構(gòu)成成分是基本對等的。

工業(yè)元宇宙驅(qū)動的綜采工作面在數(shù)字孿生刻畫的“克隆工作面”基礎(chǔ)上，平行出多個系統(tǒng)，以真實或假想的邏輯對虛擬系統(tǒng)進行刻畫與運作，強調(diào)虛擬場景的各種預(yù)測、模擬、控制、評價和交互。此時，盡管虛擬系統(tǒng)的成分已遠(yuǎn)多于物理系統(tǒng)，但對于工業(yè)場景來說，虛擬系統(tǒng)的運營也是為了物理世界的工業(yè)服務(wù)。

數(shù)字孿生是物理世界和虛擬世界處于對等的關(guān)系，而工業(yè)元宇宙則是兩者處于不對等的關(guān)系。數(shù)字孿生是對工業(yè)生產(chǎn)過程中的仿真建模工具的高度總結(jié)，可以清晰重現(xiàn)綜采工作面的場景與各裝備的運行狀態(tài)，實現(xiàn)監(jiān)測與模擬。工業(yè)元宇宙則是布局縱深更大，要超越現(xiàn)實，不僅要做到監(jiān)測、控制，更要實現(xiàn)人、機、物、環(huán)境的有效管理，使人在虛擬空間內(nèi)也能了解工作面的各種信息，在虛擬世界內(nèi)完成對綜采工作面的監(jiān)測決策以及控制。利用人機協(xié)作技術(shù)增強人的感知，決策與控制能力，為更好地處理與解決綜采運行問題提供思路與方法，也為智能化工作面提供了可能性。

2 工業(yè)元宇宙驅(qū)動的智采工作面構(gòu)想

基于虛實融合內(nèi)涵由低到高的6 個基本特征，工業(yè)元宇宙驅(qū)動的智采工作面系統(tǒng)框架如圖2 所示，由下到上分別是：

圖2 工業(yè)元宇宙驅(qū)動的工作面系統(tǒng)框架Fig.2 Industrial metaverse driven working face system framework

第1 層：物理層：對應(yīng)物理的綜采生產(chǎn)系統(tǒng)，目前智能化綜采設(shè)備在單機裝備、多機協(xié)同與環(huán)境感知上的各層次智能化水平都不斷進步，取得了良好的效果；

第2 層：實時映射層：物理系統(tǒng)與元宇宙系統(tǒng)的接口：在煤礦井下4G 已經(jīng)推廣使用，5G 已在井下試點，各種設(shè)備感知與控制信息都可接入網(wǎng)絡(luò)，實時映射到數(shù)字空間。

第3 層：數(shù)字建模層：既包括“形似”又包括“內(nèi)在機理”的一致性，導(dǎo)入到虛擬引擎中，對其行為進行刻畫和編譯，構(gòu)建“高保真”的數(shù)字孿生模型，可以進行高仿真度的展示與離線仿真。

第4 層：信息監(jiān)控層：實時運行數(shù)據(jù)驅(qū)動的虛擬重構(gòu)，實現(xiàn)物理模型與虛擬模型的雙向映射，能動態(tài)、實時地管理產(chǎn)品的技術(shù)狀態(tài)。

第5 層：跟蹤分析層：在虛擬重構(gòu)場景中復(fù)制一個出來，在虛擬空間中運用大數(shù)據(jù)分析技術(shù)進行仿真、測試、預(yù)測與評估，對物理世界的未來狀態(tài)進行預(yù)測與優(yōu)化。

第6 層：模擬自治層：具有分布式、去中心、自組織的特征。提供沉浸式的數(shù)字模擬、環(huán)境和事件的開發(fā)和操作，用戶和企業(yè)可以在其中探索和參與各種各樣的體驗，并從事生產(chǎn)活動。

第7 層：應(yīng)用互動層：用于數(shù)字化生產(chǎn)。決策出來的最優(yōu)指令反向由虛向?qū)嵖刂七\行工況；人機協(xié)同改變工業(yè)運行方式，提高企業(yè)管理運營的效率。

第1 層是處于物理系統(tǒng)內(nèi)的，第2 層是物理系統(tǒng)與元宇宙系統(tǒng)的接口，第3 層對應(yīng)展示與離線模擬的基本特征，第4 層對應(yīng)監(jiān)測與輔助操作的基本特征，第5 層對應(yīng)在線模擬與預(yù)演的基本特征，第6層對應(yīng)預(yù)測與決策的基本特征，第7 層對應(yīng)反向控制、人機融合與管理的基本特征。

工業(yè)元宇宙驅(qū)動的智采工作面系統(tǒng)所具備的能力包括：

1）由實到虛精準(zhǔn)的復(fù)制映射能力（DT）：主要包括展示與離線模擬和監(jiān)測與輔助操作的能力，涉及時間和空間維度，具有精準(zhǔn)復(fù)制，以及時間快、延遲低的數(shù)據(jù)驅(qū)動特點；先驗信息嚴(yán)重缺失的綜采工作面生產(chǎn)系統(tǒng)虛擬運維方法常受到數(shù)據(jù)質(zhì)量與數(shù)量的影響，難以適應(yīng)實際運行場景。為了保證綜采工作面生產(chǎn)系統(tǒng)運行的完整性，在數(shù)據(jù)驅(qū)動模型基礎(chǔ)上，可引入知識驅(qū)動方法建立約束條件，避免異常驅(qū)動現(xiàn)象的發(fā)生，增強經(jīng)驗?zāi)Ｐ偷倪m應(yīng)性，實現(xiàn)混合驅(qū)動模式下的綜采工作面虛擬重構(gòu)。

智能化綜采工作面的實時虛擬監(jiān)測涉及到兩部分[23]。一部分是高可信度煤層裝備聯(lián)合虛擬仿真，另一部分是協(xié)同規(guī)劃和實時可靠信息的獲取與虛實融合通道的建立。虛擬仿真即實現(xiàn)對真實開采環(huán)境的虛擬環(huán)境下的精準(zhǔn)映射。在建立裝備與煤層三維模型的條件下，通過添加物理引擎和各結(jié)構(gòu)間約束關(guān)系建立靜態(tài)工作面模型?；谡鎸嶉_采數(shù)據(jù)，利用已有的裝備運行信息對其他裝備的位姿進行反演，進而實現(xiàn)對與之相關(guān)的煤層頂?shù)组_采環(huán)境三維重構(gòu)。隨著采煤工作的不斷進行，綜采工作面場景也在不斷地變化著，這就要求在虛擬場景內(nèi)實現(xiàn)對綜采裝備動作的控制以及煤層的動態(tài)更新，根據(jù)裝備的運行數(shù)據(jù)，利用深度學(xué)習(xí)算法進行未來開采運行信息的預(yù)測以實現(xiàn)未來開采環(huán)境的預(yù)重構(gòu)。

信息的獲取離不開傳感器，根據(jù)綜采裝備在開采過程中的特點建立信息傳感系統(tǒng)，對于監(jiān)測盲區(qū)采用裝備之間的空間位置關(guān)系進行推算，如依靠采煤機機身上的傳感器數(shù)據(jù)反演獲得刮板輸送機的實時三維形態(tài)，再通過實時通信手段將數(shù)據(jù)實時傳到上位機。數(shù)據(jù)的實時交互則是靠上位機軟件與Unity 3D 通過數(shù)據(jù)庫來實現(xiàn)的。最后一步則是處理所獲得的數(shù)據(jù)，并驅(qū)動虛擬裝備運行，進行實時場景呈現(xiàn)。近年來，基于數(shù)字孿生的綜采工作面虛擬監(jiān)控高可信度虛擬模型構(gòu)建、雙向信息通道與交互接口、實時運行數(shù)據(jù)驅(qū)動虛實同步運行等關(guān)鍵技術(shù)已基本突破，接下來可進一步融入透明地質(zhì)保障相關(guān)數(shù)據(jù)，并依托5G 網(wǎng)絡(luò)高速傳輸，實現(xiàn)整體工作面裝備與煤層運行的全要素高精度實時呈現(xiàn)。

2）虛擬迭代的推理預(yù)測決策能力（DT+）：主要包括在線模擬與預(yù)演和預(yù)測與決策的能力，在虛擬鏡像的基礎(chǔ)上，將深度學(xué)習(xí)、強化學(xué)習(xí)等智能算法與裝備運行機理融合，對實際裝備運行過程以及開采環(huán)境進行演化、推演?；诰C采工作面的歷史開采信息，提取裝備運行的運動規(guī)律以及裝備關(guān)鍵結(jié)構(gòu)件運行特性與開采環(huán)境變化之間的關(guān)系，對未來開采過程進行預(yù)測并為開采工藝的靈活調(diào)整提供指導(dǎo)；基于深度強化學(xué)習(xí)對虛擬開采裝備智能體的協(xié)同運行進行決策，保證虛擬綜采裝備在不確定開采環(huán)境下具有穩(wěn)定的開采策略支持?；诳臻g運動學(xué)與LSTM 神經(jīng)網(wǎng)絡(luò)預(yù)測融合的刮板輸送機調(diào)直方法就是利用在線模擬與預(yù)演和預(yù)測與決策的能力[27]。根據(jù)空間運動學(xué)和LSTM 神經(jīng)網(wǎng)絡(luò)建立預(yù)測模型，在研究刮板輸送機調(diào)直時，通過在虛擬煤層空間內(nèi)對裝備的動作進行預(yù)演，對比分析數(shù)據(jù)，得出軌跡修正模型。在綜采工作面的虛擬場景中，根據(jù)已有監(jiān)測信息對液壓支架的實際位姿進行分析，對有異常位姿的液壓支架決策出調(diào)架所需要的動作，完成虛擬場景內(nèi)的調(diào)架[28]。這一方面已經(jīng)開始研究，但是受限于傳感信息數(shù)量、精度、人工智能算法可靠性等方面問題，仍需進一步聯(lián)合攻關(guān)突破其關(guān)鍵技術(shù)。

3）由虛到實的復(fù)制控制能力（CPS）：推演完成后，應(yīng)對決策出的最優(yōu)值進行判定，綜合人和計算機的智慧進行控制，使人從操作者變?yōu)楸O(jiān)控者、管理者。綜采工作面數(shù)字孿生系統(tǒng)的虛實交互包括物理綜采系統(tǒng)運行狀態(tài)在虛擬環(huán)境下的實時映射，以及虛擬綜采場景仿真結(jié)果對物理系統(tǒng)運行的實時控制。在對綜采系統(tǒng)進行虛擬仿真基礎(chǔ)上，通過虛實雙向數(shù)據(jù)通道將仿真結(jié)果信息實時反向傳遞至物理空間，可以實現(xiàn)數(shù)字模型對物理裝備及系統(tǒng)實際運行狀態(tài)動態(tài)調(diào)控。利用AR 技術(shù)可實現(xiàn)數(shù)字孿生工作面的反向控制，一方面是AR 設(shè)備具有與工作面設(shè)備交互的功能，從而能操縱綜采裝備，另一方面是物理裝備能獲得AR 設(shè)備上傳的數(shù)據(jù)，從而驅(qū)動物理綜采裝備與數(shù)字綜采裝備同步運動，實現(xiàn)反向控制。對于綜采工作面的現(xiàn)場工作人員來說，基于頭戴式增強現(xiàn)實設(shè)備與腦機接口設(shè)備可以實現(xiàn)手勢、語音、凝視、BCI（Brain-Computer Interface，腦機接口）四種交互模態(tài)。在常規(guī)狀態(tài)下，現(xiàn)場工作人員優(yōu)先使用手勢識別完成所需的交互。當(dāng)現(xiàn)場工作人員雙手被占用時，采用凝視與語音相結(jié)合的方式作為備用交互策略，使用凝視射線選取操作對象，再使用語音指令確認(rèn)操作，從而降低誤操作的概率。在工業(yè)現(xiàn)場出現(xiàn)突發(fā)狀況，來不及通過其他交互模態(tài)做出操作時，采用BCI 系統(tǒng)對現(xiàn)場工作人員本能的腦電信號做出分析并執(zhí)行相應(yīng)的命令。對于遠(yuǎn)程專家來說，通過鼠標(biāo)與鍵盤進行交互，方便快捷地為現(xiàn)場工作人員提供指導(dǎo)。目前，對利用AR 設(shè)備進行控制已有一定的研究，但是還存在延遲時間與傳輸精度方面的問題，還需要進一步提高。

4）虛擬與現(xiàn)實的人機無縫協(xié)作能力（IM）：主要包括人機融合與管理能力和AR 協(xié)同技術(shù)、機器人協(xié)同技術(shù)、虛擬人協(xié)同技術(shù)，形成以人為主的工業(yè)元宇宙系統(tǒng)，完成精益化管理。在綜采工作面運行中，人的作用在很多場景中不可或缺。

3 人機融合驅(qū)動的工作面IM 運行模式

隨著綜采工作面裝備智能化水平的提高，“機-機”之間的交互能力也隨之提升，人機融合驅(qū)動的工業(yè)元宇宙能獲得綜采工作面運行數(shù)據(jù)，而后利用人機交互技術(shù)，提升人的感知、決策、控制能力，進而提升工作面效率。人機交互技術(shù)是基于虛實融合方法實現(xiàn)的，人機融合與虛實融合是不可分割、相互交融的。下面對人機融合驅(qū)動的工作面IM 運行模式進行具體介紹。

3.1 人機協(xié)同的本質(zhì)和協(xié)同方式

對于綜采工作面來說，盡管智能化技術(shù)的發(fā)展使作業(yè)人員越來越少，但必須由操作人員完成智能系統(tǒng)無法完成的操作。智能化開采工作面系統(tǒng)的構(gòu)建不是追求絕對的無人場景，而是追求人機融合，融入人的經(jīng)驗和智慧。

工業(yè)元宇宙和工業(yè)數(shù)字孿生主要區(qū)別在于是否有虛擬工人參與生產(chǎn)過程。工業(yè)數(shù)字孿生追求無人車間、黑燈工廠，讓所有設(shè)備自動化運行。但在復(fù)雜的煤礦井下，大部分生產(chǎn)還是需要有人參與，IM 必須將虛擬人深度參與到綜采工作面的運行管理中。當(dāng)前的方式有3 種：①現(xiàn)場工人跟后臺專家通過XR眼鏡遠(yuǎn)程交互，即 “XR+”人機協(xié)同；②高智能化的巡檢機器人參與現(xiàn)場過程，即機器人驅(qū)動的人機協(xié)同；③對高技能人才復(fù)刻數(shù)字人并在信息空間中從事操作活動，即“虛擬人”驅(qū)動的人機協(xié)同。

3.2 “XR+”人機協(xié)同

“XR+”人機協(xié)同是巡檢工跟集控工或后臺專家通過XR 眼鏡協(xié)作平臺交流，這種協(xié)作交流基于AR眼鏡的遠(yuǎn)程協(xié)助功能，如圖3 所示。巡檢工佩戴AR眼鏡，在巡檢過程中與集控工進行協(xié)調(diào)，集控工可以以巡檢工的視角觀察工作面運行情況，而AR 通過與后臺VR 系統(tǒng)相連接，把VR 計算的結(jié)果呈現(xiàn)在AR眼鏡中，讓多人進行協(xié)同評審，完成最優(yōu)決策與操作。利用AR 技術(shù)可以實現(xiàn)多終端AR 同地?zé)o縫協(xié)作與多終端遠(yuǎn)程AR 視頻會議。AR 移動/頭戴終端可與VR 技術(shù)相融合，對綜采設(shè)備進行位姿測量，同時，AR 設(shè)備還可對數(shù)字綜采裝備進行操縱[26]。

圖3 AR 眼鏡的遠(yuǎn)程協(xié)助功能Fig.3 Remote assistance function of AR glasses

3.3 機器人驅(qū)動的人機協(xié)同

隨著機器人技術(shù)的發(fā)展，井下巡檢機器人技術(shù)也得到了快速發(fā)展。軌道式巡檢機器人能利用自身搭載的傳感元件等采集裝備信息和視頻信息等傳回后臺，使人能獲得綜采工作面運行數(shù)據(jù)。但其軌道在液壓支架或者刮板輸送機上，由于工作面底板起伏，機器人運行柔性大，運行定位具有不確定性，無法將采集回來的點云、視頻等數(shù)據(jù)進行合并補償，巡檢效率不高。而刮板輸送機電纜槽的相關(guān)軌道，剛性運行容易卡頓，不能較好適應(yīng)隨機性的起伏變化，相關(guān)感知傳感器直接暴露在危險區(qū)域，容易被落下來的煤砸壞。

巡檢機器人最大的功能是智能感知，并不具備反向控制能力，這與機器人的“自主感知、自主決策與自主控制”思路背道而馳。因此，需開發(fā)自動行走在工作面的機器人，可以深入到危險的狹窄的環(huán)境中代替巡檢人員的實際巡檢工作。

與軌道式巡檢機器人相比，行走式巡檢機器人具有以下特點：①在感知方面，其上搭載有三維激光雷達，氣體檢測儀，深度相機等元件，獲取視覺、氣體含量、三維點云等信息，并可以利用自身的靈活性到達更多位置，獲取較為全面的信息。②在自主決策方面，能夠利用感知到的信息在虛擬系統(tǒng)內(nèi)重現(xiàn)物理工作面的運行情況，并檢測異常，利用算法決策出行走路徑與行走步態(tài)。③在控制方面，行走式巡檢機器人可以根據(jù)操作人員的指令對綜采工作面裝備做出部分簡單控制。巡檢機器人的結(jié)構(gòu)功能如圖4所示。

圖4 機器人結(jié)構(gòu)與功能Fig.4 Structure and function of robot

3.4 “虛擬人”驅(qū)動的人機協(xié)同

在智能化和數(shù)字化程度高的數(shù)字孿生綜采工作面，將人的意志、能力、標(biāo)準(zhǔn)的操作、應(yīng)急能力等進行全面復(fù)刻，構(gòu)建虛擬人在信息維度中操控虛擬設(shè)備以最優(yōu)運行方式去運行，再在物理層面按照信息空間最優(yōu)運行的方式進行操作。多個虛擬人分別對應(yīng)不同操作員崗位并完成相關(guān)各崗位任務(wù)，真實操作員監(jiān)督這些虛擬人完成相關(guān)工作。虛擬人模型的構(gòu)建需要依據(jù)各個礦工的體態(tài)以及身體參數(shù)：首先獲取人體骨骼點數(shù)據(jù)，形成參數(shù)化模型，然后進行外觀烘焙、添加貼圖等，最后對模型進行運動學(xué)解析，提取各關(guān)節(jié)數(shù)學(xué)模型，并通過kinect 體感設(shè)備，實現(xiàn)模型動態(tài)化。

虛擬人存在于虛擬系統(tǒng)中，按照所執(zhí)行的功能不同可以分為虛擬巡檢人員、虛擬支架工、虛擬采煤機工和虛擬集控操作人員。如圖5 所示。在綜采工作面精確監(jiān)測前提下，對虛擬人添加各種算法與AI，使其感知虛擬綜采工作面環(huán)境，行走于虛擬綜采工作面中，并具有感知、識別工作面異常狀態(tài)的功能，即擁有人的意志、能力、標(biāo)準(zhǔn)的操作、各種應(yīng)對危險的應(yīng)急能力。在虛擬監(jiān)測系統(tǒng)將綜采工作面信息同步到虛擬場景時，虛擬人就可以感知到物理裝備的運行狀態(tài)，并進行判斷與決策，進而調(diào)整綜采工作面的運行。而此時，人就可以通過遠(yuǎn)程監(jiān)督虛擬人的工作來實現(xiàn)對綜采工作面監(jiān)控。

圖5 虛擬人模型構(gòu)建與運行Fig.5 Model construction and operation of virtual human

3.5 人機協(xié)同帶來管理的提升和社會CPSS 系統(tǒng)

人機協(xié)同技術(shù)，應(yīng)該是AR 協(xié)作到人與機器人協(xié)同再到人與虛擬協(xié)同的發(fā)展，工作面虛實融合程度逐步升高。在5G 通訊、云平臺、統(tǒng)一的軟硬件接口等關(guān)鍵技術(shù)不斷突破，且在井下逐步工業(yè)應(yīng)用的前提下，若能實現(xiàn)AR 眼鏡的防爆功能，AR 協(xié)作可以在近幾年逐步實現(xiàn)；而人與機器人協(xié)同技術(shù)還距離較遠(yuǎn)，應(yīng)加大研發(fā)力度。在實現(xiàn)具有反向控制功能的綜采工作面數(shù)字孿生+系統(tǒng)后，就可以進入到人與虛擬人協(xié)同的狀態(tài)中。綜采工作面數(shù)字孿生中的監(jiān)測是一比一的復(fù)刻、是實時精準(zhǔn)的虛擬重構(gòu)，控制則是經(jīng)過推理以后的反向控制。而管理更多的是涉及到管理人員。由于具備了社會屬性，所以形成了社會物理信息系統(tǒng)（CPSS，Cyber Physical Social Systems），如圖6 所示。

圖6 人機協(xié)同帶來的提升Fig.6 Enhancement by man-machine coordination

人與機器的區(qū)別是，一方面，在復(fù)雜的井下環(huán)境工作，很多問題需要操作人員直接控制運行，而機器只具備低層級的AI，只能完成復(fù)雜程度不高的工作。而另一方面來說，身體狀態(tài)、情緒、精神等各方面均會對身處煤礦井下的操作人員帶來不確定性因素，導(dǎo)致操作失誤甚至安全問題。因此可以訓(xùn)練虛擬人，避免這些心理和生理問題。

在增強操作人員情感方面，基于工業(yè)元宇宙的社交屬性，創(chuàng)造一個平行世界，操作人員與其家庭成員身處異地但共同進入這個虛擬世界，感受近距離的陪伴，進而提升其幸福指數(shù)和工作效率，同時也會增加企業(yè)歸屬感。

操作人員也可攜帶體感交互、腦機接口設(shè)備等隨時獲得身體健康數(shù)據(jù)，更好地為工作服務(wù)。管理員可以讓處在不同空間人員的協(xié)同運行管理，如建立涵蓋地面和井下的VR/AR 交互系統(tǒng)，添加可穿戴設(shè)備把操作人員或者是巡檢人員數(shù)據(jù)接入到虛擬設(shè)備上進行整體的模擬和預(yù)測，把他們的觸覺延伸到井下進行虛擬會議，實現(xiàn)井下人員和地面的無縫虛擬會議。

4 工業(yè)元宇宙的初步認(rèn)識

工業(yè)元宇宙的前提是由實到虛精準(zhǔn)的復(fù)制映射能力、虛擬迭代的推理預(yù)測決策能力、由虛到實的復(fù)制控制能力。目前，虛擬監(jiān)測的能力較強，虛擬決策和虛擬控制的能力還有待加強。與數(shù)字孿生系統(tǒng)相比，工業(yè)元宇宙系統(tǒng)在數(shù)字孿生完成監(jiān)測的基礎(chǔ)上，可以實現(xiàn)人、虛擬人、機器人和綜采裝備在虛實世界的相互交互，在時間和空間的維度上對綜采工作面運行情況進行重構(gòu)和延伸，獲得綜采工作面過去、現(xiàn)在和未來的運行信息，全面提高人對工作面的感知，決策與控制能力。

液壓支架是綜采工作面的重要支護裝備，但當(dāng)前液壓支架的智能化程度較低。因此，本文以液壓支架為例，利用實驗室的綜采成套試驗系統(tǒng)從監(jiān)測、決策和控制方面對液壓支架數(shù)字孿生到工業(yè)元宇宙的過渡階段進行試驗。

4.1 基于工業(yè)元宇宙的液壓支架調(diào)架系統(tǒng)

按照工業(yè)元宇宙七層架構(gòu)，可具體實施為在三種人機交互模式的支撐下，由③建模與場景子系統(tǒng)、④虛擬監(jiān)測子系統(tǒng)、⑤云服務(wù)子系統(tǒng)、⑥虛擬決策子系統(tǒng)和⑦虛擬控制子系統(tǒng)，通過②虛實交互接口，共同完成對①物理樣機系統(tǒng)中液壓支架異常行為的智能分析、決策與調(diào)架，整體結(jié)構(gòu)如圖7 所示。

圖7 液壓支架的工業(yè)元宇宙系統(tǒng)Fig.7 Industrial metaverse system of hydraulic support

其中，①物理系統(tǒng)包括煤層底板模型、支運裝備、控制元件和監(jiān)測元件。通過②虛實交互接口，③建模與場景子系統(tǒng)以支架和煤層數(shù)據(jù)為基礎(chǔ)，構(gòu)建高保真虛擬模型。④虛擬監(jiān)測子系統(tǒng)內(nèi)添加了位姿重構(gòu)腳本、位姿描述腳本、監(jiān)測面板、控制面板和串行通訊接口，能根據(jù)傳感信息對虛擬空間內(nèi)的模型進行位姿重構(gòu)，顯示液壓支架的位姿參數(shù)，并分析判斷異常位姿，具體實施由實到虛精準(zhǔn)的復(fù)制映射能力。⑥虛擬決策子系統(tǒng)包括工況模擬腳本、調(diào)架決策腳本、仿真控制腳本、工作空間繪制器LineTools，能同步虛擬監(jiān)測子系統(tǒng)場景中支架位姿信息，在⑤云服務(wù)子系統(tǒng)的支持下，生成最優(yōu)決策調(diào)架指令控制虛擬調(diào)架，對應(yīng)的是虛擬迭代的推理預(yù)測決策能力。⑦虛擬控制子系統(tǒng)能同步虛擬監(jiān)測子系統(tǒng)的調(diào)架指令，并通過串行通訊接口向?qū)嵨镏Ъ芟掳l(fā)控制指令，實現(xiàn)動作控制，體現(xiàn)的是由虛到實的復(fù)制控制能力。

系統(tǒng)中的AR 遠(yuǎn)程協(xié)作技術(shù)是一種人機交互技術(shù)，通過AR 交互設(shè)備使得不同地點的操作人員實現(xiàn)遠(yuǎn)程協(xié)作。巡檢機器人巡檢于物理綜采工作面中，能將物理系統(tǒng)監(jiān)測數(shù)據(jù)傳回虛擬系統(tǒng)中，實現(xiàn)人、機器人與綜采工作面的虛實結(jié)合。虛擬人存在于虛擬系統(tǒng)中，依靠自身的AI 算法對液壓支架狀態(tài)進行判斷、決策與控制，這三種人機協(xié)作技術(shù)對應(yīng)了虛擬與現(xiàn)實的人機無縫協(xié)作能力。

4.2 系統(tǒng)“感知-決策-控制”通道測試

通過虛擬監(jiān)測子系統(tǒng)、虛擬決策子系統(tǒng)和虛擬控制子系統(tǒng)對物理系統(tǒng)進行虛擬監(jiān)測測試和反向控制測試。各傳感數(shù)據(jù)通過信息集成通過串口傳輸給上位機，經(jīng)過數(shù)據(jù)解析和處理轉(zhuǎn)化為可形成虛擬監(jiān)測場景，隨后決策子系統(tǒng)進行自主虛擬決策，形成控制指令，并通過計算機串口對指令進行解析并下發(fā)給對應(yīng)的物理樣機從機，最終控制執(zhí)行元件實現(xiàn)對應(yīng)動作。

結(jié)果表明：虛擬監(jiān)測系統(tǒng)實現(xiàn)對物理樣機的實時位姿監(jiān)測，從傳感數(shù)據(jù)打包到上位機接受時間延遲在0.15 s 內(nèi)；虛擬決策子系統(tǒng)中虛擬調(diào)架過程與物理樣機調(diào)架過程相似度高，決策可在0.2 s 內(nèi)算出最優(yōu)指令；虛擬控制子系統(tǒng)能使液壓支架實物實時響應(yīng)虛擬環(huán)境給出的狀態(tài)控制命令，時間延遲在0.1 s內(nèi)。因此，虛實雙向數(shù)據(jù)交互能夠滿足實時性要求。體現(xiàn)了由實到虛精準(zhǔn)的復(fù)制映射能力、虛擬迭代的推理預(yù)測決策能力和由虛到實的復(fù)制控制能力。

4.3 AR 遠(yuǎn)程協(xié)作測試

工業(yè)元宇宙系統(tǒng)中AR 遠(yuǎn)程協(xié)作技術(shù)的使用可以滿足在開采中工作面巡檢工和集控工協(xié)作的需求。兩類工作人員工作位置不同，可以獲取到的信息也不同。以液壓支架調(diào)架過程為例，當(dāng)集控工想獲取調(diào)架支架的更多信息時，可以通過AR 設(shè)備與巡檢工遠(yuǎn)程協(xié)作，進行近距離的溝通，更有利于決策的準(zhǔn)確性。同時，利用AR 設(shè)備還可以使現(xiàn)場人員具備用手勢，語音等可以反向控制液壓支架動作的能力。利用實驗室中的煤礦綜采成套試驗系統(tǒng)對基于AR 遠(yuǎn)程協(xié)作技術(shù)進行測試。

測試者A 模擬實際煤炭開采場景中的集控工，使用PC 端的綜采工作面虛擬監(jiān)控系統(tǒng)進行監(jiān)控。測試者B 位于煤礦綜采成套試驗系統(tǒng)中的不同區(qū)域，模擬現(xiàn)場巡檢工，佩戴HoloLens2 進行巡檢。當(dāng)測試者A 想獲取某一位置支架的現(xiàn)場調(diào)架情況時，或者人員B 想獲取來自專家的指導(dǎo)時，可以將兩終端通過信令服務(wù)器建立對等連接，任一方點擊對方用戶名進行視頻通話呼叫。通話過程中，測試者B 佩戴HoloLens2，頭部朝向液壓支架，測試者A 能接收由HoloLens2 傳回的視頻畫面，過程如圖3 所示。在監(jiān)測方面，集控工測試者A 利用AR 設(shè)備獲得工作面信息；在決策方面，巡檢工B 獲得了集控工測試者A 的決策信息。

測試結(jié)果表明，工業(yè)元宇宙系統(tǒng)中的AR 遠(yuǎn)程協(xié)作技術(shù)能使集控工獲得高度的真實性與沉浸感，增強對綜采工作面細(xì)節(jié)的感知，總體把握工作面整體運行情況。與身處現(xiàn)場的巡檢工進行遠(yuǎn)程協(xié)作，將集控工全局與巡檢工局部視角信息融合，進而協(xié)同決策與控制調(diào)架。經(jīng)過測試AR 協(xié)作方式較巡檢工單人手動調(diào)架質(zhì)量和效率提升近30%。

4.4 機器人巡檢測試

選擇能夠行走于綜采工作面內(nèi)并觸發(fā)液壓支架電液控按鈕的六足機器人進行機器人巡檢實驗測試。該機器人具有路徑規(guī)劃與步態(tài)規(guī)劃系統(tǒng)，機身上搭載著三維雷達，氣體監(jiān)測儀，深度相機等傳感器來完成對物理工作面的監(jiān)測。同時，在工業(yè)元宇宙系統(tǒng)內(nèi)有著巡檢機器人與虛擬系統(tǒng)的雙向交互通道，來完成虛擬監(jiān)測與控制。利用實驗室的煤礦綜采成套試驗系統(tǒng)對機器人進行測試，如圖8 所示。

圖8 巡檢機器人Fig.8 Inspection robot

在實驗室環(huán)境下，先確定物理空間與虛擬空間統(tǒng)一的坐標(biāo)基準(zhǔn)，然后巡檢機器人開始行走于綜采工作面中，利用傳感器獲得監(jiān)測信息，利用三維雷達來獲取點云分析信息，將分析結(jié)果呈現(xiàn)到虛擬系統(tǒng)中。當(dāng)監(jiān)測到異常，機器人需要觸發(fā)某臺液壓支架電液控上的按鈕時，機器人根據(jù)環(huán)境分析步態(tài)，利用算法來規(guī)劃路徑，進行操作。測試結(jié)果表明，巡檢機器人能對液壓支架的狀態(tài)進行監(jiān)測，虛擬系統(tǒng)可基于監(jiān)測結(jié)果對巡檢機器人的動作與行走路線進行決策，并控制巡檢機器人運動來控制支架的動作?？纱嫜矙z工進入工作面巡檢，提高了整體安全效率。但當(dāng)前巡檢機器人智能化程度還相對較低，僅可完成巡檢人員操作的50%的功能。隨著機器人動作、傳感、控制等各功能模塊的改進和優(yōu)化，加之通過多臺機器人協(xié)同運行的方式，預(yù)期效率還能進一步提升，發(fā)展?jié)摿^大。

4.5 虛擬人測試

虛擬人運行于工業(yè)元宇宙的虛擬系統(tǒng)中，以AI和算法為支撐，在虛擬監(jiān)測準(zhǔn)確的前提下，根據(jù)監(jiān)測結(jié)果進行虛擬決策與虛擬控制。目前，在做到虛擬人礦工與物理人的同步動作，并通過體感交互的方式完成對操縱設(shè)備的操縱基礎(chǔ)上，可同步完成物理人各操作動作的人體骨骼信息采集，通過建立骨骼動作數(shù)據(jù)集，訓(xùn)練AI 識別模型，完成預(yù)判操作人員的操作意圖，傳達給虛擬人完成部分決策工作。同時將虛擬決策子系統(tǒng)中提取到的調(diào)架知識賦給虛擬人，可進一步支持虛擬人做出較好的調(diào)架決策。利用實驗室的煤礦綜采成套試驗系統(tǒng)對虛擬人進行測試，如圖9 所示。

圖9 虛擬人測試Fig.9 Virtual human experiment

首先完成定制化虛擬礦工三維模型的構(gòu)建，將Azure Kinect 體感交互設(shè)備擺正位置，實時捕捉骨骼信息到上位機，驅(qū)動虛擬人同步運行，并將位置與動作映射到綜采工作面虛擬場景中。被試者站于距離攝像頭約1.5 m 的位置，自由動作，虛擬系統(tǒng)中的虛擬人完成與物理人同步動作，運行正常，進而實現(xiàn)虛實同步映射功能。模擬集控工和巡檢工通過手勢動作控制虛擬人在虛擬場景中漫游監(jiān)測，對液壓支架進行遠(yuǎn)程干預(yù)的升柱、降柱操作，并在集控中心內(nèi)通過屏幕界面得到現(xiàn)場情況反饋其實驗過程。

測試結(jié)果表明，物理人可同步控制虛擬人完成相關(guān)調(diào)架動作，此種調(diào)架質(zhì)量可以達到巡檢工現(xiàn)場手動操作效率的62%。將虛擬決策子系統(tǒng)中提取到的調(diào)架知識賦給虛擬人，可進一步支持虛擬人做出較好的調(diào)架行為，此種方式調(diào)架質(zhì)量可上升到巡檢工現(xiàn)場手動操作效率的75%。隨著AI 模型和虛擬人相關(guān)技術(shù)的不斷突破，預(yù)計相關(guān)調(diào)架效率也可進一步提升。

4.6 討 論

綜采工作面液壓支架操作方法涉及到多個維度，現(xiàn)通過支架調(diào)架操作對這些方法進行對比分析，見表1。

表1 工業(yè)元宇宙與數(shù)字孿生研究方法對比Table 1 Comparison of research methods between industrial meta universe and digital twin

1）人工調(diào)架是操作人員直接在工作面觀察并結(jié)合自身經(jīng)驗，對液壓支架進行決策控制。

2）基于虛擬監(jiān)測場景，巡檢人員可以先通過虛擬場景對整體綜采工作面有一個了解，然后到達需要操作的地方進行操控，減少了巡檢的工作量。

3）由虛擬系統(tǒng)做決策的液壓支架控制系統(tǒng)具有虛擬監(jiān)測功能、虛擬決策功能、虛擬控制功能。液壓支架調(diào)架過程是通過在虛擬決策系統(tǒng)中計算出最優(yōu)方案，再加上人對決策系統(tǒng)反映出的調(diào)架結(jié)果進行驗證，最后由虛擬控制系統(tǒng)控制液壓支架調(diào)架。這種方法的調(diào)架結(jié)果主要依托于計算機的計算，人也可以在虛擬系統(tǒng)中觀測到調(diào)架結(jié)果，在必要的時候進行干預(yù)，實現(xiàn)了對調(diào)架動作的“雙保險”，即綜合人和計算機判斷。

4）AR 遠(yuǎn)程協(xié)作技術(shù)的應(yīng)用，使集控工能夠與現(xiàn)場巡檢工進行遠(yuǎn)程交流，并能使集控工近距離地觀察到現(xiàn)場的工作情況，也能使巡檢工獲得來自遠(yuǎn)程的指導(dǎo)。在液壓支架調(diào)架的過程中，決策結(jié)果由虛擬決策系統(tǒng)給出，集控工可以在看到虛擬系統(tǒng)中的調(diào)架結(jié)果，同時也可以通過AR 遠(yuǎn)程與現(xiàn)場操作人員進行協(xié)作，近距離觀察綜采工作面液壓支架的調(diào)架過程，實現(xiàn)了綜合現(xiàn)場圖像，集控工巡檢工兩工種和計算機的判斷的“三保險”。

5）巡檢機器人在綜采工作面內(nèi)主要是實現(xiàn)對工作面監(jiān)測和一些簡單的操作。巡檢機器人在綜采工作面的使用可以代替現(xiàn)場工作人員的一些工作，從而提高現(xiàn)場工作人員的安全性。

6）虛擬人主要是運用AI 技術(shù)，使虛擬人能有人的意志、能力、標(biāo)準(zhǔn)的操作、各種應(yīng)對危險的應(yīng)急能力。虛擬人存在于虛擬系統(tǒng)中，行走于虛擬場景中，能對虛擬系統(tǒng)內(nèi)的變化自主做出決策。而人只需要對虛擬人進行監(jiān)控即可。

從物理層面到數(shù)字孿生層面再到工業(yè)元宇宙層面，不斷提高了綜采工作面工作的可靠性，提高了人對工作面的感知與控制，為智能化工作面提供了基礎(chǔ)，為人更好更安全的工作提供了可能性。

5 結(jié)論

1）對虛實融合的綜采工作面進行深入研究，探索從數(shù)字孿生到工業(yè)元宇宙的過渡路徑，提出了工業(yè)元宇宙驅(qū)動的綜采工作面構(gòu)想。在工業(yè)元宇宙中，信息空間能夠進行更多的運算、迭代與優(yōu)化，為物理過程提供更完善的指導(dǎo)與支撐；為了實現(xiàn)數(shù)字孿生到工業(yè)元宇宙的過渡，應(yīng)按照四大能力循序漸進，依次突破所涉及的關(guān)鍵技術(shù)。

2）人機協(xié)同技術(shù)是實現(xiàn)綜采工作面工業(yè)元宇宙的關(guān)鍵，是工業(yè)元宇宙具備由實到虛精準(zhǔn)的復(fù)制映射能力、虛擬迭代的推理預(yù)測決策能力、由虛到實的復(fù)制控制能力到虛擬與現(xiàn)實的人機無縫協(xié)作能力的基礎(chǔ)。對“XR+”人機協(xié)同、機器人驅(qū)動的人機協(xié)同等技術(shù)進行探索，為綜采工作面人機協(xié)同提供思路，有助于形成人機融合驅(qū)動的綜采工作面運行模式。

3）基于工業(yè)元宇宙驅(qū)動的工作面系統(tǒng)框架與綜采工作面人機協(xié)同模式的探索。認(rèn)為人機融合驅(qū)動的工作面AR 遠(yuǎn)程協(xié)作技術(shù)提高人對工作面的感知，可提高工作效率與準(zhǔn)確性；巡檢機器人技術(shù)提高人的安全性；虛擬人技術(shù)減少人的工作量，解放勞動力，更好的滿足人的需求。借助工業(yè)元宇宙理念，融合現(xiàn)有的虛擬監(jiān)測技術(shù)、虛擬決策技術(shù)與虛擬控制技術(shù)構(gòu)建綜采工作面智能化系統(tǒng)。