劉桂平 李閩峰 李圣強(qiáng) 王 斌

（中國(guó)地震局地震預(yù)測(cè)研究所，地震預(yù)測(cè)重點(diǎn)實(shí)驗(yàn)室，北京 100036）

引言

高性能計(jì)算與科學(xué)研究的發(fā)展密不可分，科學(xué)研究永無(wú)止境的計(jì)算需求和高性能計(jì)算能力既相互制約又相互促進(jìn)。在我國(guó)地震研究領(lǐng)域中，高性能計(jì)算也有廣泛應(yīng)用，并取得了比較好的效果。如在地震預(yù)報(bào)（趙毅等，2007；郭婷婷等，2011）、抗震救災(zāi)（呂弋培等，2009）、地震勘探（張軍華等，2010；龍桂華等，2011）、地震工程（王洪濤等，2009；馬新生等，2010；陸新征等，2014，2015；占昌寶等，2016）以及地震動(dòng)力學(xué)研究（廖凱寧等，2015）等方面，高性能計(jì)算均提供了重要的技術(shù)支撐。

中國(guó)地震局地震預(yù)測(cè)研究所結(jié)合自身科研需要，于2009年建成了1套高性能集群計(jì)算系統(tǒng)（李閩峰等，2009；李圣強(qiáng)等，2012），其理論最高運(yùn)算能力可達(dá)17.38TFLOPS，實(shí)測(cè)最大運(yùn)算能力達(dá)到14.1TFLOPS。該系統(tǒng)于2009年10月正式投入使用，2012年成為中國(guó)地震局地震預(yù)測(cè)重點(diǎn)實(shí)驗(yàn)室的高性能計(jì)算平臺(tái)，并持續(xù)運(yùn)行至今。作為動(dòng)力地震預(yù)測(cè)方法研究的重要技術(shù)支撐平臺(tái)之一，該系統(tǒng)以震源環(huán)境、地震過(guò)程和震源破裂機(jī)理等地震科學(xué)基礎(chǔ)研究為理論依據(jù)，在技術(shù)上已可以為地震行業(yè)用戶(hù)提供計(jì)算服務(wù)。

高性能計(jì)算平臺(tái)屬于高投入、高消耗的綜合性軟硬件系統(tǒng)，運(yùn)行成本較高，電費(fèi)成本是其主要組成，研制高性能計(jì)算平臺(tái)計(jì)費(fèi)系統(tǒng)是平臺(tái)建設(shè)和管理的重要內(nèi)容之一（林皎等，2012）。此外，統(tǒng)計(jì)高性能計(jì)算平臺(tái)的使用效率、考評(píng)用戶(hù)的績(jī)效量化指標(biāo)數(shù)據(jù)等都需要獲取較為詳細(xì)的系統(tǒng)使用資源。盡管作業(yè)管理軟件本身包含作業(yè)統(tǒng)計(jì)模塊功能，但因其統(tǒng)計(jì)資源不盡合理，不能真實(shí)反映系統(tǒng)使用情況，無(wú)法滿(mǎn)足作業(yè)計(jì)費(fèi)需求。因此，考慮到地震預(yù)測(cè)重點(diǎn)實(shí)驗(yàn)室高性能計(jì)算平臺(tái)的良好應(yīng)用前景和用戶(hù)計(jì)量統(tǒng)計(jì)需求，同時(shí)也方便平臺(tái)應(yīng)用評(píng)價(jià)參考，開(kāi)發(fā)1套簡(jiǎn)單、實(shí)用的高性能計(jì)算平臺(tái)計(jì)費(fèi)服務(wù)系統(tǒng)尤為必要。

1 高性能計(jì)算平臺(tái)概況

中國(guó)地震局地震預(yù)測(cè)重點(diǎn)實(shí)驗(yàn)室的高性能計(jì)算平臺(tái)硬件主要由192個(gè)計(jì)算節(jié)點(diǎn)、9個(gè)I/O節(jié)點(diǎn)、1個(gè)登錄節(jié)點(diǎn)、1個(gè)管理節(jié)點(diǎn)、4組盤(pán)陣、1組計(jì)算與I/O網(wǎng)絡(luò)和1組管理網(wǎng)絡(luò)組成。該平臺(tái)不僅提供了Linux操作系統(tǒng)自帶的GNU C/C++、GNU Fortran免費(fèi)編譯器，還配置了豐富的商業(yè)編譯器和數(shù)學(xué)庫(kù)資源，如NAG Fortran、Intel C++，F(xiàn)ortran 77/90、Intel MPI、Platform MPI、Intel MKL等，同時(shí)配置了TotalView并行調(diào)試器協(xié)助用戶(hù)更好地調(diào)試并行程序；此外，還配置了GMT、MATLAB及與地震應(yīng)用密切相關(guān)的專(zhuān)業(yè)模塊。經(jīng)過(guò)幾年的穩(wěn)定運(yùn)行，該平臺(tái)集成了豐富的專(zhuān)業(yè)應(yīng)用程序，主要包括三維譜有限單元法軟件SPECFEM3D，并行有限元程序生成系統(tǒng)pFEPG，全波三維Fréchet核反演程序，GPS專(zhuān)業(yè)解算軟件GAMIT/GLOBK、QOCA，分子動(dòng)力學(xué)模擬軟件VASP、PWSCF、Materials Studio等。

經(jīng)統(tǒng)計(jì)，地震預(yù)測(cè)重點(diǎn)實(shí)驗(yàn)室高性能計(jì)算平臺(tái)運(yùn)行作業(yè)數(shù)量超過(guò)38萬(wàn)個(gè)，消耗CPU資源超過(guò)1700萬(wàn)CPU機(jī)時(shí)，表明系統(tǒng)的應(yīng)用現(xiàn)狀良好。此外，通過(guò)對(duì)歷史作業(yè)消耗資源的分析發(fā)現(xiàn)，計(jì)算應(yīng)用從高性能并行應(yīng)用為主轉(zhuǎn)向大量可分解的串行應(yīng)用為主的普惠計(jì)算。目前，該平臺(tái)的主要應(yīng)用如下：

（1）川滇地區(qū)和高分示范區(qū)三維模型構(gòu)建與計(jì)算以及區(qū)域走滑斷層模型構(gòu)建與計(jì)算。

（2）解析GPS原始觀測(cè)數(shù)據(jù)，進(jìn)行地殼形變分析，并進(jìn)行地震斷層破裂模型的反演；重力數(shù)據(jù)處理及地下構(gòu)造反演；利用彈性和粘彈性球體位錯(cuò)理論計(jì)算大地震導(dǎo)致的同震和震后變形。

（3）利用高性能計(jì)算平臺(tái)融合地震波形數(shù)據(jù)系統(tǒng)進(jìn)行地震波形處理、圍陷波的正反演、強(qiáng)震動(dòng)模擬以及觸發(fā)地震和微震的模板掃描檢查等。

（4）利用從微觀到宏觀（量子力學(xué)、第一性原理、分子動(dòng)力學(xué)、耗散粒子動(dòng)力學(xué)和有限元方法）的跨尺度模擬方法，研究地球內(nèi)部高溫高壓條件下高壓礦物（長(zhǎng)石、方鎂鐵礦）、含水礦物（橄欖石、蛇紋石、角閃石、云母等）的物理化學(xué)性質(zhì)；探討孕震介質(zhì)的演化及其動(dòng)力學(xué)環(huán)境，探索地震預(yù)測(cè)理論方法。

2 計(jì)費(fèi)服務(wù)系統(tǒng)設(shè)計(jì)

2.1 問(wèn)題分析

目前主流的高性能計(jì)算平臺(tái)計(jì)費(fèi)系統(tǒng)包括基于PBS或TORQUE作業(yè)管理軟件設(shè)計(jì)的計(jì)費(fèi)或記賬系統(tǒng)（王偉等，2008；陳振婭等，2009；李惠歡等，2016）和基于LSF作業(yè)管理軟件設(shè)計(jì)的計(jì)費(fèi)配額系統(tǒng)計(jì)時(shí)統(tǒng)計(jì)系統(tǒng)（牛鐵等，2010；盛樂(lè)標(biāo)等，2014）。此外，還有基于校園網(wǎng)格計(jì)費(fèi)研究（劉明良，2008）和基于神威4000A系統(tǒng)及IBM系統(tǒng)設(shè)計(jì)的統(tǒng)一資源管理系統(tǒng)（沈瑜等，2014）。

地震預(yù)測(cè)重點(diǎn)實(shí)驗(yàn)室高性能計(jì)算平臺(tái)因集群管理軟件升級(jí)改造，運(yùn)行期分為2個(gè)階段，增加了研制開(kāi)發(fā)計(jì)費(fèi)服務(wù)系統(tǒng)的難度。第1階段從2009年6月至2012年10月，該平臺(tái)的集群管理軟件為CHESS2，作業(yè)管理系統(tǒng)為T(mén)ORQUE/MAUI。此階段存在2個(gè)問(wèn)題，一是部分成熟的商業(yè)應(yīng)用軟件和免費(fèi)應(yīng)用軟件對(duì)GCC、INTEL、HP等MPI并行程序的編譯運(yùn)行環(huán)境要求較高，TORQUE作業(yè)管理系統(tǒng)無(wú)法記錄完整準(zhǔn)確的CPU時(shí)間信息，需要人工校正；二是雖然具備多個(gè)開(kāi)源命令行作業(yè)日志信息分析工具，如PBSACCT、MYPBS、PERL-PBS-LOGS、PBSACCOUTING，但不具備友好的作業(yè)信息查詢(xún)、統(tǒng)計(jì)、計(jì)費(fèi)等功能。第2階段從2012年11月完成升級(jí)改造至今，該平臺(tái)的作業(yè)管理系統(tǒng)由TORQUE更換為L(zhǎng)SF 8.3 Express Edition，但缺乏相應(yīng)的用戶(hù)交流平臺(tái)和合理準(zhǔn)確的作業(yè)信息查詢(xún)、統(tǒng)計(jì)以及計(jì)費(fèi)功能。

2.2 設(shè)計(jì)思路

以作業(yè)管理系統(tǒng)日志為數(shù)據(jù)基礎(chǔ)，實(shí)現(xiàn)作業(yè)信息的提取、分析和校正，建立完整準(zhǔn)確的作業(yè)信息庫(kù)，存入MYSQL數(shù)據(jù)庫(kù)，通過(guò)B/S架構(gòu)滿(mǎn)足用戶(hù)準(zhǔn)實(shí)時(shí)作業(yè)查詢(xún)和歷史作業(yè)查詢(xún)、統(tǒng)計(jì)、計(jì)費(fèi)功能以及作業(yè)預(yù)約服務(wù)，并融合Ganglia集群監(jiān)控功能、留言板功能和信息發(fā)布功能，整合成1套高性能計(jì)算平臺(tái)計(jì)費(fèi)服務(wù)系統(tǒng)。

2.3 關(guān)鍵技術(shù)

實(shí)現(xiàn)計(jì)費(fèi)服務(wù)系統(tǒng)需要重點(diǎn)解決2方面技術(shù)問(wèn)題，即采取何種方式計(jì)費(fèi)和作業(yè)日志信息如何提取。

2.3.1 計(jì)費(fèi)方式

在高性能計(jì)算平臺(tái)作業(yè)計(jì)費(fèi)服務(wù)系統(tǒng)中，作業(yè)計(jì)費(fèi)核心要解決的是如何計(jì)費(fèi)（何戈等，2003）。準(zhǔn)確的作業(yè)計(jì)費(fèi)信息不僅可以為高性能計(jì)算用戶(hù)提供可靠的計(jì)算量數(shù)據(jù)，也可為制定計(jì)算服務(wù)價(jià)格提供參考。

高性能計(jì)算平臺(tái)提供給用戶(hù)CPU時(shí)、內(nèi)存、虛擬內(nèi)存、硬盤(pán)空間、網(wǎng)絡(luò)帶寬等資源。與作業(yè)CPU time（CPU執(zhí)行程序指令累計(jì)所用的脈沖時(shí)間）相比，Wall time（墻上時(shí)間，即作業(yè)開(kāi)始執(zhí)行和作業(yè)結(jié)束的時(shí)間差）更符合作業(yè)對(duì)計(jì)算資源的實(shí)際占用，因此，用戶(hù)使用集群完成計(jì)算任務(wù)后，采用Wall time為基礎(chǔ)計(jì)算CPU消耗量（盛樂(lè)標(biāo)等，2014），考慮到作業(yè)有串行和并行情況，可表示為：

而內(nèi)存和虛擬內(nèi)存資源的使用是動(dòng)態(tài)的，因此采用了作業(yè)日志信息中的最大物理內(nèi)存和虛擬內(nèi)存作為計(jì)算參考。另外，網(wǎng)絡(luò)帶寬屬于集群系統(tǒng)環(huán)境和性能指標(biāo)，不單獨(dú)在作業(yè)計(jì)費(fèi)中體現(xiàn)；硬盤(pán)空間通常是分配給用戶(hù)的固定存儲(chǔ)空間，不屬于單獨(dú)作業(yè)，該部分可以通過(guò)按年或按月的方式收取存儲(chǔ)空間費(fèi)。

考慮到CPU、內(nèi)存、虛擬內(nèi)存在作業(yè)計(jì)算中的需求重要性有所差別，因此為不同種類(lèi)的資源賦予不同的權(quán)重因子以體現(xiàn)其計(jì)費(fèi)的差異性。

綜上所述，作業(yè)資源使用計(jì)費(fèi)公式可表示為：

2.3.2 作業(yè)日志信息提取

（1）TORQUE歷史作業(yè)信息提取

PBS是目前歷史最久、支持最廣、功能較為豐富的集群作業(yè)管理軟件包之一，其包括3個(gè)主要分支：OpenPBS、PBS Pro和TORQUE。TORQUE是Adaptive Computing公司基于OpenPBS后續(xù)支持的開(kāi)源版本，通過(guò)和Maui調(diào)度器相結(jié)合，成為當(dāng)前分布式集群最流行的資源調(diào)度和作業(yè)管理開(kāi)源系統(tǒng)。TORQUE作業(yè)日志信息一般存放在/var/torque/server_priv/accounting目錄下，每天的日志信息存放在以日期命名（文件格式：YYYYMMDD）的文件中，日志記錄8種不同的標(biāo)記事件，包括作業(yè)開(kāi)始（S）、作業(yè)設(shè)置檢查點(diǎn)（C）、作業(yè)放棄（A）、作業(yè)排隊(duì)（Q）、作業(yè)返回（R）、作業(yè)刪除（D）、作業(yè)檢查點(diǎn)重啟（T）和作業(yè)退出（E）（李惠歡等，2016）。采用Linux shell和Perl腳本程序分別完成歷史作業(yè)信息收集、作業(yè)信息入庫(kù)和數(shù)據(jù)的匯總。

通過(guò)Perl語(yǔ)言編寫(xiě)腳本程序提取數(shù)據(jù)到數(shù)據(jù)庫(kù)computing表torque_job。作業(yè)數(shù)據(jù)表包含用戶(hù)名（user）、作業(yè)名稱(chēng)（jobname）、作業(yè)提交節(jié)點(diǎn)（jobsubmithost）、作業(yè)編號(hào)（jobid）、作業(yè)核數(shù)（cores）、作業(yè)隊(duì)列（queue）、作業(yè)創(chuàng)建時(shí)間（jobcreatetime）、作業(yè)進(jìn)入排隊(duì)時(shí)間（jobqueuetime）、作業(yè)可執(zhí)行時(shí)間（jobexcutabletime）、作業(yè)開(kāi)始時(shí)間（jobstarttime）、作業(yè)結(jié)束時(shí)間（jobendtime）、作業(yè)退出狀態(tài)（exitstatus，0為正常退出，其它為異常退出）、作業(yè)CPU時(shí)間（cputime）、作業(yè)消耗物理內(nèi)存（mem）、作業(yè)消耗虛擬內(nèi)存（vmem）、作業(yè)運(yùn)行時(shí)間（walltime）、校正系數(shù)（correctfactor）、作業(yè)CPU校正時(shí)間（correctcputime）、作業(yè)CPU時(shí)間轉(zhuǎn)化為秒（cputimesec）、作業(yè)運(yùn)行時(shí)間轉(zhuǎn)化為秒（walltimesec）、作業(yè)完成記錄時(shí)間（eventtime）。

（2）LSF作業(yè)信息提取

LSF是加拿大Platform公司研制的分布式管理和調(diào)度集群管理軟件，在系統(tǒng)容錯(cuò)、負(fù)載平衡、進(jìn)程遷移、檢查點(diǎn)操作上具備更好的實(shí)用性，已成為集群管理軟件領(lǐng)域中的國(guó)際工業(yè)標(biāo)準(zhǔn)。

LSF日志信息通常存放在以“l(fā)sb.acct”或“l(fā)sb.acct.X”格式命名的文件（其中X是阿拉伯?dāng)?shù)字）中，文件的每行存儲(chǔ)1個(gè)作業(yè)日志，包含作業(yè)ID、作業(yè)完成時(shí)間、提交時(shí)間、調(diào)度時(shí)間、開(kāi)始時(shí)間、結(jié)束時(shí)間、使用CPU核數(shù)、作業(yè)屬主、執(zhí)行節(jié)點(diǎn)列表、隊(duì)列名、執(zhí)行文件名等50多個(gè)字段，這些文件保存在LSF系統(tǒng)的管理節(jié)點(diǎn)logdir目錄下。

目前，主要有2種方式獲取LSF作業(yè)信息：①使用腳本語(yǔ)言處理，如基于Python的Python LSF collection開(kāi)源軟件包，通過(guò)引用該包提供的類(lèi)編寫(xiě)相應(yīng)的腳本提取作業(yè)信息，這種方法比較簡(jiǎn)單；②基于LSF API和LSB API的底層接口，通過(guò)C語(yǔ)言提取結(jié)構(gòu)化數(shù)據(jù)方式獲取作業(yè)的詳細(xì)信息（盛樂(lè)標(biāo)等，2014）。本文采用第1種方式，通過(guò)Python腳本acctfile.py實(shí)現(xiàn)歷史作業(yè)信息的提取和入庫(kù)功能，利用Crontab定時(shí)器結(jié)合Shell腳本定時(shí)更新（每5分鐘）MYSQL數(shù)據(jù)庫(kù)lsf_job表中的歷史作業(yè)信息，以供查詢(xún)。

此外，為了方便用戶(hù)查詢(xún)運(yùn)行作業(yè)（running）、即將運(yùn)行作業(yè)（pending）、掛起作業(yè)（suspended）、隊(duì)列（queue）和主機(jī)（host）信息，本文采用shell腳本提取bjobs、bqueues、bhosts命令輸出信息和存儲(chǔ)入庫(kù)，并利用Crontab定時(shí)更新（每5分鐘），實(shí)現(xiàn)準(zhǔn)實(shí)時(shí)的作業(yè)信息查詢(xún)和隊(duì)列、節(jié)點(diǎn)信息查詢(xún)。

3 系統(tǒng)實(shí)現(xiàn)

3.1 開(kāi)發(fā)環(huán)境

系統(tǒng)采用開(kāi)源的免費(fèi)框架結(jié)構(gòu)（Linux、Apache、PHP和MySQL），具備功能強(qiáng)大、運(yùn)行穩(wěn)定、技術(shù)成熟等特點(diǎn)。WEB開(kāi)發(fā)語(yǔ)言PHP具有以下優(yōu)勢(shì)：

（1）安全性好。PHP是開(kāi)源軟件，可以看到所有PHP的源代碼，同時(shí)PHP具有公認(rèn)的安全性能，它與Apache編譯相結(jié)合的方式也可以使其具有靈活的安全設(shè)定。

（2）移植性強(qiáng)。PHP幾乎支持所有的操作系統(tǒng)平臺(tái)及數(shù)據(jù)庫(kù)系統(tǒng)，并廣為流行。

（3）執(zhí)行效率高。PHP是1種強(qiáng)大的CGI腳本語(yǔ)言，語(yǔ)法混合了C、Java、Perl和PHP式的新語(yǔ)法，執(zhí)行網(wǎng)頁(yè)速度比CGI、Perl和ASP更快，且內(nèi)嵌Zend加速引擎，性能穩(wěn)定，占用系統(tǒng)資源少，代碼執(zhí)行速度快。

（4）擴(kuò)展性好。PHP具有很好的開(kāi)放性和擴(kuò)展性，其源代碼完全公開(kāi)，便于擴(kuò)展附加功能。

3.2 系統(tǒng)功能

系統(tǒng)具備如下功能：①用戶(hù)可查詢(xún)、統(tǒng)計(jì)、計(jì)算已消耗資源的費(fèi)用和正在運(yùn)行的作業(yè)情況、隊(duì)列情況、節(jié)點(diǎn)情況、集群概覽；②用戶(hù)可提交作業(yè)預(yù)約申請(qǐng)，管理員審核通過(guò)后線下處理預(yù)約作業(yè)；③用戶(hù)通過(guò)留言和在線服務(wù)功能，較好地實(shí)現(xiàn)交流；④用戶(hù)可以通過(guò)平臺(tái)資源下載文檔資料和查詢(xún)相關(guān)平臺(tái)制度，促進(jìn)了信息化和制度規(guī)范化；⑤采用分級(jí)用戶(hù)管理模式，根據(jù)用戶(hù)權(quán)限的不同進(jìn)行不同的功能操作；⑥可根據(jù)實(shí)際需要進(jìn)行調(diào)整和擴(kuò)展。

系統(tǒng)前臺(tái)和后臺(tái)功能模塊如圖1、2所示，后臺(tái)計(jì)費(fèi)功能管理如圖3所示。

圖1 前臺(tái)功能模塊Fig.1 Front function models

圖2 后臺(tái)功能模塊Fig.2 Back function models

3.3 計(jì)費(fèi)統(tǒng)計(jì)

綜合考慮作業(yè)實(shí)際消耗資源和運(yùn)維電費(fèi)，并依據(jù)前文提出的計(jì)算公式，本研究提出了一種可操作的資源價(jià)格計(jì)算方法及相應(yīng)的權(quán)重賦值，見(jiàn)表1。此外，選取了5個(gè)實(shí)際用戶(hù)2009—2017年的年度歷史作業(yè)進(jìn)行計(jì)費(fèi)統(tǒng)計(jì)，如圖4所示。

圖3 后臺(tái)計(jì)費(fèi)功能管理界面Fig.3 Back accounting function models

表1 計(jì)算資源價(jià)格及權(quán)重賦值Table 1 The price and weight value of computing resoureces

圖4 用戶(hù)年度計(jì)費(fèi)統(tǒng)計(jì)Fig.4 Annual accounting statistics of users

4 結(jié)語(yǔ)

基于中國(guó)地震局地震預(yù)測(cè)重點(diǎn)實(shí)驗(yàn)室高性能計(jì)算平臺(tái)良好的應(yīng)用前景和計(jì)費(fèi)需求，本文在高性能計(jì)算平臺(tái)作業(yè)計(jì)費(fèi)系統(tǒng)的基礎(chǔ)上，提出了利用作業(yè)管理系統(tǒng)TORQUE和LSF日志文件提取作業(yè)信息的方法，建立了可滿(mǎn)足復(fù)雜高性能計(jì)算平臺(tái)下作業(yè)計(jì)費(fèi)需求的簡(jiǎn)單、實(shí)用系統(tǒng)。該系統(tǒng)不僅可以準(zhǔn)實(shí)時(shí)查詢(xún)和顯示作業(yè)完成信息，還可以對(duì)消耗資源記錄信息進(jìn)行自動(dòng)校正并完成作業(yè)的正確計(jì)費(fèi)，與簡(jiǎn)單的命令行工具以及商業(yè)軟件相比，具有更廣泛的兼容性和普適性；另外，該系統(tǒng)還實(shí)現(xiàn)了對(duì)未完成作業(yè)、隊(duì)列、節(jié)點(diǎn)等集群系統(tǒng)查詢(xún)顯示功能、集群計(jì)費(fèi)參數(shù)配置管理功能以及欄目信息發(fā)布、在線交流等功能，這有利于促進(jìn)高性能計(jì)算平臺(tái)向管理公開(kāi)透明化和信息化方向發(fā)展，同時(shí)可充分發(fā)揮高性能計(jì)算平臺(tái)的科研輔助作用，并提高用戶(hù)使用高性能計(jì)算平臺(tái)的效率和便捷性。

隨著高性能計(jì)算技術(shù)的快速發(fā)展，云計(jì)算技術(shù)也日臻成熟，利用云計(jì)算技術(shù)實(shí)現(xiàn)地震行業(yè)的高性能計(jì)算資源整合并服務(wù)于地震研究領(lǐng)域?qū)⑹谴髣?shì)所趨?；诟咝阅苡?jì)算平臺(tái)作業(yè)日志的計(jì)費(fèi)服務(wù)系統(tǒng)只要稍加修改和完善，即可移植到云計(jì)算平臺(tái)應(yīng)用，具有較好的可擴(kuò)展性和應(yīng)用前景。