謝娟英，曹嘉文，馬麗濱，甄文全，陳振寧,4，李曉東，李后魂，許升全*

1. 陜西師范大學(xué)計(jì)算機(jī)科學(xué)學(xué)院，西安 710119

2. 陜西師范大學(xué)生命科學(xué)學(xué)院，西安 710119

3. 欽州學(xué)院海洋學(xué)院，廣西欽州 535011

4. 青海師范大學(xué)生命科學(xué)學(xué)院，西寧 810008

5. 河池學(xué)院化學(xué)與生物工程學(xué)院，廣西河池 546300

6. 南開(kāi)大學(xué)生命科學(xué)學(xué)院，天津 300071

數(shù)據(jù)庫(kù)（集）基本信息簡(jiǎn)介

引 言

蝴蝶是節(jié)肢動(dòng)物門昆蟲(chóng)綱鱗翅目錘角亞目昆蟲(chóng)的統(tǒng)稱[1]。其最引人關(guān)注的特征就是翅和身體表面由不同形態(tài)和色彩的鱗片所形成的絢麗多彩的圖案和花紋。這些色彩和花紋與蝴蝶的擬態(tài)、保護(hù)色、求偶等行為有關(guān)；也是千百年來(lái)蝴蝶作為文化昆蟲(chóng)而被人們描繪、歌頌的原因[1]。全球目前已知的蝴蝶種類約18 000種，每種蝴蝶都基本固定取食少數(shù)幾種植物，其發(fā)生與植物和生態(tài)系統(tǒng)的變化密切相關(guān)，是重要的環(huán)境指示昆蟲(chóng)和生物多樣性監(jiān)測(cè)指示生物[2-3]。對(duì)蝴蝶物種的快速準(zhǔn)確鑒定是生物學(xué)多樣性保護(hù)和蝴蝶文化發(fā)展的迫切需求，但人工對(duì)蝴蝶進(jìn)行鑒別和分類是一件非常耗時(shí)耗力的工作，且對(duì)專家的分類經(jīng)驗(yàn)依賴度很高。近年來(lái)出現(xiàn)了不少關(guān)于蝴蝶自動(dòng)識(shí)別的研究。例如，基于內(nèi)容檢索的蝴蝶所屬科的識(shí)別[4]、基于極限學(xué)習(xí)機(jī)的蝴蝶種類自動(dòng)識(shí)別[5]和基于單隱層神經(jīng)網(wǎng)絡(luò)的蝴蝶識(shí)別[6]等。然而，這些研究所使用的數(shù)據(jù)集均為蝴蝶標(biāo)本的模式照片，且涵蓋的種類較少，研究結(jié)果無(wú)法應(yīng)用到對(duì)蝴蝶生態(tài)照片的識(shí)別，特別是從生態(tài)照片中區(qū)別蝴蝶和環(huán)境背景。鑒于此，本數(shù)據(jù)集通過(guò)野外拍攝、蝴蝶愛(ài)好者捐贈(zèng)等方式收集、篩選、整理了一組自然環(huán)境中的蝴蝶生態(tài)照片，并提供了PASCAL VOC 2007格式的記錄照片中蝴蝶種類和位置信息的標(biāo)注文件，以及每張照片的掩模。本蝴蝶生態(tài)照片數(shù)據(jù)集是已完成的第三屆中國(guó)數(shù)據(jù)挖掘競(jìng)賽（國(guó)際首次蝴蝶識(shí)別大賽）的競(jìng)賽數(shù)據(jù)，包括了競(jìng)賽使用的全部蝴蝶生態(tài)照片訓(xùn)練數(shù)據(jù)，是目前世界上唯一的蝴蝶生態(tài)照片數(shù)據(jù)集，解決了蝴蝶自動(dòng)識(shí)別領(lǐng)域現(xiàn)有數(shù)據(jù)只包含有蝴蝶標(biāo)本照片且種類較少的局限，填補(bǔ)了蝴蝶自動(dòng)識(shí)別領(lǐng)域尚無(wú)生態(tài)照片數(shù)據(jù)的空白。競(jìng)賽使用的訓(xùn)練數(shù)據(jù)還包括周堯先生的《中國(guó)蝶類志》[1]全部蝴蝶照片。希望本數(shù)據(jù)集能為昆蟲(chóng)分類、目標(biāo)檢測(cè)和自動(dòng)識(shí)別領(lǐng)域的相關(guān)研究提供數(shù)據(jù)支持。

1 數(shù)據(jù)采集和處理方法

1.1 數(shù)據(jù)采集方法

本數(shù)據(jù)集中蝴蝶的生態(tài)照片來(lái)源于野外實(shí)地拍攝和蝴蝶愛(ài)好者的捐贈(zèng)，均為高清單反相機(jī)拍攝所得，保證了照片的質(zhì)量。

1.2 數(shù)據(jù)處理方法

照片中的蝴蝶依據(jù)《中國(guó)蝶類志》[1]《中國(guó)蝴蝶圖鑒》[7]等蝴蝶分類文獻(xiàn)鑒定到物種。我們使用labelImg工具標(biāo)記照片中蝴蝶的位置和類別，并生成PASCAL VOC 2007格式的標(biāo)注文件，蝴蝶位置由矩形框給出，一張照片對(duì)應(yīng)一個(gè)標(biāo)注文件。另外，為了方便圖像分割領(lǐng)域研究者使用，我們提供了每張照片的掩模，使用labelme工具，用多邊形描繪蝴蝶的外邊緣，每張照片生成一個(gè)標(biāo)注文件并轉(zhuǎn)換為掩模圖片，以png格式的圖片保存。

2 數(shù)據(jù)樣本描述

數(shù)據(jù)集共包含721張照片，涵蓋94種蝴蝶。如圖1所示，自然環(huán)境中蝴蝶的照片與蝴蝶標(biāo)本照片的不同在于姿態(tài)各異，有些是正面照、有些是側(cè)面照、有些正在展翅、有些雙翅合攏等。特別是為了躲避天敵的捕食，大部分蝴蝶具有擬態(tài)和保護(hù)色，它們翅和身體的顏色和花紋與周圍環(huán)境相似，難以辨認(rèn)。

圖1 生態(tài)圖片部分樣本

蝴蝶生態(tài)照片的統(tǒng)計(jì)數(shù)據(jù)如圖2所示，大部分種類蝴蝶的樣本個(gè)數(shù)在13以內(nèi)，每種蝴蝶至少有1個(gè)樣本，最多包含61個(gè)樣本，呈現(xiàn)典型的長(zhǎng)尾分布。

圖2 蝴蝶生態(tài)圖片數(shù)據(jù)分布

每張照片都對(duì)應(yīng)一個(gè)PASCAL VOC 2007格式的xml標(biāo)注文件，文件中包含對(duì)應(yīng)的圖片名、圖片大小、蝴蝶種類和蝴蝶位置信息。其中蝴蝶分類精確到種，蝴蝶的位置由矩形框標(biāo)出，在標(biāo)注文件中記錄矩形框的對(duì)角位置信息。同時(shí)，每張照片對(duì)應(yīng)一張png格式的掩模圖片，可用于提取蝴蝶精確位置區(qū)域，為圖像分割等算法評(píng)價(jià)研究提供支持。

3 數(shù)據(jù)質(zhì)量控制和評(píng)估

本數(shù)據(jù)集中每張照片的蝴蝶都由昆蟲(chóng)分類學(xué)專家按照《中國(guó)蝶類志》等蝴蝶分類文獻(xiàn)進(jìn)行鑒定，保證了數(shù)據(jù)的準(zhǔn)確性。

蝴蝶的位置信息均為人工標(biāo)注，并經(jīng)過(guò)多次核查，以確保數(shù)據(jù)質(zhì)量。

本數(shù)據(jù)集已在“2018年第三屆中國(guó)數(shù)據(jù)挖掘競(jìng)賽——國(guó)際首次蝴蝶識(shí)別大賽”中發(fā)布供參賽者使用，競(jìng)賽圓滿結(jié)束。此次競(jìng)賽的圓滿成功也說(shuō)明了本數(shù)據(jù)集提供的照片數(shù)據(jù)和標(biāo)注數(shù)據(jù)質(zhì)量可信，可以為相關(guān)研究提供數(shù)據(jù)支持。

4 數(shù)據(jù)價(jià)值

本數(shù)據(jù)集提供了94種蝴蝶在其自然生態(tài)環(huán)境中的721張生態(tài)照片，并給出了照片中蝴蝶的種類和位置信息。由于蝴蝶有擬態(tài)和保護(hù)色，和周圍環(huán)境不易區(qū)別，所以識(shí)別生態(tài)照片中的蝴蝶種類是目標(biāo)檢測(cè)領(lǐng)域的挑戰(zhàn)性難題。雖然本數(shù)據(jù)集只包含了94種蝴蝶，沒(méi)有涵蓋全部的中國(guó)蝴蝶種類，但蝴蝶物種的識(shí)別是同一大類內(nèi)的小類間區(qū)分識(shí)別問(wèn)題，屬于細(xì)粒度分類，完全不同于常見(jiàn)的目標(biāo)檢測(cè)是不同大類物體的識(shí)別問(wèn)題，而且94類的分類問(wèn)題也是一個(gè)很挑戰(zhàn)的多類分類問(wèn)題；加上蝴蝶種類的識(shí)別主要依賴于蝴蝶翅膀圖案，而生態(tài)環(huán)境中拍攝的蝴蝶照片，其翅膀通常不會(huì)完全展開(kāi)，使得其分類特征很難獲得。細(xì)粒度多類分類和高難分類特征，使得訓(xùn)練自動(dòng)識(shí)別方法難度非常大。本數(shù)據(jù)集在為相關(guān)研究提供基礎(chǔ)數(shù)據(jù)的同時(shí)，也能促進(jìn)相關(guān)實(shí)際應(yīng)用的開(kāi)發(fā)，使得大眾及昆蟲(chóng)愛(ài)好者能更加方便地了解和認(rèn)識(shí)蝴蝶。

致 謝

本數(shù)據(jù)集曾在蝴蝶識(shí)別大賽中使用，在數(shù)據(jù)的整理和測(cè)試階段得到了南京大學(xué)計(jì)算機(jī)系高陽(yáng)教授、北京郵電大學(xué)杜軍平教授、北京交通大學(xué)于劍教授、山東財(cái)經(jīng)大學(xué)尹義龍教授、復(fù)旦大學(xué)張軍平教授、南京航空航天大學(xué)譚曉陽(yáng)教授的指導(dǎo)。特別感謝山東財(cái)經(jīng)大學(xué)呂鵬副教授、北京交通大學(xué)景麗萍教授、南京大學(xué)史穎歡副教授帶領(lǐng)各自團(tuán)隊(duì)在競(jìng)賽前對(duì)數(shù)據(jù)驗(yàn)證所做的大量工作。本數(shù)據(jù)在聽(tīng)取 2018年第三屆中國(guó)數(shù)據(jù)挖掘競(jìng)賽——國(guó)際首次蝴蝶識(shí)別大賽部分參賽隊(duì)伍建議的基礎(chǔ)上進(jìn)行了完善，對(duì)這些隊(duì)伍和隊(duì)員表示感謝。