近日，自動(dòng)化學(xué)院（人工智能學(xué)院）顏成鋼教授團(tuán)隊(duì)以杭電為第一單位的論文Gait Recognition in the Wild with Multi-hop Temporal Switch被多媒體領(lǐng)域頂級(jí)會(huì)議ACM Multimedia（CCF A類會(huì)議）錄用。該文章的作者依次為鄭錦凱、劉鑫辰、古曉艷、孫垚棋、淦創(chuàng)、張繼勇、劉武、顏成鋼。
本文第一作者鄭錦凱表示，現(xiàn)有的步態(tài)識(shí)別研究主要集中于實(shí)驗(yàn)室場(chǎng)景。但是人們生活在現(xiàn)實(shí)世界中，真實(shí)場(chǎng)景下的步態(tài)識(shí)別是一個(gè)更加需要關(guān)注的實(shí)際問(wèn)題，近年來(lái)引起了多媒體領(lǐng)域和計(jì)算機(jī)視覺界的廣泛關(guān)注。目前的方法在實(shí)驗(yàn)室場(chǎng)景下獲得了極高的性能，但在最近提出的真實(shí)場(chǎng)景步態(tài)數(shù)據(jù)集上的準(zhǔn)確性卻很不理想，因?yàn)檫@些方法很難建模非受控場(chǎng)景（即真實(shí)場(chǎng)景）下的步態(tài)時(shí)序變化。本文提出了一種新的多級(jí)時(shí)間跳變方法，以實(shí)現(xiàn)對(duì)真實(shí)場(chǎng)景中步態(tài)模式的有效時(shí)間建模。具體地說(shuō)，我們?cè)O(shè)計(jì)了一種新的步態(tài)識(shí)別網(wǎng)絡(luò)——多跳時(shí)間跳變網(wǎng)絡(luò)(MTSGait)，它可以同時(shí)學(xué)習(xí)空間特征和多尺度時(shí)間特征。與現(xiàn)有的使用三維卷積進(jìn)行時(shí)間建模的方法不同，我們的方法通過(guò)二維卷積對(duì)步態(tài)序列的時(shí)間動(dòng)力學(xué)進(jìn)行建模。該方法與基于三維卷積的模型相比，只需要較少的模型參數(shù)就能達(dá)到較高的識(shí)別準(zhǔn)確率，同時(shí)降低了模型的優(yōu)化難度。該方法通過(guò)對(duì)二維卷積核的具體設(shè)計(jì)，消除了相鄰幀間的特征不對(duì)齊問(wèn)題。此外，本文還提出了一種新的步態(tài)數(shù)據(jù)采樣策略，即非循環(huán)連續(xù)采樣，使得模型能夠?qū)W習(xí)到更魯棒的步態(tài)時(shí)間特征。最后，本文提出的方法在GREW和Gait3D兩大公開的真實(shí)場(chǎng)景步態(tài)數(shù)據(jù)集上取得了顯著提升。
鄭錦凱同學(xué)是杭電智能信息處理實(shí)驗(yàn)的碩博連讀研究生。他專注于步態(tài)識(shí)別和計(jì)算機(jī)視覺領(lǐng)域的研究，此前以第一作者身份在計(jì)算機(jī)視覺頂級(jí)會(huì)議CVPR（CCF A類）和ISCAS國(guó)際學(xué)術(shù)會(huì)議上發(fā)表過(guò)論文，并榮獲2021年度IEEE MSA-TC最佳論文提名獎(jiǎng)。
杭州電子科技大學(xué)“智能信息處理實(shí)驗(yàn)室”(HDU IIPLab)主任為顏成鋼教授。實(shí)驗(yàn)室現(xiàn)有在職教師16名，含3位國(guó)家級(jí)人才及4位省級(jí)人才，包括浙江省“錢江學(xué)者”特聘教授、浙江省杰出青年基金獲得者、浙江省“151人才工程”第一層次、浙江省高校中青年學(xué)科帶頭人重點(diǎn)資助等多名國(guó)家及省部級(jí)人才。現(xiàn)有碩博生87名，畢業(yè)生多就職于阿里巴巴、騰訊、字節(jié)跳動(dòng)、?？低暋⑷A為、網(wǎng)易等國(guó)內(nèi)知名大公司。實(shí)驗(yàn)室采用與海內(nèi)外知名高校、研究所(清華大學(xué)、北京大學(xué)、中國(guó)科學(xué)院、美國(guó)北卡羅來(lái)納大學(xué)教堂山分校、澳大利亞悉尼科技大學(xué)、京東AI研究院等等)聯(lián)合培養(yǎng)制，長(zhǎng)期致力于智能信息處理方面的研究，主要研究方向包括：機(jī)器學(xué)習(xí)、模式識(shí)別、計(jì)算機(jī)視覺、計(jì)算機(jī)圖形學(xué)、醫(yī)學(xué)影像處理、生物信息學(xué)等。實(shí)驗(yàn)室為學(xué)校交叉創(chuàng)新團(tuán)隊(duì)，擁有自由開放的學(xué)術(shù)氛圍和國(guó)際前沿的研究方向，可以在多個(gè)學(xué)院招生，包括但不限于自動(dòng)化、計(jì)算機(jī)、電子、通信等學(xué)院。
