狹路相逢勇者勝―計算機學院研究生代表隊參加2013國際TREC評測競賽喜獲佳績

發布者:系統管理員發布時間:2014-04-08浏覽次數:35



     2013年度國際TREC評測競賽在本月圓滿地落下帷幕。此次競賽共有來自21個國家的52個大學或科研機構參加了8個任務的評測。bevictor伟德官网計算機學院TREC 評測小組參加了本屆國際TREC 評測Crowdsouring(衆包)任務的比賽,取得了APCorr指标排名第一,RMSE指标排名第二的好成績,并創造性地提出采用心理學行為分析的方法對衆包欺詐進行檢測,為探索衆包質量評價這一難點問題提供了具有理論依據和算法實現的一種具體解決方案。
      TREC(Text Retrieval Conference)是信息檢索領域人氣最旺、最權威的評測會議,由美國國防部高等研究計劃署(DARPA)與美國國家技術标準局(NIST)聯合主辦。自從1991年舉辦第一屆起,國際上每年的參與者包括MIT、Stanford、UCB、微軟研究院、Google、IBM研究院、新加坡國立大學、台灣大學、加拿大Quenes大學、日本東京大學、香港中文大學、英國城市大學等衆多當今IT界一流學府和企業科研機構,并且參賽機構還在不斷增加。國内參與者包括清華大學、北京大學、複旦大學、中科院、上海交大、哈工大、大連理工大學、北京郵電大學等重點大學。評測競賽由NIST向參賽者提供标準的語料庫(Corpus)、檢索條件和問題集(Query Set)、以及評測辦法(Evaluation),參賽者則被要求在規定的時間内構造系統并提交結果(Runs),由NIST評測各個任務結果的優劣,最終依據評測結果召開大會進行學術交流,發表會議論文。若某隊技術沒有貢獻價值、結果不可信或未在規定時間内完成則沒有成績排名,競賽要求十分苛刻(本屆報名時有來自36個國家的145個大學和機構,最後僅52個單位有結果和排名,其它均棄權或取消成績,bevictor伟德官网計算機學院TREC評測小組取得了APCorr指标排名第一,RMSE指标排名第二的成績)。TREC已發展成為一個國際化的面向信息檢索領域的大型頂級測試“競賽”。
       bevictor伟德官网計算機學院TREC 評測小組成員由該學院保研生學術基礎培訓實驗室的部分成員組成。2012年,計算機學院“校青年拔尖人才”李鵬老師為了更好地培養研究生的科研實戰能力,他在自己已經超負荷工作的狀态下向學院領導提出成立學院保研生學術基礎培訓實驗室,由他為已獲得保研資格和有志向讀研的大四學生義務進行培訓,并制定了“四個十”培訓計劃(即掌握十個經典程序、了解十個經典算法、聽取十場技術報告、進行十次互動交流)。計算機學院代表隊在本次TREC評測競賽中取得的優異成績是對“四個十”培訓效果與意義的檢驗和肯定,也是對李鵬老師及同學們辛勤付出的真誠回報。
        當我們為此事采訪年輕的李鵬教授時,他把所有的功勞和贊美之詞都給予了他的學生。他說:“首先,作為TREC 評測競賽曾經的親曆者,我深知此項評測競賽的難度和影響力之大,每年的對手中都不乏來自MIT、Stanford、UCB、微軟研究院、Google等大名頭機構的頂尖高手。今天我的學生再次參賽,我深知這種級别的評測團隊的基本配置一般都是博士,而我們的隊伍配置隻有幾隻剛上研一的“小菜鳥”。但他們不懼對手,勇往直前,并取得了優異的成績,我為他們感到驕傲;其次,TREC評測競賽目前還沒被列入學校資助的競賽範圍,即使獲得排名,他們也不會得到任何的加分與物質獎勵,我也一樣,而且我們還要自己承擔一些費用。那為什麼還要參賽?因為學生們知道這也許是他們人生之中唯一一次能代表哈理工、代表中國在世界級舞台上的表演。在評測準備過程中,當學生們跟我說想用心理學的艾賓浩斯遺忘曲線來檢測欺詐時,我被他們的創造力和想象力驚呆了。那一刻我覺得排名、加分和物質獎勵已經不重要了,學生的創造力就是對教師育人成果的最好的嘉獎;最後,我要說學校在發展中難免會遇到困難、甚至危機,但是大家不要氣餒,這些可愛的學生們就是我們明天的希望,相信哈理工一定會越來越好。這次評測競賽給我的啟示是:即使面對名校我們的學生仍不乏智慧、不缺能力,甚至更有驚人的創造力。隻要我們能充滿自信,敢于挑戰,我們就一定能取得驕人的成績。請記住--狹路相逢勇者勝!”





                                               指導教師李鵬教授



           獲獎同學-前排:畢婷婷,黃玖玲,張婷婷;後排:張茗越,劉洋,李思本,梁天歌 





Baidu
sogou