日前，2022年第十六屆全國知識(shí)圖譜與語義計(jì)算大會(huì)（CCKS2022）在秦皇島順利落下帷幕。傳音控股與華東師范大學(xué)計(jì)算機(jī)學(xué)院所聯(lián)合組建的科研團(tuán)隊(duì)Cube在CCKS2022“教科書示意圖問答”評(píng)測競賽中，同時(shí)榮獲二等獎(jiǎng)、創(chuàng)新技術(shù)獎(jiǎng)兩項(xiàng)優(yōu)異成績，并受邀在CCKS大會(huì)上進(jìn)行學(xué)術(shù)匯報(bào)。
第十六屆全國知識(shí)圖譜與語義計(jì)算大會(huì)(CCKS: China Conference on Knowledge Graph and Semantic Computing)由中國中文信息學(xué)會(huì)語言與知識(shí)計(jì)算專業(yè)委員會(huì)主辦。本屆會(huì)議主題“知識(shí)圖譜賦能數(shù)字經(jīng)濟(jì)”，旨在探討數(shù)字產(chǎn)業(yè)化與產(chǎn)業(yè)數(shù)字化過程中的語言理解、知識(shí)獲取、知識(shí)融合、知識(shí)推理等方面的關(guān)鍵技術(shù)，以知識(shí)驅(qū)動(dòng)創(chuàng)新應(yīng)用，加快數(shù)字社會(huì)建設(shè)步伐，營造良好數(shù)字生態(tài)，建設(shè)數(shù)字中國。
CCKS技術(shù)評(píng)測旨在為研究人員提供測試知識(shí)圖譜與語義計(jì)算技術(shù)、算法、及系統(tǒng)的平臺(tái)和資源，促進(jìn)國內(nèi)知識(shí)圖譜領(lǐng)域的技術(shù)發(fā)展，以及學(xué)術(shù)成果與產(chǎn)業(yè)需求的融合和對(duì)接。今年，經(jīng)過評(píng)測任務(wù)征集和評(píng)測組委會(huì)篩選，CCKS2022共設(shè)立5大評(píng)測主題，共14個(gè)評(píng)測任務(wù)。其中，“教科書示意圖問答”評(píng)測任務(wù)共吸引了來自南京大學(xué)、華東師范大學(xué)等高校以及中科院自動(dòng)化所等科研單位共101支隊(duì)伍參賽。
示意圖本質(zhì)是一種高度抽象的知識(shí)表達(dá)載體，通常由矩形、圓形等幾何形狀和箭頭、折線等邏輯符號(hào)組成，廣泛被應(yīng)用于教科書、百科、知識(shí)博客等教育場景和專業(yè)學(xué)科之中。傳音聯(lián)合團(tuán)隊(duì)所參加的“教科書示意圖問答”評(píng)測任務(wù)跨越多種模態(tài)的數(shù)據(jù)（圖、表、文本等），難度大，且涉及多個(gè)不同研究方向的技術(shù)，包含：視覺對(duì)象的檢測與對(duì)齊、文本知識(shí)的語義理解、跨模態(tài)閱讀理解問答、多模態(tài)知識(shí)表示、適應(yīng)動(dòng)態(tài)復(fù)雜知識(shí)的推理過程等。
在比賽過程中，傳音聯(lián)合團(tuán)隊(duì)的成員分工合作，首先通過相關(guān)調(diào)研，找到了一些數(shù)據(jù)集進(jìn)行參照對(duì)比，分析數(shù)據(jù)和任務(wù)的共性差異。由于賽事組織方提供的數(shù)據(jù)量較少，初步實(shí)驗(yàn)結(jié)果有很大的波動(dòng)，但團(tuán)隊(duì)成員基于扎實(shí)的學(xué)科專業(yè)基礎(chǔ)知識(shí)，堅(jiān)持逐個(gè)解決遇到的困難并且在有限時(shí)間內(nèi)進(jìn)行有價(jià)值的探索實(shí)驗(yàn)，最終取得不錯(cuò)的成績。
“教科書示意圖問答”評(píng)測任務(wù)不僅是未來跨媒體智能、智慧教育等應(yīng)用的重要基礎(chǔ)，也有助于提升計(jì)算機(jī)對(duì)人類認(rèn)知行為和抽象知識(shí)學(xué)習(xí)習(xí)慣的理解。未來，傳音將不斷提升自身科研和創(chuàng)新能力，在AI技術(shù)研究和智能終端應(yīng)用領(lǐng)域繼續(xù)發(fā)力，推動(dòng)相關(guān)技術(shù)在新興市場智能終端多語種語音助手、輿情分析、智能客服等領(lǐng)域的落地應(yīng)用，以技術(shù)創(chuàng)造更多社會(huì)價(jià)值。
