5月16日下午，羅切斯特大學(xué)教授、歐洲科學(xué)院院士、美國國家發(fā)明家學(xué)院院士羅杰波應(yīng)學(xué)院邀請，在翡翠科教樓B座501報(bào)告廳帶來題為《Multimodal LLMs as Social Media Analysis Engines》的精彩報(bào)告，系統(tǒng)闡述了多模態(tài)大語言模型在社交媒體內(nèi)容解析中的技術(shù)突破與挑戰(zhàn)。本次報(bào)告由學(xué)院院長洪日昌教授主持。
報(bào)告中，羅杰波教授指出，社交媒體作為多模態(tài)信息載體，其文本、圖像、視頻等模態(tài)的復(fù)雜交互對傳統(tǒng)機(jī)器學(xué)習(xí)模型構(gòu)成嚴(yán)峻挑戰(zhàn)。他重點(diǎn)分享了團(tuán)隊(duì)在情感分析、仇恨言論檢測、虛假新聞識別、人口推斷及政治意識形態(tài)檢測五大核心任務(wù)中的前沿研究成果：借助現(xiàn)有基準(zhǔn)數(shù)據(jù)集開展定量分析，并篩選定性樣本，發(fā)現(xiàn)GPT-4V 在任務(wù)中表現(xiàn)亮眼，其在圖像 - 文本對聯(lián)合理解、語境和文化意識以及常識知識運(yùn)用上優(yōu)勢顯著，但也暴露出 “幻覺”、多語言理解不足、難跟緊最新趨勢等問題。針對這些挑戰(zhàn)，團(tuán)隊(duì)提出優(yōu)化策略，助力模型性能提升。
報(bào)告結(jié)束后，現(xiàn)場師生熱情高漲，踴躍提問，與羅杰波教授展開了熱烈的互動交流。師生們紛紛表示，報(bào)告內(nèi)容前沿且貼合實(shí)際，為社交媒體分析研究提供新思路。未來，學(xué)院將深化與知名學(xué)者合作，打造品牌學(xué)術(shù)活動，搭建前沿交流平臺，推動科研教學(xué)發(fā)展。
羅杰波教授是羅切斯特大學(xué)計(jì)算機(jī)科學(xué)系教授。他于2011年加入該校，此前在柯達(dá)研究實(shí)驗(yàn)室擁有長達(dá)15年的卓越職業(yè)生涯。他發(fā)表了超過600篇技術(shù)論文，并持有超過90項(xiàng)美國專利。他的研究興趣包括計(jì)算機(jī)視覺、自然語言處理（NLP）、機(jī)器學(xué)習(xí)、數(shù)據(jù)挖掘、計(jì)算社會科學(xué)和數(shù)字健康等領(lǐng)域。他曾參與眾多技術(shù)會議的組織工作，包括擔(dān)任ACM Multimedia 2010、IEEE CVPR 2012 和 IEEE ICIP 2017的程序主席，以及ACM Multimedia 2018 和 IEEE ICME 2024 的大會主席。羅教授還曾擔(dān)任多個(gè)頂級期刊的編委，包括 IEEE TPAMI、IEEE TMM、TCSVT、IEEE TBD、ACM TST 和 PR 等。他是 ACM、AAAI、IEEE、AIMBE、IAPR 和 SPIE 的Fellow，同時(shí)是歐洲科學(xué)院院士和美國國家發(fā)明家學(xué)院院士。他于2021年獲得ACM SIGMM技術(shù)成就獎(jiǎng)，并于2025年榮獲IEEE計(jì)算機(jī)協(xié)會愛德華·J·麥克盧斯基技術(shù)成就獎(jiǎng)。
太陽集團(tuán)tyc5997（人工智能學(xué)院）
2025年5月16日
TOP
