“未來已來,智領(lǐng)時代”ChatGPT系列活動 | 上海財經(jīng)大學(xué)學(xué)術(shù)講座回顧:ChatGPT文本特征及其與人類的對比性研究

?智能總結(jié)“未來已來,智領(lǐng)時代”ChatGPT系列活動 | 上海財經(jīng)大學(xué)學(xué)術(shù)講座回顧:ChatGPT文本特征及其與人類的對比性研究
講座概況
3月20日晚19時,由三位來自上海財經(jīng)大學(xué)信息管理與工程學(xué)院AILab的博士生郭必?fù)P、王子源、江敏祺主講的《ChatGPT文本特征及其與人類的對比性研究:ChatGPT有多接近人類?對比、評測、識別》主題講座在武東路T6如期舉行。
講座PART1
講座伊始,郭必?fù)P同學(xué)介紹了有關(guān)ChatGPT的背景。ChatGPT是由OpenAI公司于2022年11月30日發(fā)布的一款A(yù)I聊天程序。其一經(jīng)發(fā)布便轟動全球,引發(fā)人們好奇的同時又不免勾起大家的擔(dān)憂。
接著,他簡要概括了其所在團(tuán)隊的研究內(nèi)容——收集分析大量人類及ChatGPT問答數(shù)據(jù)并開源了Human ChatGPT Comparison Corpus(HC3)語料集。該語料集涵蓋多個與人類生活息息相關(guān)的領(lǐng)域,兼顧中英文,可用于大型語言模型的研究。
同時,他們還基于此進(jìn)行大量人工測評與語言學(xué)分析,總結(jié)了許多有趣的結(jié)論。這些結(jié)論有助于人們思考未來大型語言模型將走向何方。其團(tuán)隊還開發(fā)了多種ChatGPT內(nèi)容檢測器以應(yīng)對不同的使用場景,這些檢測器可用于UGC平臺的監(jiān)管,提升內(nèi)容的可靠性、安全性。

講座PART2
緊接著,三位博士生同學(xué)從四個部分細(xì)致介紹了他們所做的研究成果。
語料收集
郭必?fù)P同學(xué)首先向大家講解了第一部分——人類與ChatGPT問答對比語料集的收集工作。其團(tuán)隊通過Q-A公開數(shù)據(jù)集(如專業(yè)咨詢平臺、UGC平臺上的高贊回答等)爬取Wiki頁面簡介以獲取人類專家回答,同時收集面對相同問題時ChatGPT所做出的回答。
人工測評
隨后,王子源同學(xué)通過騰訊會議遠(yuǎn)程連線講座,向大家介紹了研究的第二部分——人工測評。該項目通過圖靈測試的方法,讓專家與不熟悉ChatGPT的普通人通過多種測試判斷不同的回答是來自人類還是ChatGPT。測試發(fā)現(xiàn),在對ChatGPT的識別上,專家具有較高的準(zhǔn)確性,而普通人在單項識別時不能做出準(zhǔn)確的判斷。除此之外,此次人工測評還進(jìn)行了針對ChatGPT的有用性測試,即在未知情況下比較人類回答與ChatGPT回答的有用性。結(jié)果發(fā)現(xiàn),在除醫(yī)療領(lǐng)域之外的情況下,ChatGPT被選擇的比例大于50%,被認(rèn)為更加有用。

比對分析
王子源同學(xué)接著向大家介紹了ChatGPT的文本特征與其在語言學(xué)方面與人類的對比部分。通過對大量數(shù)據(jù)的分析,團(tuán)隊發(fā)現(xiàn):
ChatGPT文本特點(diǎn):
(1)寫作更有組織有條理,邏輯清晰。
(2)傾向于給出一個很長很詳細(xì)的答案。
(3)回答中較少的偏見和有害信息。
(4)拒絕回答超出知識范圍的問題。
(5)可能會捏造事實(shí)。
ChatGPT與人類的回答差異則在于:
(1)ChatGPT嚴(yán)格遵循問題本身,人類會發(fā)散擴(kuò)展到問題之外。
(2)ChatGPT提供客觀答案,而人類更加主觀。
(3)ChatGPT語言相比人類更加正式。
(4)ChatGPT回答中很少摻雜情感,而人類有更明顯的感受表達(dá)。
從語言學(xué)的角度,ChatGPT回答與人類回答相比具有如下特征:
(1)ChatGPT說的話更長,但詞匯量更小。
(2)ChatGPT使用更多名詞、動詞、介詞、連詞,更少使用副詞、代詞和標(biāo)點(diǎn)。
(3)ChatGPT相對有更長的依存距離,句子結(jié)構(gòu)更加復(fù)雜。
(4)ChatGPT的PPL指標(biāo)大多很低,符合模型特征。

內(nèi)容檢測
江敏祺同學(xué)在講座最后向大家講解了研究中對ChatGPT的內(nèi)容檢測部分。由于ChatGPT生成的內(nèi)容開始充斥各種平臺,對信息的可靠性、可信度造成威脅,因此人們有必要知道一個內(nèi)容是否是AI生成的。為此,其團(tuán)隊通過分別訓(xùn)練、交叉測試的方法研制出了幾套檢測模型用于檢測某段內(nèi)容是否是由ChatGPT生成,大部分模型都有較高的準(zhǔn)確性,但在語言較規(guī)范的領(lǐng)域(如維基百科)檢測性能較低。

講座PART3
三位博士生同學(xué)積極與聽眾同學(xué)們互動,熱心地回答同學(xué)提出的問題,同時在現(xiàn)場向大家展示了團(tuán)隊構(gòu)建的檢測模型。
在本場講座中,三位博士生通俗易懂地解釋了他們在ChatGPT領(lǐng)域所做出的研究成果,用幽默風(fēng)趣的語言與熱情洋溢的互動進(jìn)一步加深了同學(xué)們對于ChatGPT的了解。
講座結(jié)束后,許多同學(xué)發(fā)表了自己對于本次講座的感想,其中來自22級的火喆說道:
“通過本次講座,我了解到了ChatGPT的文本特征。ChatGPT并不是我們的“敵人”,只要我們將其用在正道上,它將會成為我們得力的工具和助手。三位學(xué)長的講述生動有趣、干貨滿滿,激發(fā)了我們的學(xué)習(xí)熱情,也在我們今后的學(xué)習(xí)道路上樹立了榜樣?!?/span>


(本文轉(zhuǎn)載自上海財經(jīng)大學(xué) ,如有侵權(quán)請電話聯(lián)系13810995524)
* 文章為作者獨(dú)立觀點(diǎn),不代表MBAChina立場。采編部郵箱:news@mbachina.com,歡迎交流與合作。
備考交流
- 【MBAChina 官方社群矩陣】
- 涵蓋 199管理類聯(lián)考備考 · 復(fù)試調(diào)劑 · 博士申請 · 中外合辦學(xué) 四大板塊。
- ??2027 MBA/MPA/MEM/MPAcc /EMBA聯(lián)考備考群
- ??2026 管理類聯(lián)考復(fù)試調(diào)劑群
- ??博士項目交流群
- ??中外合作辦學(xué)項目群
- ?? 添加微信:MBAChina001
- 備注【報考項目】,邀請您加入專屬交流群

掃碼關(guān)注我們
- 獲取報考資訊
- 了解院?;顒?/li>
- 學(xué)習(xí)備考干貨
- 研究上岸攻略
最新動態(tài)
活動日歷
- 01月
- 02月
- 03月
- 04月
- 05月
- 06月
- 07月
- 08月
- 09月
- 10月
- 11月
- 12月
- 06/01 6月1日直播預(yù)告:香港理工大學(xué)SPEED學(xué)院_全新碩士課程專場!26fall入學(xué)!
- 06/03 6月3日活動報名 | 北大光華-凱洛格國際EMBA項目Coffee Chat@上海
- 06/03 【活動報名】中國科學(xué)技術(shù)大學(xué)科技商學(xué)院專題講座重磅開啟!
- 06/04 6月4日 席位鎖定中 | 香港中文大學(xué)(深圳)MBM2027級招生說明會
- 06/06 長春理工大學(xué)2027級工商管理碩士(MBA)考生見面會
- 06/06 重磅!上財?shù)嗡呓?027級全日制金融碩士“新興金融探索日”活動通知
- 06/06 深圳場 | 清華-康奈爾雙學(xué)位金融MBA公開課暨2027級招生說明會報名中!
- 06/06 上海 | 紫荊課堂暨2027級清華MBA招生咨詢會報名開啟!
- 06/06 浪潮已至|南科大科創(chuàng)MBA 2027級招生啟動大會來了
- 06/06 活動報名 | “迅策科技”校友企業(yè)參訪暨清華五道口金融EMBA深圳招生說明會
熱門資訊
MBA院校號
掃碼關(guān)注 MBAChina
掃碼關(guān)注
EMBA








