當人工智能在考試中和(he)你(ni)同場競(jing)爭，你(ni)的(de)勝算還有多少？
昨日，在(zai)(zai)高考(kao)語文結束后，作(zuo)(zuo)文題目就一直霸(ba)榜微博熱搜(sou)。很多畢(bi)業多年的(de)學子都在(zai)(zai)感慨(kai)，寫作(zuo)(zuo)文不僅要(yao)多看紅樓(lou)夢，還要(yao)懂點(dian)圍棋知(zhi)識。
早在一(yi)周(zhou)之(zhi)前，一(yi)名嗶(bi)哩嗶(bi)哩up主@圖靈的(de)(de)貓就(jiu)發布了視頻，稱自(zi)己(ji)用AI模型預測(ce)了2022年(nian)高(gao)(gao)考作(zuo)文的(de)(de)題目(mu)。據這位up本人(ren)透(tou)露(lu)，自(zi)身是一(yi)名AI系統的(de)(de)資深算法專家，其(qi)團隊制作(zuo)的(de)(de)爬(pa)蟲通過(guo)抓(zhua)取一(yi)年(nian)內各類媒體上的(de)(de)信(xin)息，建立了一(yi)套AI系統，才(cai)預測(ce)出(chu)了今年(nian)高(gao)(gao)考作(zuo)文最可能出(chu)現的(de)(de)命題方(fang)向(xiang)。
AI押題本質上與人類無異，也是憑經驗
在6月1日發布的2022年高考作文題AI預測結果公布視頻中，該up主介紹了這一套AI系統實現的技術原理：高考作文看似是考試，其實是價值觀、人生觀和家國意識的引導，這個規則決定著一篇高考作文的得分高低。所以，高考的本質是思政任務，反映了國家意志，這也正是預測高考作文的根本原理。
而深諳(an)此道的(de)(de)(de)命題組，也(ye)會從近一年(nian)的(de)(de)(de)國際(ji)事(shi)件、國家政(zheng)策(ce)、會議文件、指導意見和官方報告(gao)中(zhong)，篩選出(chu)一批(pi)重要度高、范圍較小的(de)(de)(de)主題，并最(zui)終選出(chu)之前高考沒(mei)有(you)出(chu)現(xian)過的(de)(de)(de)，且最(zui)適合(he)(he)今年(nian)任務的(de)(de)(de)高考作(zuo)文題。而 AI 作(zuo)為最(zui)擅長從大規模(mo)數據(ju)中(zhong)挖掘規律的(de)(de)(de)重要工具(ju)，其獲取的(de)(de)(de)數據(ju)越多，分布越合(he)(he)理，也(ye)就能夠更加準確地(di)預測到最(zui)終的(de)(de)(de)結果。
基于以上思(si)考(kao)，up主及其團(tuan)隊(dui)專(zhuan)門寫了(le)一套爬蟲。這(zhe)套爬蟲抓取了(le)一年內人(ren)民日報(bao)、人(ren)民網、央視新(xin)聞等官(guan)媒發表的(de)文(wen)章(zhang)、期刊(kan)、報(bao)紙以及高層會(hui)議的(de)重要文(wen)件(jian)。然(ran)后再通過(guo)(guo)自然(ran)語言處理中(zhong)的(de)預(yu)訓練模型和主題建模算法，建立了(le)一套可以理解中(zhong)文(wen)新(xin)聞與文(wen)章(zhang)的(de) AI 系(xi)統(tong)，并讓 AI 系(xi)統(tong)學習了(le)過(guo)(guo)去幾年的(de)高考(kao)作文(wen)出(chu)題思(si)路(lu)，最終預(yu)測出(chu)了(le) 2022 年高考(kao)中(zhong)最可能出(chu)現的(de) 7 個命題方向。
以(yi) " 困難(nan)(nan)與希望(wang) " 為(wei)例，在預測(ce)結果中，AI 系統主要(yao)(yao)(yao)基(ji)于模型表征提煉出預測(ce)主題(ti)和核心(xin)詞(ci)，而在學生理解命題(ti)的(de)(de)過程(cheng)中，預測(ce)主題(ti)可以(yi)作(zuo)為(wei)作(zuo)文主要(yao)(yao)(yao)的(de)(de)寫作(zuo)內容理解方(fang)向，模型表征提供的(de)(de)介(jie)紹可以(yi)作(zuo)為(wei)案例引用植(zhi)入文章中。而最上面的(de)(de) " 困難(nan)(nan)、希望(wang) " 核心(xin)詞(ci)，則可以(yi)作(zuo)為(wei)作(zuo)文標題(ti)的(de)(de)主要(yao)(yao)(yao)命題(ti)參考方(fang)向。
既然高考(kao)語文(wen)已經結束(shu)，那AI預測(ce)的準確性(xing)到(dao)底如何(he)呢？
該up主設計的AI模型預測出的七大命題方向，分別是：困難與希望、拼搏與自強、探索與夢想、創新與發展、奮斗與價值、公平與德育、美與環境。而在今年全國新高考 II 卷中，要求以 " 選擇 ? 創造 ? 未來 " 為主題開展寫作，同時提及了 " 科學家、科學攻關、北斗導航系統 " 以及 " 新方法、新思維、新知識 " 等詞。在 AI 系統給出的以 " 探索、夢想 " 為主題的命題方向中，北斗、芯片等科技(ji)名詞是(shi)模型表征，主題(ti)方向與高考作文命題(ti)也有(you)所接近。
總體(ti)而言，在今年(nian)的高考中，AI 共(gong)“押中”了四道作(zuo)文主(zhu)題，但(dan)up主(zhu)也客(ke)觀地指出，" 今年(nian)各(ge)地高考作(zuo)文結合(he)熱(re)點進(jin)行命(ming)題較多，這(zhe)才讓 AI 系(xi)統押對了 4 個命(ming)題，但(dan)往年(nian)的題目一(yi)般不會(hui)直接從熱(re)點進(jin)行出題，而是(shi)側面描(miao)寫(xie)和以小見大，這(zhe)次(ci)命(ming)中較多也很(hen)特殊(shu)。"
“押中”題目事小，能寫高分作文更厲害
對于高考作文(wen)(wen)這(zhe)類長文(wen)(wen)本寫(xie)作來(lai)說(shuo)，不僅要求(qiu)邏輯連貫、主題清晰(xi)，還(huan)需具備較高的(de)可讀性(xing)、創造性(xing)。近年(nian)來(lai)，用AI模型來(lai)生成高考作文(wen)(wen)的(de)嘗試已經進行了多(duo)次，今年(nian)也不例外(wai)，但寫(xie)作水平更(geng)多(duo)是讓(rang)人(ren)啼笑皆非的(de)“零分作文(wen)(wen)”。
以昨天網絡(luo)上熱議的全國新高考I卷作(zuo)文(wen)“本手(shou)、妙手(shou)、俗手(shou)”為(wei)例(li)，AI生成作(zuo)文(wen)的部(bu)分內容(rong)如下：
“本手、妙手、俗手”都屬于“手”，同理，抄手也屬于手。四川著名抄手，到底怎么做呢？小編也很好奇。一般來說需要自己準備抄手皮和豬肉，按照教程包成抄手。煮熟后加芝麻紅油，撒上蔥末即可食用。好吃的紅油抄手就是這樣做成的，不說了，小編去試試了。
而在北京卷“像一道閃電”的命題微寫作中，AI更是給出了“或或或或或或或或，也嚯嚯不走自家的閃電接口”這種(zhong)仿寫周杰倫(lun)歌曲的句子(zi)。
顯然，上面的AI模型并沒有真正理解題目的含義，只是對數據進行了粗淺的處理而已。但在這些“零分作文”以外，昨天還有“數字人考生”親自參與了高考的作文寫作。
由百度推出的數字人度曉曉，也作答了全國新高考Ⅰ卷題為《本手、妙手、俗手》的議論文，引發全網刷屏，曾擔任北京高考語文閱卷組組長的申怡老師認為該篇作文“緊扣主題、立意明確，結構完整、語言流暢，而且還善于引經據典、使用修辭手法”，更是給出了48分的成績。據介紹，根據歷年情況，獲得48分及以上作文成績的考生，僅占不到25%，也就是說，數字人度曉曉的作文分數已趕超約75％的高考考生。
大家覺得水平咋樣？
除了作文輸出的質量高之外，數字人的作文輸出效率也很可觀。據悉，數字人度曉曉只花費40秒就能根據作文題目創作出40多篇文章，其中的主要原因是獲得了百度文心大模型的加持。這個由百(bai)度(du)最新(xin)推出的(de)(de)ERNIE 3.0 Zeus千億大模型(xing)(xing)，通俗(su)點講，就像是一個見多識(shi)廣(guang)(guang)的(de)(de)“尖子(zi)生”、“學霸(ba)”，能夠(gou)理解給定的(de)(de)作文(wen)題目，再選擇符合(he)立(li)意的(de)(de)論據(ju)，從開(kai)篇引入到結尾扣題，結構完整并做到始終不跑題。此外，百(bai)度(du)文(wen)心大模型(xing)(xing)還融合(he)學習了大規(gui)模知識(shi)和海量數(shu)據(ju)，可(ke)以實現(xian)在“博覽群書(shu)”后廣(guang)(guang)泛自如地“引經據(ju)典”， 輸出優質作文(wen)內容(rong)。
何時才能交出滿分答卷
在高考作(zuo)文之(zhi)外，AI還曾多次(ci)參與過高考數(shu)學(xue)的(de)答題。2017年(nian)時(shi)，人(ren)工智(zhi)能機器人(ren)“準星AI-MATHS”首次(ci)公開(kai)挑戰高考數(shu)學(xue)，通過對當年(nian)的(de)北京文科(ke)(ke)數(shu)學(xue)卷和(he)文科(ke)(ke)全(quan)國數(shu)學(xue)卷Ⅱ進行作(zuo)答，在完全(quan)掐斷題庫、斷網、無人(ren)干涉、僅有12臺服(fu)務器的(de)情況下，分(fen)別用時(shi)22分(fen)鐘和(he)10分(fen)鐘，就獲得了105分(fen)和(he)100分(fen)的(de)成績。
這個成績顯然已經非常出色，在分析丟分原因時，發現是因為模型不理解應用題的題目含義，本質上還是對于文本的理解出了問題。在人工智(zhi)能領域，NLP一直被稱為是“掌(zhang)上明珠”，雖然(ran)機器視覺早已(yi)取得了巨大進步(bu)，效果遠超人類(lei)(lei)，但文本(ben)相關的(de)各類(lei)(lei)任(ren)務，AI與人類(lei)(lei)的(de)表現差(cha)距依然(ran)很(hen)大。
因此(ci)，想(xiang)要讓人工智能在(zai)高考中取得狀元級別(bie)的(de)(de)分數，在(zai)對知(zhi)識的(de)(de)持續積累之外，重點還是要看與語義理解相(xiang)關(guan)的(de)(de)NLP技術發展(zhan)到了什(shen)么(me)階段。當然，AI領域技術的(de)(de)迭代更新速度是非常(chang)快的(de)(de)，進(jin)一步斬獲(huo)高分或許就是幾年內的(de)(de)事情。
不過，對于AI持續挑戰高考這件事，最終取得高分只是其次，更大的意義在于將AI的解題能力進行規模化復制和推廣，既可以用于輔助教學和批改，也可以將這種能力遷移到其他的考試中去，甚至通過現在大火的“可解釋性AI”來啟發學生的思維，讓學生告別低效的題海戰術，真正掌握學習的方法。
參考資料：
1.《2022高考零分作文(wen)大賞，AI寫的讓我在紅(hong)樓夢(meng)里笑成一道閃(shan)電》，果(guo)殼(ke)
2.《AI 押中 4 套(tao)高考(kao)作文題(ti)：科(ke)學(xue)、玄(xuan)學(xue)還(huan)是炒作？》，新浪科(ke)技
3.《百(bai)度(du)AI數字(zi)人(ren)度(du)曉曉應戰高考作(zuo)文：40秒寫40篇(pian)，水(shui)平超75%考生》，百(bai)度(du)
