有人説ChatGPT有物理學博士水平?我們的測試結果令人……_風聞
中科院物理所-中科院物理所官方账号-02-12 15:59
大家最近肯定被ChatGPT刷屏了,好像它神通廣大,無所不能…

但,無所謂,物理學會出手。今天就讓我們來測測它物理知識的素養吧!
1
ChatGPT的介紹
ChatGPT (全稱:Chat Generative Pre-trained Transformer ) 是由OpenAI開發的一個人工智能聊天機器人程序,於2022年11月推出。該程序使用基於GPT-3.5架構的大型語言模型並通過強化學習進行訓練。
ChatGPT目前仍以文字方式互動,而除了可以通過人類自然對話方式進行交互,還可以用於相對複雜的語言工作,包括自動文本生成、自動問答、自動摘要等在內的多種任務。如:在自動文本生成方面,ChatGPT可以根據輸入的文本自動生成類似的文本(劇本、歌曲、企劃等),在自動問答方面,ChatGPT可以根據輸入的問題自動生成答案。還具有編寫和調試計算機程序的能力。

ChatGPT圖
哎,讓它自己做個自我介紹。

那麼,簡單的介紹做完了,那麼就正式進入到我們的物理考試時間吧。
2
物理知識考核
咱們從簡單到複雜,慢慢的測試它~
初中物理知識:

剛開始就錯了,看來ChatGPT也不行啊(
,正確答案應該是:大小,方向和作用點。讓我們繼續。

這個回答差強人意,不過這兩個問題説明,它的初中知識儲備還可以。那麼知識的使用能力呢?

一個選擇問題和一個計算問題也算是回答上來了。看來初中的知識難不倒它。
高中物理知識:升級難度,那麼現在就進入高中知識階段。

還是先試一試它的基礎知識儲備,可以這沒問題。但到了高中,公式推導能力就應該提高了,看看它行不行。

再看看它的回答。

只能説還是不盡人意(忽略小編因為馬虎而造成的錯別字),它最後沒有回答正確。
正確答案應該是:

再來看看它的電磁學知識。

繼續問問它。

再追問一下。

還行,看來它還是有點邏輯思維。
那麼就繼續上強度吧!
大學物理知識:
對於物理專業的課程大家可能不是很瞭解,但肯定都有所耳聞。那小編就給大家稍微總結介紹一下一名物理專業的大學生要學習什麼物理專業課程~
力學,光學,電磁學,熱學:這四門課程也叫做“普通物理學”,俗稱普物,這四門課程是承接高中初中所學的知識進行一定的擴展,相當於入門知識。
四大力學(可不是四種力學):理論力學,電動力學,量子力學以及統計力學。這四門課程對於物理學專業的本科生可謂是重中之重,借用我老師的一句“玩笑話”:如果一個搞物理的人不能搞清楚四大力學,那麼就不要説自己是搞物理的了。

四大力學教學書
其實這裏還有一個很特殊的課程:原子物理。它就像是承接普物與四大力學之間的橋樑,所以在大學課程中一直保留着。再後面就會根據你的研究方向和興趣來針對學習,比如:凝聚態專業就會選擇固體物理和半導體物理等…
好的廢話説完了,進入主題。

哈哈哈,失敗,它應該是不知道拉格朗日方程的物理含義。你也忘了?來看看這個:掌控所有運動規律的原理:最小作用量原理。(看完你就比Chat GPT強了 ),繼續。

咱們轉換一下。

嗯,寫的代碼是正確的,算它知道。

emmm,格式不太對,但是它描述的還是比較準確的。正確答案應該是

最後問他一個問題。

它寫的是真空有源下的麥克斯韋方程組,沒有問題。洛倫茲規範是電動力學中的經典問題,大家可以參考曹則賢老師的演講:曹則賢 | 電磁學/電動力學:現象、技術與思想(下),小編就不在這裏贅述了。
好吧,考試到此結束,小編對它的評價是:**有點****眼高手低,人云亦云。**它因為龐大的數據集,物理知識儲備是非常多的,遠超一般人所能容納的知識量,但是它的邏輯能力和辨別能力表現卻沒有那麼完美。
3
“學習”能力****考核
前面可以看到,雖然它的邏輯很差,但是知識水平不錯,那麼它的學習能力呢?我們來調戲測試一下。

好像它真的明白了,我們再換個人名問一下。

好像它明白了,但明白的不多,咱們換個數學題。

我們稍微把題目換一下。

小編崩潰它剛開始還是算錯了~ 但是它還是很明白計算過程。總的來説,它有學習能力,但是目前來看不多。注:小編的測試過程是連續的,在同一個窗口進行的。
4
小花絮

給它點個贊。

小編不説別的,你們應該懂了吧。快來!《科學公開課》繽紛世界主題課。
總
結
不得不説,Chat GPT給我們帶來了很大的驚喜:它確實能通過人類自然對話方式進行交互,並可以用於自動文本,代碼生成等相對複雜的語言工作。但是它還是有很大的侷限性,對於數學計算,腦筋急轉彎等需要極強邏輯的領域,會頻頻犯錯。並且它有時會一本正經的給出它所謂的正確答案,這對非專業領域的人非常難於辨別(你覺着它的薛定諤方程寫的正確嗎?),總之,目前的它是一個不錯的工具,但是絕對不要過度依賴它!

參考資料:[1]https://zh.wikipedia.org/zh-hans/ChatGPT
[2]https://openai.com/blog/chatgpt/