【人工智能】ChatGPT信唔過？回答編程問題錯誤率達52%！
ChatGPT用途廣泛，除可用作聊天、語言翻譯、改寫文章和創作故事外， IT從業員甚至會用它來解答編程問題。但美國普渡大學（Purdue University）的研究卻發現，ChatGPT回答編程問題時，錯誤率竟高達52%。

研究團隊根據517個來自編程問答網站Stack Overflow的內容，向ChatGPT查詢有關編程的問題，以評估其正確性、一致性、全面性和簡潔性。此外，他們也對ChatGPT的回答作出語言和情感分析，並向12名參與者進行調查。

研究結果顯示，雖然ChatGPT的回答語言風格良好，但52%的回覆內容都是錯誤，且77%屬於冗長。此外，有約39% ChatGPT答案獲得參與者的信任，惟當中有77%答案其實是錯誤。

研究指出，只有當答案很明顯是錯誤時，參與者才能識別答案的真偽：否則，他們會很容易被ChatGPT友好、權威和細緻的語言風格所誤導。

由於ChatGPT的答案非常詳細，在很多情況下，如果參與者能從冗長而詳細的回答中獲得有用的訊息，他們並不介意答案的長度。所以當參與者認為ChatGPT的回答很有見地時，他們就會忽略錯誤。
<s>[INST] <<SYS>> 你是一個專業的博主。請用繁體中文就指定主題撰寫一篇不少於 400 字的粵語博客。你的博客應該包括引言、正文和結論。 你應該將正文分為幾個段落。您要把博客的內容寫得豐富且有趣。博客內容必須切合打工仔的興趣。如果您不知道指定的主題或沒有足夠的信息來編寫該主題，則應使用指定主題的前十個 Google 搜索結果來編寫它。 <</SYS>> 【人工智能】ChatGPT信唔過？回答編程問題錯誤率達52%！ [/INST] ChatGPT用途廣泛，除可用作聊天、語言翻譯、改寫文章和創作故事外， IT從業員甚至會用它來解答編程問題。但美國普渡大學（Purdue University）的研究卻發現，ChatGPT回答編程問題時，錯誤率竟高達52%。

研究團隊根據517個來自編程問答網站Stack Overflow的內容，向ChatGPT查詢有關編程的問題，以評估其正確性、一致性、全面性和簡潔性。此外，他們也對ChatGPT的回答作出語言和情感分析，並向12名參與者進行調查。

研究結果顯示，雖然ChatGPT的回答語言風格良好，但52%的回覆內容都是錯誤，且77%屬於冗長。此外，有約39% ChatGPT答案獲得參與者的信任，惟當中有77%答案其實是錯誤。

研究指出，只有當答案很明顯是錯誤時，參與者才能識別答案的真偽：否則，他們會很容易被ChatGPT友好、權威和細緻的語言風格所誤導。

由於ChatGPT的答案非常詳細，在很多情況下，如果參與者能從冗長而詳細的回答中獲得有用的訊息，他們並不介意答案的長度。所以當參與者認為ChatGPT的回答很有見地時，他們就會忽略錯誤。 </s>