GPT-3.5微調(diào)后在某些特定任務(wù)或可超過(guò)GPT-4。

OpenAI宣布對(duì)GPT-3.5開(kāi)放微調(diào),企業(yè)和個(gè)人專屬ChatGPT來(lái)了

2023-08-23 14:15:43發(fā)布     來(lái)源:多知網(wǎng)    作者:Penny  

  多知網(wǎng)8月23日消息,OpenAI宣布對(duì)GPT-3.5 開(kāi)放微調(diào)API,允許AI開(kāi)發(fā)人員通過(guò)專門(mén)的數(shù)據(jù)在專門(mén)的任務(wù)上實(shí)現(xiàn)更高的性能。OpenAI聲稱,最終的定制模型在某些特定任務(wù)上可以匹配或超過(guò)GPT-4的能力。也就是說(shuō),每個(gè)企業(yè)或個(gè)人將有自己的專屬ChatGPT。

  OpenAI在Twitter上宣布:“我們啟動(dòng)了對(duì)GPT-3.5 Turbo的微調(diào)。微調(diào)可以讓你根據(jù)公司的數(shù)據(jù)訓(xùn)練模型,并大規(guī)模運(yùn)行它。”

  

  例如,開(kāi)發(fā)人員可以對(duì)GPT-3.5 Turbo進(jìn)行微調(diào),可以生成定制代碼,或者企業(yè)在提供來(lái)自客戶企業(yè)的現(xiàn)有數(shù)據(jù)語(yǔ)料庫(kù)后,如果使用的是德語(yǔ),那么可以用德語(yǔ)總結(jié)文件。

  微調(diào)的好處還包括:可靠的輸出格式、自定義語(yǔ)調(diào)、更短的提示等。早期測(cè)試者通過(guò)指令微調(diào)模型本身,提示減少了高達(dá)90%,從而加快了每次API調(diào)用,并降低了成本。

  在微調(diào)和提示詞之間,OpenAI將更多的控制權(quán)交給用戶,讓他們根據(jù)自己的確切需求來(lái)塑造模型。如果沒(méi)有微調(diào),開(kāi)發(fā)人員必須想出更好的提示詞來(lái)指導(dǎo)大型語(yǔ)言模型如何完成任務(wù)。

  OpenAI聲稱,從長(zhǎng)遠(yuǎn)來(lái)看,定制的GPT-3.5 Turbo模型可以為開(kāi)發(fā)人員節(jié)省資金,如果它運(yùn)行起來(lái)更便宜,并且在某些用例中與GPT-4相比,即使不是更有效,也一樣有效。