GPT-3.5 Turbo推出微调功能:支持用自己的数据训练模型,打造专属GPT

闪电发卡2年前ChatGPT1131

OpenAI前几天推出了GPT-3.5 Turbo的微调功能(fine-tuning for GPT-3.5 Turbo),用户可以用自己的数据训练模型并大规模运行它,打造专属GPT,并且早期测试显示,经过微调的GPT-3.5 Turbo在特定任务上可以达到或超过GPT-4的表现!下面ChatGPT中文网就分享下这个资讯信息。

一、GPT-3.5 Turbo微调功能介绍

所谓的GPT微调功能就是用我们自己的数据去训练已有的GPT模型,以达到增强GPT在某一方面的能力,得到我们自己的专属GPT模型。例如我们用自己的医学数据来训练GPT模型,以增强GPT在处理医学相关问题的能力,得到一个“医学版GPT”。

结合微调功能,GPT的能力可以在以下实例中得到增强:

  • 改进的可控性:微调允许企业使模型更好地遵循指令,例如使输出简洁或始终以指定语言回应。例如,开发者可以利用微调确保模型在被提示使用该语言时总是用德语回应。

  • 可靠的输出格式:微调提高了模型一致格式化响应的能力——这对于要求特定响应格式的应用至关重要,如代码补全或组成API调用。开发者可以使用微调更可靠地将用户提示转换为可用于他们自己系统的高质量JSON片段。

  • 定制的语调:微调是优化模型输出的质量感觉的绝佳方式,如其语调,使其更适合企业的品牌声音。拥有可识别品牌声音的企业可以使用微调使模型的语调更一致。

目前OpenAI推出了GPT-3.5 Turbo的微调功能,而GPT-4和gpt-3.5-turbo-16k的微调功能也将在这个秋天上线!

二、GPT-3.5 Turbo微调功能步骤

根据OpenAI官方说明,GPT微调的步骤有4步。

1、准备数据

{
  "messages": [
    { "role": "system", "content": "You are an assistant that occasionally misspells words" },
    { "role": "user", "content": "Tell me a story." },
    { "role": "assistant", "content": "One day a student went to schoool." }
  ]}

2、上传文件

curl https://api.openai.com/v1/files \
  -H "Authorization: Bearer $OPENAI_API_KEY" \  -F "purpose=fine-tune" \  -F "file=@path_to_your_file"

3、创建微调作业

curl https://api.openai.com/v1/fine_tuning/jobs \-H "Content-Type: application/json" \-H "Authorization: Bearer $OPENAI_API_KEY" \-d '{
  "training_file": "TRAINING_FILE_ID",
  "model": "gpt-3.5-turbo-0613"
}'

4、使用微调后的模型

curl https://api.openai.com/v1/chat/completions \-H "Content-Type: application/json" \-H "Authorization: Bearer $OPENAI_API_KEY" \-d '{
  "model": "ft:gpt-3.5-turbo:org_id",
  "messages": [
    {
      "role": "system",
      "content": "You are an assistant that occasionally misspells words"
    },
    {
      "role": "user",
      "content": "Hello! What is fine-tuning?"
    }
  ]
}'


相关文章

Open ai亲自致歉:流量远超预期

Open ai亲自致歉:流量远超预期

OpenAI前脚科技春晚炸翻全球,后脚自家院子却没能守住。原因无他,就是火爆,太太太太火爆!火爆到直接全线崩溃,无论是ChatGPT还是API,压根没法用,堪称史上最大的一次事故。ChatGPT全线崩...

新版Plus镜像已完全适配官网最新Remix UI

新版Plus镜像已完全适配官网最新Remix UI

新版Plus镜像已完全适配官网最新Remix UI包括所有模型,文字转语音,o1显示思考过程等老版本Plus镜像用户可以随时免费转到新版本,无需另外付费,剩余时长等价转换推荐老用户尽快转到新版本,应转...

ChatGPT通过YouTube字幕存在提示注入漏洞

ChatGPT通过YouTube字幕存在提示注入漏洞

通过插件要求概括视频,您可能会得到比预期更多的内容。 随着ChatGPT插件的出现,出现了新的安全漏洞,允许恶意行为者在您的聊天会话期间向机器人传递指令。AI安全研究员Johann Rehb...

随着谷歌深入人工智能领域,出版商看到了新的挑战

随着谷歌深入人工智能领域,出版商看到了新的挑战

lu透纽约 10 月 19 日 - 如果你拥有能够消化所有网络信息并按需提供摘要的人工智能,那么你一生中可能再也不需要阅读新闻报道了。对于媒体大亨来说,这就是噩梦,因为谷歌(GOOGL.O)和其他公司...

程序员如何用ChatGPT解决常见编程问题:实例解析

闪电发卡ChatGPT产品推荐:ChatGPT独享账号:https://www.chatgptzh.com/post/86.htmlChatGPT Plus独享共享账号购买代充:https://www...

实战案例:如何用ChatGPT生成适合不同领域的高质量文章

闪电发卡ChatGPT产品推荐:ChatGPT独享账号:https://www.chatgptzh.com/post/86.htmlChatGPT Plus独享共享账号购买代充:https://www...

发表评论    

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。