网站文章更新数量,汕头论坛建站模板,缔造自助建站,西安网站优化10月17日#xff0c;微软在官网宣布#xff0c;现在可以在Azure OpenAI公共预览版中对GPT-3.5-Turbo、Babbage-002 和Davinci-002模型进行数据微调。
使得开发人员通过自己的数据集#xff0c;便能打造独一无二的ChatGPT。例如#xff0c;通过海量医疗数据进行微调#x…10月17日微软在官网宣布现在可以在Azure OpenAI公共预览版中对GPT-3.5-Turbo、Babbage-002 和Davinci-002模型进行数据微调。
使得开发人员通过自己的数据集便能打造独一无二的ChatGPT。例如通过海量医疗数据进行微调构建专注医疗领域的ChatGPT助手可询问与医疗相关的病历、专业术语、治疗方案等内容。
目前全球各行业积累了几年甚至几十年的巨量优质数据如何高效利用、查询这些数据成为一大难题。
通过自有数据微调打造的AI助手可有效解决这一痛点同时提升内容的准确性、安全性是组织实现降本增效的利器。
详细微调教程https://learn.microsoft.com/en-us/azure/ai-services/openai/tutorials/fine-tune?tabscommand-line
微软Azure服务https://azure.microsoft.com/en-us/products/ai-services/openai-service/ 什么是数据微调
大模型数据微调Fine-tuning是一种迁移学习方法用于深度学习和机器学习。通常数据微调是基于一个预训练好的模型例如GPT-3.5-Turbo作为基石然后在特定的任务数据集例如法律、医疗、营销上进行额外的训练使模型能生成特定业务领域的内容。
例如你想训练一个模型来回答法律相关的问题首先在大量的通用文本数据上进行预训练然后在医学问答数据集上进行微调。
简单来说微调功能就是让ChatGPT完全按照你的数据来生成内容。 需要注意的是即便你有高质量的数据集但选择的微调模型性能很差生成的内容也不会很理想。
而微软提供基于OpenAI的GPT-3.5-Turbo是一个经过全球数百万开发者验证的高性能成熟模型。
Azure OpenAI新功能
Babbage-002和Davinci-002是微软最新推出的GPT-3基础模型可生成文本、代码等没有接受过遵循指令的训练。但在微调、托管服务费用方面更便宜。
Babbage-002取代了已弃用的Ada和Babbage 模型 Davinci-002 则取代了Curie和 Davinci。 GPT-3.5-Turbo是OpenAI性能最成熟模型之一支持多轮深度对话、创建微调数据集、训练和部署等一站式开发服务。
Azure OpenAI微调功能演示
上传数据微软在Azure OpenAI内置了数据过滤功能当检测到用户上传的数据集包含非法、歧视等有害信息时会自动删除这些内容。以下是上传数据集代码示例。 预训练使用指定模型、训练和验证数据并设置相应的参数。开发者可将Azure OpenAI Studio用于简单的GUI或者使用微软的REST API或OpenAI Python SDK。 开始启动微调功能。 完成微调后将返回评估指标例如训练和验证损失等参数。
目前微软提供数据微调托管服务用户无需担心任何算力资源问题只需要选择时间即可。
收费标准Babbage-002为34美元/小时Davinci-002为68美元/小时GPT-3.5-Turbo为102美元/小时。
3Azure OpenAI 服务中的推理托管当用户完成微调后就可以使用模型生成专属内容了。
如果你没有足够的算力资源平台来支撑模型的日常输出微软同样提供了托管服务。
收费标准Babbage-002托管每小时1.7美元Davinci-002每小时1.7美元GPT-35-Turbo每小时7美元。 本文素材来源微软官网如有侵权请联系删除
