OpenAI 允許企業基于自身數據微調 o1 mini～

原標題：OpenAI狂飆突進！僅12個例子就能打造專屬AI專家，核心技術竟來自字節？
文章來源：AI前線
內容字數：5195字

OpenAI強化微調技術發布及其影響

在OpenAI“12天”活動的第二天，強化微調（Reinforcement Fine-Tuning）技術正式發布，并展示了ChatGPT Pro的演示。這項技術預示著AI模型定制化的重要突破，尤其是對企業用戶而言，具有深遠的影響。

1. 強化微調的優勢

強化微調技術允許企業用戶僅用極少的數據（甚至只需12個例子）就能對o1 mini進行定制。與需要大量領域特定數據的監督微調相比，強化微調通過高質量的少量示例迅速調整模型的推理方式。其工作原理是通過給模型思考空間，評分其答案，并強化通向正確答案的思路，從而提升推理能力。

2. 現場演示的成功案例

在發布會上，OpenAI研究員通過實際案例演示了強化微調如何顯著提升模型性能。通過給定癥狀列表，模型能夠預測可能導致遺傳疾病的基因。通過使用約1,100個示例的數據集，模型得到了訓練，最終表現出良好的泛化能力，驗證了強化微調的有效性。

3. 強化微調的性能提升

通過對比不同模型的得分，強化微調后的o1 mini在準確率上超越了基礎模型和之前發布的o1模型。這一結果表明，強化微調不僅提升了模型的整體性能，更為針對特定領域的AI應用奠定了基礎。

4. 未來展望與活動預告

OpenAI的12天活動將繼續進行，預計將發布更多相關技術和產品。下周的AICon全球人工智能開發與應用大會將匯聚眾多AI領域的專家，深入討論大模型和推理等前沿話題，進一步推動AI技術的發展。

通過此次強化微調技術的發布，OpenAI展現了其在AI定制化領域的持續創新，未來將推動各行業的智能化進程。

聯系作者

文章來源：AI前線
作者微信：
作者簡介：面向AI愛好者、開發者和科學家，提供大模型最新資訊、AI技術分享干貨、一線業界實踐案例，助你全面擁抱AIGC。