扣子羅盤(pán) – 扣子推出的 AI Agent 智能調(diào)優(yōu)平臺(tái)

扣子羅盤(pán)是什么

扣子羅盤(pán)是一款專(zhuān)為個(gè)人開(kāi)發(fā)者與創(chuàng)業(yè)團(tuán)隊(duì)量身定制的工具平臺(tái)，旨在快速構(gòu)建 AI Agent。它為開(kāi)發(fā)者提供了從開(kāi)發(fā)、調(diào)試到評(píng)估和監(jiān)控的全生命周期管理能力，涵蓋 Prompt 開(kāi)發(fā)、評(píng)測(cè)及觀(guān)測(cè)等多項(xiàng)功能。通過(guò)可視化的工具和智能調(diào)優(yōu)，扣子羅盤(pán)幫助開(kāi)發(fā)者以更高效的方式構(gòu)建高質(zhì)量的 AI Agent，從而降低試錯(cuò)成本。此外，平臺(tái)還支持團(tuán)隊(duì)協(xié)作和資源共享，以提高開(kāi)發(fā)效率。

扣子羅盤(pán)的主要功能

• Prompt智能中樞：支持Prompt的調(diào)試、版本管理和多版本對(duì)比，顯著提升開(kāi)發(fā)效率。實(shí)現(xiàn)Prompt的服務(wù)化，便于進(jìn)行集成與復(fù)用。
• 實(shí)時(shí)觀(guān)測(cè)與預(yù)警：借助Trace數(shù)據(jù)追蹤和性能統(tǒng)計(jì)，實(shí)時(shí)監(jiān)控系統(tǒng)的運(yùn)行狀態(tài)，并在異常情況下進(jìn)行即時(shí)告警，智能標(biāo)記數(shù)據(jù)，幫助快速定位問(wèn)題。
• 全鏈路評(píng)測(cè)體系：在AI Agent的生命周期內(nèi)積累評(píng)測(cè)集，覆蓋端到端的測(cè)試，精確評(píng)估AI Agent的效果，確保其性能與穩(wěn)定性。

如何使用扣子羅盤(pán)

• 注冊(cè)與登錄：訪(fǎng)問(wèn)扣子羅盤(pán)的官方網(wǎng)站，按照指示完成注冊(cè)并登錄。
• 進(jìn)入演示空間：成功登錄后，找到扣子羅盤(pán)的入口以開(kāi)始體驗(yàn)。
• 體驗(yàn) Prompt 開(kāi)發(fā)：登錄后，默認(rèn)進(jìn)入Prompt開(kāi)發(fā)界面。您可以查看平臺(tái)預(yù)設(shè)的Prompt，點(diǎn)擊“詳情”了解其設(shè)計(jì)細(xì)節(jié)。
• 使用評(píng)測(cè)模塊：
  • 創(chuàng)建評(píng)測(cè)集：
    • 在左側(cè)導(dǎo)航欄選擇評(píng)測(cè) > 評(píng)測(cè)集。
    • 在評(píng)測(cè)集列表頁(yè)面，點(diǎn)擊“詳情”查看已經(jīng)創(chuàng)建的評(píng)測(cè)集數(shù)據(jù)。
    • 示例測(cè)試數(shù)據(jù)由輸入數(shù)據(jù)（input 列）和理想的預(yù)期輸出數(shù)據(jù)（reference_output 列）組成，輸入數(shù)據(jù)作為評(píng)測(cè)對(duì)象的輸入，預(yù)期輸出數(shù)據(jù)作為評(píng)測(cè)標(biāo)準(zhǔn)的參考。
    • 點(diǎn)擊“關(guān)聯(lián)實(shí)驗(yàn)”標(biāo)簽，查看與該評(píng)測(cè)集相關(guān)的實(shí)驗(yàn)結(jié)果。
  • 準(zhǔn)備評(píng)估器：
    • 在左側(cè)導(dǎo)航欄選擇評(píng)測(cè) > 評(píng)估器。
    • 在評(píng)估器列表頁(yè)面查看已創(chuàng)建的評(píng)估器，并支持版本管理，您可以在發(fā)起評(píng)測(cè)實(shí)驗(yàn)時(shí)選擇不同的評(píng)估器版本進(jìn)行優(yōu)化迭代。
    • 點(diǎn)擊“詳情”查看評(píng)估器配置。進(jìn)入評(píng)估器配置頁(yè)面后，點(diǎn)擊“調(diào)試”，輸入構(gòu)造的輸入數(shù)據(jù)和標(biāo)準(zhǔn)輸出數(shù)據(jù)，測(cè)試評(píng)估器的效果。
  • 發(fā)起評(píng)測(cè)實(shí)驗(yàn)：
    • 在左側(cè)導(dǎo)航欄選擇評(píng)測(cè) > 實(shí)驗(yàn)。
    • 在實(shí)驗(yàn)列表頁(yè)面，查看已發(fā)起的評(píng)測(cè)實(shí)驗(yàn)。
    • 選擇一個(gè)評(píng)測(cè)實(shí)驗(yàn)并點(diǎn)擊“詳情”查看評(píng)測(cè)結(jié)果。扣子羅盤(pán)支持對(duì)評(píng)測(cè)結(jié)果進(jìn)行人工校準(zhǔn)，選擇要校準(zhǔn)的目標(biāo)數(shù)據(jù)后，點(diǎn)擊人工校準(zhǔn)的編輯圖標(biāo)。
    • 點(diǎn)擊“指標(biāo)統(tǒng)計(jì)”查看實(shí)驗(yàn)報(bào)告。扣子羅盤(pán)會(huì)根據(jù)實(shí)驗(yàn)結(jié)果自動(dòng)生成可視化面板，方便對(duì)測(cè)試結(jié)果進(jìn)行分析與決策。
• 使用觀(guān)測(cè)功能：
  • 觀(guān)測(cè)功能支持：
    • 平臺(tái)提示詞（Prompt）開(kāi)發(fā)。
    • 扣子智能體。
    • 扣子 AI 應(yīng)用的數(shù)據(jù)自動(dòng)上報(bào)。
    • 集成 SDK 上報(bào)其他框架（如 Eino/Langchain）開(kāi)發(fā)的 AI 應(yīng)用。
  • 在觀(guān)測(cè) > Trace 頁(yè)面，選擇時(shí)間范圍、任務(wù)節(jié)點(diǎn)范圍和觀(guān)測(cè)對(duì)象，查看已上報(bào)的Trace數(shù)據(jù)。扣子羅盤(pán)提供多維度的統(tǒng)計(jì)指標(biāo)面板，直觀(guān)了解觀(guān)測(cè)對(duì)象的運(yùn)行狀態(tài)與成本消耗。

扣子羅盤(pán)的應(yīng)用場(chǎng)景

• 智能客服系統(tǒng)：開(kāi)發(fā)智能客服對(duì)話(huà)模板，評(píng)測(cè)與觀(guān)測(cè)優(yōu)化客戶(hù)咨詢(xún)體驗(yàn)。
• 內(nèi)容創(chuàng)作工具：幫助生成創(chuàng)意內(nèi)容，評(píng)測(cè)質(zhì)量并提升創(chuàng)作效率。
• 教育輔導(dǎo)系統(tǒng)：開(kāi)發(fā)個(gè)性化學(xué)習(xí)工具，評(píng)測(cè)學(xué)生進(jìn)度并優(yōu)化教學(xué)內(nèi)容。
• 醫(yī)療咨詢(xún)系統(tǒng)：提供初步健康建議，確保咨詢(xún)結(jié)果科學(xué)合理。
• 企業(yè)知識(shí)管理系統(tǒng)：快速回答內(nèi)部問(wèn)題，優(yōu)化知識(shí)庫(kù)以提高信息獲取效率。

常見(jiàn)問(wèn)題

• 扣子羅盤(pán)可以支持哪些開(kāi)發(fā)語(yǔ)言？：目前，扣子羅盤(pán)支持多種主流開(kāi)發(fā)語(yǔ)言，具體可根據(jù)官網(wǎng)信息確認(rèn)。
• 如何獲取支持和幫助？：用戶(hù)可以訪(fǎng)問(wèn)官網(wǎng)的幫助中心，獲取使用指南和技術(shù)支持。
• 扣子羅盤(pán)的使用是否收費(fèi)？：有關(guān)費(fèi)用信息，請(qǐng)?jiān)L問(wèn)官方網(wǎng)站查看詳細(xì)的價(jià)格政策。

欲了解更多信息，請(qǐng)?jiān)L問(wèn)我們的官方網(wǎng)站。