產品名稱:Project Mariner
產品簡介:Project Mariner 是谷歌 DeepMind 推出的瀏覽器助手。Project Mariner基于 Gemini 2.0 技術,用 Chrome 擴展程序實現瀏覽器自動化,理解和執行網頁任務。Project Mariner能理解和推理瀏覽器屏幕上的信息,包括像素和網頁元素,基于 Chrome 擴展程序使用這些信息完成任務。Project Mariner 能控制 Chrome 瀏覽器、移動屏幕上的光標、點擊按鈕和填寫表格,像人類一樣使用和瀏覽網站。
詳細介紹:
Project Mariner是什么
Project Mariner 是谷歌 DeepMind 推出的瀏覽器助手。Project Mariner基于 Gemini 2.0 技術,用 Chrome 擴展程序實現瀏覽器自動化,理解和執行網頁任務。Project Mariner能理解和推理瀏覽器屏幕上的信息,包括像素和網頁元素,基于 Chrome 擴展程序使用這些信息完成任務。Project Mariner 能控制 Chrome 瀏覽器、移動屏幕上的光標、點擊按鈕和填寫表格,像人類一樣使用和瀏覽網站。Project Mariner在 WebVoyager 基準測試中達到 83.5% 的高分成績。目前,Project Mariner 只能在瀏覽器的活動選項卡中執行鍵入、滾動和點擊操作,在執行某些敏感操作(如購買物品)之前,會要求用戶進行最終確認。
Project Mariner的主要功能
- 多模態理解:理解瀏覽器屏幕上的所有內容,包括像素、文本、代碼、圖像和表單等數據。
- 瀏覽器交互:實時導航和操作復雜的網站,自動執行瀏覽器中的任務,保持用戶的控制權。
- 自動化任務:自動與瀏覽器進行交互操作,將數據整理、填充到網頁其他區域,同時將數據按照用戶的要求整理好。
- 復雜指令處理:理解、執行復雜的用戶指令,分解為可執行的步驟。
- 關系理解:理解不同網頁元素之間的關系及其功能。
- 視覺反饋:在執行任務時提供視覺反饋和更新,讓用戶了解進度。
- 安全性:在執行敏感操作(如購物和付款)之前,會要求用戶進行最終確認,確保安全性。
如何使用Project Mariner
Project Mariner目前處于早期測試階段,僅對少數測試者開放,訪問Project Mariner的官方網站,加入等候名單。
Project Mariner的應用場景
- 數據整理與復制:將網頁上的數據復制到電子表格中進行整理,例如從存儲大量數據的網頁提取信息,整理到Excel等表格軟件中。
- 在線購物:根據用戶給出的購物清單,自動在電子商務網站上搜索商品添加到購物車。
- 旅行規劃:幫助用戶查找航班和酒店信息,自動化旅行規劃過程中的網頁瀏覽和信息比較。
- 日常購物:為用戶在零售網站上購物,如搜索、購買家庭用品。
- 食譜查找:在食譜網站上根據用戶需求自動搜索和選擇食譜。
? 版權聲明
文章版權歸作者所有,未經允許請勿轉載。
相關文章
暫無評論...