AI

出大事了...

AI能模仿人類在手機上操作APP了

AppAgent可以通過自主學習和模仿人類的點擊和滑動手勢，能夠在手機上執(zhí)行各種任務。

它可以在社交媒體上發(fā)帖、幫你撰寫和發(fā)送郵件 、使用地圖、在線購物，甚至進行復雜的圖像編輯...

AppAgent在50 個任務上進行了廣泛測試，涵蓋了10種不同的應用程序。

該項目由騰訊和德州大學達拉斯分校的研究團開發(fā)。

主要功能特點：

- 多模態(tài)代理：AppAgent 是一個基于大語言模型的多模態(tài)代理，它能夠處理和理解多種類型的信息（如文本、圖像、觸控操作等）。這使得它能夠理解復雜的任務并在各種不同的應用程序中執(zhí)行這些任務。

- 直觀交互：它能通過模仿人類的直觀動作（如點擊和滑動屏幕）來與智能手機應用程序交互。就像一個真人用戶一樣。

- 自主學習：AppAgent 通過觀察和分析不同應用程序中的用戶界面交互。并學習這些交互模式，并將所獲得的知識編譯成文檔。

- 構建知識庫：通過這些交互，AppAgent 構建了一個知識庫，記錄了不同應用程序的操作方法和界面布局。這個知識庫隨后用于指導代理在不同應用程序中執(zhí)行任務。

-執(zhí)行復雜任務：一旦學習了應用程序的操作方式，AppAgent 就能夠執(zhí)行跨應用程序的復雜任務，如發(fā)送電子郵件、編輯圖片。

好東西

好東西