AI Agent平臺本地AI代理工具:真正動手操作電腦的開源Agent,支持文件/瀏覽器/微信自動化

AI Agent平臺|能真正幫你干活的AI助手,不是聊天,是動手
AI助手總在“說”,不在“做”
你用Claude寫過周報,用Copilot補過代碼——但有沒有試過讓AI把上周會議錄音轉成文字、自動整理進Notion、再發郵件提醒老板?
大多數AI工具卡在“生成文本”這一步。它們能說,不能動。
你的電腦里有文件、瀏覽器、微信、郵箱……但AI看不見、摸不著、動不了。
AI Agent平臺——讓AI長出手和腳
AI Agent平臺不是另一個聊天框。它是一個本地運行的AI代理(Agent),能像真人一樣操作你的操作系統:
? 點擊按鈕、滾動網頁、拖拽文件
? 讀取截圖、識別窗口標題、定位按鈕坐標
? 調用系統命令、打開App、粘貼文本、發送快捷鍵
它不依賴云端API,所有操作發生在你自己的Mac/Windows/Linux上——隱私可控,響應快,離線可用。
?? 技術本質:AI Agent平臺 = 視覺理解(OCR+目標檢測) + 操作系統控制(Accessibility API / UI Automation) + LLM決策閉環。它把“你想做什么”翻譯成“鼠標點哪、鍵盤按什么”。
3分鐘跑起來,讓它幫你整理桌面
1. 安裝(僅需一條命令)
# Mac(推薦):
brew install ai-agent/tap/ai-agent
# Windows(PowerShell管理員模式):
winget install ai-agent.ai-agent
# Linux(Ubuntu/Debian):
curl -fsSL https://raw.githubusercontent.com/petersteinberger/AI Agent平臺/main/install.sh | bash為什么這樣裝?
AI Agent平臺自帶預編譯二進制,不用配Python環境、不裝CUDA、不下載大模型——它用輕量級本地模型(如Phi-3-mini)做決策,視覺模塊用優化過的ONNX推理,啟動只要2秒。
2. 啟動并給它一個任務
ai-agent --task "把桌面上所有PDF文件移到 ~/Documents/PDFs/ 文件夾"第一次運行會自動創建~/Documents/PDFs/(如果不存在),然后逐個識別桌面圖標→判斷是否為PDF→拖入目標文件夾→完成時彈出通知。
為什么能識別PDF?
它不靠文件后綴猜——而是截圖桌面,用內置視覺模型分析圖標樣式、右下角小標簽、預覽縮略圖,再結合文件元數據交叉驗證。哪怕你把report.pdf改成report.txt,它也能認出來。
3. 讓它接管瀏覽器(實測場景)

ai-agent --task "登錄 https://notion.so,找到‘項目周報’頁面,把今天日期寫在第一行,保存"它會:
① 打開Safari/Chrome → ② 輸入網址 → ③ 等待頁面加載 → ④ 截圖找“項目周報”鏈接(OCR識別文字+點擊)→ ⑤ 定位編輯區 → ⑥ 輸入2024-06-12 → ⑦ 按Ctrl+S(或Cmd+S)→ ⑧ 彈窗提示“已保存”。
關鍵點:它不依賴網頁結構。即使Notion改版、class名全換,只要人眼能看見“項目周報”四個字和編輯光標,AI Agent平臺就能操作。
親眼看到它干活
運行后觀察三件事:
?? 終端輸出實時日志(如[INFO] Found '項目周報' at (x=320, y=187))
?? 屏幕角落出現半透明操作指示器(顯示正在點擊/輸入)
?? 任務完成后終端打印? Task completed in 14.3s
試試這個真需求:
ai-agent --task "從微信Mac版里找到張三,把最近3條消息截圖發到郵箱xxx@www.nhjb.com.cn"它會喚起微信→搜索聯系人→滾動對話→截圖→喚起Mail→粘貼圖片→填收件人→發送。全程無需你碰鍵盤。
常見問題
Q:需要聯網嗎?
A:不需要。所有模型、OCR、自動化邏輯都打包在本地二進制里。斷網也能整理文件、操作本地App。
Q:能控制微信/釘釘/企業微信嗎?
A:Mac和Windows版支持(調用系統輔助功能API)。Linux暫不支持GUI應用控制(當前僅支持終端命令)。
Q:安全嗎?
A:它沒有網絡權限,默認不上傳任何數據。所有截圖、文件路徑、操作記錄只存在你本地內存,退出即清空。
Q:比AutoHotkey/AppleScript強在哪?
A:后者要你寫死坐標或元素ID;AI Agent平臺用視覺+語義理解——你告訴它“找紅色刪除按鈕”,它自己找,而不是靠click x=120 y=450。
下一步:讓它真正成為你的數字分身
現在你已經能讓AI Agent平臺執行單步任務。下一步可以:
?? 用YAML定義多步驟工作流(比如“每日晨會準備”:抓郵件→導出日程→生成摘要→發Teams)
?? 接入本地大模型提升決策能力(替換默認Phi-3為Qwen2-7B,處理復雜邏輯)
?? 配置MCP協議對接Dify,讓低代碼平臺調用它的操作能力
AI Agent平臺的價值不在“炫技”,而在把AI從嘴替變成手替。它不取代你思考,但把你從重復點擊中解放出來——省下的每分鐘,都該用來解決真正難的問題。
?? 小提示:今天就試一個任務——ai-agent --task "把Downloads文件夾里今天下載的圖片,按拍攝日期建子文件夾歸類"。親眼看著AI替你整理,比看一百篇評測都有說服力。