OpenAI旗下Codex新增一項重要新功能,名為電腦操作(computer use),AI agent可以自行操作用戶的電腦,睇畫面、㩒按鈕、打字全部自行處理,無需人手介入。全球每星期有超過300萬程式設斗員使用Codex,今次更新代表Codex由純粹寫程式的工具,拓展至可以操作整部電腦的AI助手。
電腦操作(computer use)最關鍵之處,在於多個Codex agent可以同一時間在電腦上分別執行不同任務,期間不會干擾用戶其他工作。用戶可以一邊繼續使用其他app,agent在背後同時處理多項事情。OpenAI稱,電腦操作功能對於要測試app、擷取網上資料、試玩介面等特別有用。過往這些工作都要有人親自坐在電腦前逐步操作,現在可以交由AI代勞。
Codex亦開始採用gpt-image-1.5模型生成圖像,方便程式設計員在同一個workflow內製作產品概念圖、mockup或遊戲素材,無需再拆開用其他工具生成圖片。其主要對手Claude,發展至今都無直接生成圖像功能,程式設計員要自行搵方法,否則要拆開用其他工具生成圖片,相當麻煩
其他更新包括新增超過90個插件,接駁Atlassian Rovo、JIRA、CircleCI、CodeRabbit、GitLab Issues、Microsoft Suite、Neon、Render等工具。記憶功能同自動排程亦同步推出,Codex可以記住用戶偏好、定期自動啟動繼續處理長期任務,過程可以跨日跨星期進行。
OpenAI稱電腦操作(computer use)功能由今日起,所有ChatGPT用戶都可以使用有關新功能,但初期只限macOS,歐盟同英國用戶亦要等稍後才可用到。
