cmux

cmux Computer Use

ให้ Claude Code และ Codex ควบคุม Mac ของคุณ

ให้เอเจนต์เขียนโค้ด AI ใช้แอปเนทีฟบน Mac ด้วย cmux Computer Use เพื่ออ่านหน้าจอแอป ถ่ายภาพหน้าจอ คลิกปุ่ม และพิมพ์ข้อความ

หน้าตั้งค่าสิทธิ์การช่วยการเข้าถึงและภาพหน้าจอของ cmux Computer Use
สิทธิ์ของ Computer Use จัดการโดยโปรแกรมช่วยแยกต่างหาก เซสชันเทอร์มินัลจึงเปิดค้างไว้ได้ระหว่างการตั้งค่าเริ่มต้น

ควบคุมแอปเนทีฟบน Mac

  • ตรวจสอบหน้าจอแอปด้วยโครงสร้างการช่วยการเข้าถึงและภาพหน้าจอ
  • คลิก พิมพ์ เลื่อน ลาก และใช้ปุ่มลัดในแอป macOS
  • ติดตามเคอร์เซอร์ที่มองเห็นได้ของเอเจนต์ ตรวจสอบผลลัพธ์ และกลับไปยังเทอร์มินัลต้นทาง

เอเจนต์เขียนโค้ดของคุณใน cmux

เรียกใช้ Claude Code Codex OpenCode Pi Gemini CLI Kiro Aider Goose Amp Cline และ Cursor Agent และเอเจนต์บรรทัดคำสั่งอื่น ๆ ใน cmux

เครื่องมือ Computer Use สำหรับแอปเนทีฟจะเชื่อมต่ออัตโนมัติกับเซสชัน Claude Code และ Codex ที่เริ่มใน cmux เอเจนต์อื่นทำงานในเทอร์มินัลได้ แต่ยังไม่ได้รับการเชื่อมต่อควบคุม Mac แบบอัตโนมัตินี้

เริ่มต้นใช้งาน

  1. ติดตั้งและเปิด cmux สำหรับ Mac เปิด Computer Use ในการตั้งค่า → Computer Use
  2. ใช้ปุ่มสิทธิ์เพื่ออนุญาตการช่วยการเข้าถึงและการบันทึกหน้าจอให้ cmux Computer Use ในการตั้งค่าระบบ หากไม่พบโปรแกรมช่วยในรายการ ให้เพิ่มหรือลากไอคอนแอปไปยังแผงสิทธิ์
  3. เริ่มเซสชัน Claude Code หรือ Codex ใหม่ใน cmux ขอให้ใช้ Computer Use พร้อมระบุแอปและงาน เครื่องมือจะเชื่อมต่ออัตโนมัติโดยไม่ต้องตั้งค่า MCP เอง

คัดลอกพรอมต์ Computer Use

ใช้สกิล $cmux-cua หากไม่มีให้ติดตั้งด้วยตัวติดตั้งสกิลตามปกติ หากขาดสิทธิ์ให้บอกฉันเปิดการตั้งค่า cmux → Computer Use ตรวจสอบก่อนทำและยืนยันหลังทุกการเปลี่ยนแปลง

งาน: [อธิบายงานที่นี่]