cmux Computer Use

ផ្តល់ឱ្យភ្នាក់ងារ AI សរសេរកូដនូវការប្រើកម្មវិធីដើមរបស់ Mac។ cmux Computer Use អាចអានចំណុចប្រទាក់ ថតអេក្រង់ ចុចប៊ូតុង និងវាយអត្ថបទ។

ភ្នាក់ងារដែលគាំទ្រ

ឧបករណ៍ Computer Use ដើមភ្ជាប់ដោយស្វ័យប្រវត្តិទៅសម័យជំនួប Claude Code និង Codex ដែលចាប់ផ្ដើមក្នុង cmux។ ភ្នាក់ងារផ្សេងទៀតអាចដំណើរការក្នុង terminal ប៉ុន្តែមិនទាន់ទទួលបានការភ្ជាប់គ្រប់គ្រង Mac ដោយស្វ័យប្រវត្តិនេះទេ។

ចាប់ផ្ដើមប្រើ

1. ដំឡើង និងបើក cmux សម្រាប់ Mac។ បើក Computer Use ក្នុងការកំណត់ → Computer Use។
2. ប្រើប៊ូតុងសិទ្ធិ ដើម្បីអនុញ្ញាតភាពងាយស្រួល និងការថតអេក្រង់ឱ្យ cmux Computer Use ក្នុងការកំណត់ប្រព័ន្ធ។ បើកម្មវិធីជំនួយមិនមានក្នុងបញ្ជី សូមបន្ថែម ឬអូសរូបតំណាងកម្មវិធីរបស់វាទៅផ្ទាំងសិទ្ធិ។
3. ចាប់ផ្ដើមសម័យជំនួប Claude Code ឬ Codex ថ្មីក្នុង cmux។ ស្នើឱ្យប្រើ Computer Use ហើយបញ្ជាក់កម្មវិធី និងកិច្ចការ។ ឧបករណ៍ភ្ជាប់ដោយស្វ័យប្រវត្តិ ដោយមិនចាំបាច់កំណត់ MCP ដោយដៃ។

ចម្លង prompt Computer Use

ប្រើជំនាញ $cmux-cua។ បើគ្មាន សូមដំឡើងតាមកម្មវិធីធម្មតា។ បើខ្វះសិទ្ធិ សូមប្រាប់ខ្ញុំឱ្យបើកការកំណត់ cmux → Computer Use។ ពិនិត្យមុនធ្វើ និងពិនិត្យរាល់ការផ្លាស់ប្ដូរ។

កិច្ចការ៖ [ពិពណ៌នាកិច្ចការនៅទីនេះ]

សិទ្ធិ និងការដំឡើង

ភាពងាយស្រួលអនុញ្ញាតឱ្យអាន និងប្រើចំណុចប្រទាក់។ ការថតអេក្រង់អនុញ្ញាតឱ្យថតរូបអេក្រង់។ ផ្ដល់សិទ្ធិទាំងពីរឱ្យ cmux Computer Use។ ការបើក cmux ឬភ្នាក់ងារមិនផ្ដល់សិទ្ធិ ឬបើកការដំឡើងដោយស្វ័យប្រវត្តិទេ។

សិទ្ធិ Computer Use ត្រូវបានគ្រប់គ្រងដោយកម្មវិធីជំនួយដាច់ដោយឡែក ដូច្នេះសម័យជំនួប terminal នៅតែបើកក្នុងអំឡុងការដំឡើងដំបូង។

លើ macOS Tahoe សូមយល់ព្រមលើការបញ្ជាក់ថតអេក្រង់បន្ថែមក្នុងអំឡុងការដំឡើង។ សាកល្បងកិច្ចការម្ដងទៀតនៅពេល cmux បង្ហាញថាសិទ្ធិទាំងពីរត្រូវបានផ្ដល់។

សាកល្បងជាមួយម៉ាស៊ីនគិតលេខ

ប្រើ cmux Computer Use ដើម្បីបើកម៉ាស៊ីនគិតលេខ ចុច 100 + 105 ហើយបង្ហាញលទ្ធផលឱ្យខ្ញុំ។

ពិនិត្យគោលដៅមុន ធ្វើសកម្មភាពលើធាតុក្នុងរូបថតស្ថានភាពបច្ចុប្បន្ន ហើយពិនិត្យលទ្ធផលម្ដងទៀត។ សន្ទស្សន៍ធាតុមានសុពលភាពតែសម្រាប់ស្ថានភាពនោះ។ ធ្វើបច្ចុប្បន្នភាពក្រោយប្ដូរទំព័រ ឬប្លង់។ ការបញ្ជាក់ចុចជោគជ័យមិនបញ្ជាក់ថាកិច្ចការចប់ទេ។

ឧបករណ៍ភ្នាក់ងារ

cmux-cua ជាម៉ាស៊ីនមេ MCP ដែលភ្ជាប់មកជាមួយ សម្រាប់ឧបករណ៍គ្រប់គ្រងកម្មវិធីដើម។ ទាំងនេះជាឈ្មោះឧបករណ៍ មិនមែនពាក្យបញ្ជា shell ទេ។ អាគុយម៉ង់អាស្រ័យលើប្រូហ្វាល់ភ្នាក់ងារ។ ប្រើគ្រោងការណ៍ដែលភ្ជាប់នឹងសម័យជំនួប។

Codex

Codex ប្រើ get_app_state ជាមួយឈ្មោះកម្មវិធី ឬលេខសម្គាល់កញ្ចប់ ដើម្បីទទួលរូបថត និងមែកធាងភាពងាយស្រួល។ ប្រើ element_index បច្ចុប្បន្ន ឬកូអរដោនេរូបថត ហើយហៅ get_app_state ម្ដងទៀត។ ឧបករណ៍៖

list_apps, get_app_state, click, perform_secondary_action,
set_value, select_text, scroll, drag, press_key, type_text

Claude Code

Claude Code ប្រើ list_apps និង list_windows ដើម្បីរកគោលដៅ ហើយប្រើ get_window_state ជាមួយ pid និង window_id។ ជ្រើសសញ្ញាសម្គាល់ធាតុ ឬសន្ទស្សន៍ថ្មី។ ប្រូហ្វាល់ដើមក៏មាន perform_actions សម្រាប់ក្រុមសកម្មភាពដែលមិនធ្វើឱ្យគោលដៅបន្ទាប់បាត់សុពលភាព។

list_apps → list_windows → get_window_state
click / type_text / press_key / scroll / drag
get_window_state

តាមដាន និងបញ្ឈប់ Computer Use

Computer Use ក្នុងរបារម៉ឺនុយបង្ហាញភ្នាក់ងារសកម្ម។ Focus Computer Use តាមកម្មវិធីដែលកំពុងគ្រប់គ្រង។ Focus Calling Terminal ត្រឡប់ទៅ terminal ដើមដោយមិនបញ្ឈប់ស្វ័យប្រវត្តិកម្ម។ ប្រើសកម្មភាពបញ្ឈប់ក្នុងម៉ឺនុយដើម្បីបញ្ចប់សម័យជំនួបគ្រប់គ្រង។

បិទ Computer Use ក្នុងការកំណត់។ ដើម្បីមិនភ្ជាប់ឧបករណ៍ទៅភ្នាក់ងារថ្មី កំណត់ CMUX_COMPUTER_USE_MCP_DISABLED=1 មុនចាប់ផ្ដើម។

ជំនាញ

ជំនាញ cmux-cua ពន្យល់លំហូរពិនិត្យ និងសកម្មភាព។ វាជាជម្រើស ហើយមិនផ្ដល់សិទ្ធិ macOS ទេ។ សម្រាប់ការដំឡើងអចិន្ត្រៃយ៍ ប្រើកម្មវិធីដំឡើងជំនាញរបស់ភ្នាក់ងារ។ cmux មិនដំឡើងជំនាញសកលតាមលំនាំដើមទេ។

អានជំនាញ cmux-cua

កម្មវិធីដើម និងស្វ័យប្រវត្តិកម្មកម្មវិធីរុករក

Computer Use គ្រប់គ្រងបង្អួច Mac ដើមតាមរូបថត និងភាពងាយស្រួល។ សម្រាប់ផ្ទាំងកម្មវិធីរុករក cmux ប្រើ cmux browser ជាមួយរូបថត DOM ឧបករណ៍ជ្រើសរើស ទម្រង់ និង JavaScript។ យោងផ្ទៃកម្មវិធីរុករកខុសពីសន្ទស្សន៍ធាតុកម្មវិធីដើម។

ឯកសារយោងស្វ័យប្រវត្តិកម្មកម្មវិធីរុករក

ការដោះស្រាយបញ្ហា

ភ្នាក់ងារគ្មានឧបករណ៍ Computer Use

បើក Computer Use ហើយចាប់ផ្ដើមសម័យជំនួប Claude Code ឬ Codex ថ្មីក្នុង cmux។ សម័យជំនួបចាស់អាចរក្សាឧបករណ៍ដើម។ ពិនិត្យថាអថេរបរិស្ថាន ឬគោលការណ៍គ្រប់គ្រងមិនបានបិទមុខងារនេះ។

ការដំឡើងមិនចប់ ការចុចបរាជ័យ ឬរូបថតទទេ

បើកការកំណត់ → Computer Use ម្ដងទៀត ហើយបញ្ចប់សិទ្ធិទាំងពីរ រួមទាំងការបញ្ជាក់ថតបន្ថែម។ បន្ទាប់មកសាកល្បងម្ដងទៀត។ Terminal អាចនៅបើក បើកម្មវិធីជំនួយត្រូវចាប់ផ្ដើមឡើងវិញ។

បង្អួចខុស ឬការចុចត្រូវបានរារាំង

ពិនិត្យកម្មវិធីម្ដងទៀត និងជ្រើសធាតុពីស្ថានភាពបច្ចុប្បន្ន។ បើបង្អួចផ្សេងបាំងគោលដៅ បង្ហាញបង្អួចដែលចង់បាន ហើយពិនិត្យមុនសាកល្បង។ កុំប្រើកូអរដោនេ ឬសន្ទស្សន៍ចាស់ម្ដងទៀត។

ទិដ្ឋភាពទូទៅនៃ cmux Computer Use