วิธีสั่ง Claude จากมือถือให้ขยับเมาส์ เปิดไฟล์ ทำงานบน Mac แทนคุณ

ลองนึกภาพว่าคุณนั่งอยู่ในร้านกาแฟ ข้อความจากเจ้านายเด้งเข้ามา "ส่งไฟล์สรุปยอดขายให้หน่อย ด่วน" แต่ไฟล์อยู่ในคอมพ์ที่บ้าน

ปกติคุณต้องรีบกลับ เปิดคอมพ์ เปิดไฟล์ ส่งอีเมล แต่ถ้าบอกว่าตอนนี้คุณหยิบมือถือขึ้นมา พิมพ์สั่ง AI ว่า "ช่วยเปิดไฟล์ Excel ทำสรุปยอดขาย เปิดอีเมลแล้วส่งให้เจ้านาย" แล้ว AI จะไปขยับเมาส์ เปิดโปรแกรม พิมพ์ข้อมูล ทำให้จนเสร็จจริงๆ บนคอมพ์ที่บ้านของคุณ

ฟังเหมือนหนัง sci-fi แต่มันเกิดขึ้นจริงแล้ว

เมื่อ 23 มีนาคมที่ผ่านมา Anthropic เปิดตัวฟีเจอร์ Computer Use ให้ Claude ควบคุมเมาส์ คีย์บอร์ด และหน้าจอ Mac ได้เหมือนมีคนนั่งใช้งานอยู่จริงๆ ผมขุดข้อมูลมาหมดแล้ว ทั้งวิธี setup ผลทดสอบจริง และสิ่งที่ต้องระวัง มาดูกัน

Claude ทำอะไรได้บ้างบน Mac ของคุณ

พูดง่ายๆ Claude ทำได้ทุกอย่างที่คนนั่งหน้าคอมพ์ทำได้ เปิดไฟล์ ท่องเว็บ กรอก spreadsheet พิมพ์อีเมล ลากไฟล์ ใช้ keyboard shortcut ทำได้หมด

วิธีที่มันทำก็ตรงตัวมาก Claude จะจับภาพหน้าจอขึ้นมาดูว่าตอนนี้บนจอแสดงอะไรอยู่ แล้วก็ขยับเมาส์ คลิก พิมพ์ เหมือนมีคนนั่งอยู่จริงๆ ไม่ได้ใช้ code หรือ API ลับอะไร แต่เป็นการ "มองจอแล้วใช้มือ" เหมือนคนเลย

ผมว่านี่คือจุดที่น่าทึ่งที่สุด ก่อนหน้านี้ AI ทำได้แค่ตอบคำถาม เขียนข้อความ เขียนโค้ด แต่ตอนนี้มันเริ่ม "ลงมือทำ" ได้แล้วจริงๆ

นี่คือครั้งแรกที่ AI ใช้คอมพิวเตอร์ได้แบบเดียวกับคน ไม่ใช่ผ่าน code แต่เป็นการมองหน้าจอ ขยับเมาส์ พิมพ์คีย์บอร์ด เหมือนมีคนนั่งอยู่จริงๆ

ระบบ 3 ชั้น: Claude เลือกทำงานยังไง

Claude ไม่ได้ขยับเมาส์ทุกครั้ง มันฉลาดกว่านั้น ระบบทำงานเป็น 3 ชั้นเรียงตามลำดับความสำคัญ

ชั้นแรก: ใช้ทางลัดถ้ามี ถ้างานนั้นทำผ่าน connector ได้โดยตรง เช่น Gmail, Google Drive, Slack หรือ Google Calendar Claude จะเลือกใช้ทางนี้ก่อนเสมอ เหมือนมีประตูลัดเข้าถึงข้อมูลได้เลย ไม่ต้องเดินอ้อม Anthropic บอกเองว่าทางนี้ "เร็วและเสถียรที่สุด"

ชั้นสอง: เปิด Chrome ถ้าไม่มีทางลัด Claude จะเปิด Chrome แล้วท่องเว็บเหมือนคนใช้ เปิดเว็บไซต์ กรอกฟอร์ม คลิกปุ่ม ทำได้หมด

ชั้นสาม: ควบคุมหน้าจอโดยตรง ถ้าสองวิธีแรกไม่พอ Claude จะจับ screenshot ดูว่าจอแสดงอะไรอยู่ แล้วขยับเมาส์ คลิก ลาก พิมพ์ ทำงานกับแอปบนเดสก์ท็อปได้ทุกตัว

เปรียบเทียบให้เห็นภาพ เหมือนคุณจะส่งของให้เพื่อน วิธีแรกคือส่งผ่านแอปเลย (connector) ถ้าไม่มีแอปก็เปิดเว็บสั่ง (Chrome) ถ้าไม่มีทั้งสองอย่างก็ต้องขับรถไปส่งเอง (screen control)

Dispatch: สั่งงานจากมือถือ

ถ้า Computer Use คือ "เลขาที่นั่งทำงานหน้าคอมพ์ของคุณ" Dispatch ก็คือ "วิทยุสื่อสารระหว่างคุณกับเลขาคนนั้น"

Dispatch เปิดตัวก่อน Computer Use 6 วัน เป็นฟีเจอร์ที่เชื่อมแอป Claude บนมือถือ (ทั้ง iOS และ Android) กับ Claude Desktop บน Mac สร้างเป็น thread เดียวที่คุยกันได้ต่อเนื่อง คุณส่งข้อความจากมือถือ Claude ก็ไปทำงานจริงบน Mac ให้

ลองนึกภาพ คุณอยู่ข้างนอก หยิบมือถือขึ้นมาพิมพ์ว่า "ช่วย export pitch deck เป็น PDF แล้วแนบไปกับ meeting invite ด้วย" Claude ที่นั่งอยู่หน้า Mac ของคุณก็จะเปิดโปรแกรม export ไฟล์ เปิดปฏิทิน แนบไฟล์ ทำจนเสร็จ

ฟังดูเจ๋งมาก แต่ผมต้องบอกตรงๆ ว่ามีข้อแม้สำคัญ

Mac ของคุณต้องเปิดและตื่นอยู่ตลอดเวลา ถ้า Mac หลับหรือปิดแอป Claude Desktop งานจะหยุดทันที ไม่ใช่ "ทำงานได้ทุกที่ทุกเวลา" อย่างที่บาง headline ทำให้เข้าใจ

วิธี setup ทุกขั้นตอน

ก่อนอื่น ฟีเจอร์นี้ใช้ได้เฉพาะสมาชิก Pro ($20/เดือน) และ Max ($100-200/เดือน) บน macOS เท่านั้น Team กับ Enterprise ยังใช้ Computer Use ไม่ได้ และ Windows ยังไม่รองรับ

เปิด Computer Use (4 ขั้นตอน)

ขั้นที่ 1: อัปเดต Claude Desktop เป็นเวอร์ชันล่าสุด ขั้นที่ 2: เปิดแอปแล้วไปที่ Settings > General ขั้นที่ 3: เปิด toggle ที่เขียนว่า "Computer use" ขั้นที่ 4: ตั้งค่าให้ Mac ไม่หลับระหว่างทำงาน

สิ่งสำคัญคือ toggle นี้ไม่ได้เปิดมาอัตโนมัติ คุณต้องเข้าไปเปิดเอง หลายข่าวเขียนว่า "ไม่ต้อง setup" แต่จริงๆ ต้องทำขั้นตอนนี้ก่อน

setup Dispatch สั่งจากมือถือ (ใช้เวลาไม่ถึง 2 นาที)

ขั้นที่ 1: อัปเดตทั้ง Claude Desktop บน Mac และแอป Claude บนมือถือเป็นเวอร์ชันล่าสุด ขั้นที่ 2: เปิด Cowork บน Desktop แล้วคลิก "Dispatch" ในแถบด้านซ้าย ขั้นที่ 3: คลิก "Get started" แล้วเปิด permissions ที่ระบบขอ ทั้ง file access และ keep computer awake

ขั้นที่ 4: คลิก "Finish setup" แล้วสแกน QR code ด้วยมือถือเพื่อจับคู่ เสร็จแล้วก็เริ่มพิมพ์สั่งงานในส่วน Dispatch บนมือถือได้เลย

ทดสอบจริง: สำเร็จแค่ครึ่งเดียว

ตรงนี้ผมต้องพูดตรงๆ เพราะหลายข่าวให้ภาพสวยกว่าความเป็นจริงมาก

MacStories ทดสอบ Dispatch กับ 14 งานจริง ผลคือทำสำเร็จประมาณครึ่งเดียวเท่านั้น งานที่ทำได้ดีส่วนใหญ่เป็นพวกดึงข้อมูล เช่น สรุปอีเมลล่าสุด ค้นหา screenshot ที่มีคำเฉพาะ สรุป Notion notes หรือลิสต์รายการใน database

แต่งานที่ต้องเปิดแอปหรือทำงานข้ามแอป มักจะพัง เปิด Shortcuts ไม่ได้ ส่ง screenshot ผ่าน iMessage ไม่สำเร็จ เข้า Terminal ไม่ได้ ดึง URL จาก Safari tabs ก็ทำไม่ได้เหมือนกัน

ถ้าเป็นคุณ คุณจะไว้ใจเลขาที่ทำงานสำเร็จแค่ครึ่งหนึ่งไหม?

Anthropic เองก็ยอมรับตรงๆ ว่า "Computer use ยังอยู่ในขั้นเริ่มต้น เมื่อเทียบกับความสามารถของ Claude ในการเขียนโค้ดหรือทำงานกับข้อความ" และย้ำว่า "Claude อาจทำผิดพลาดได้"

ทดสอบ 14 งาน สำเร็จประมาณครึ่ง งานดึงข้อมูลทำได้ดี แต่งานสั่งทำข้ามแอปยังสะดุด ถ้าจะใช้วันนี้ ต้องเข้าใจว่ายังเป็นรุ่นทดลอง

Claude เห็นทุกอย่างบนจอคุณ

ตรงนี้สำคัญมาก ต้องพูดให้ชัด

Computer Use ทำงานนอก sandbox โดยตรง คำว่า sandbox ให้นึกภาพกล่องทรายที่กั้นเด็กเล่นไม่ให้ออกไปนอกกล่อง แต่ Claude ไม่ได้อยู่ในกล่อง มันเข้าถึงคอมพ์ของคุณได้โดยตรง

หมายความว่า Claude เห็นทุกอย่างที่อยู่บนหน้าจอ รูปถ่ายส่วนตัว เอกสารลับ ข้อความแชท ทุกอย่างที่เปิดอยู่บนจอ Claude จะจับ screenshot ขึ้นมาดูเพื่อนำทางตัวเอง

ผมอ่านตรงนี้แล้วขนลุก

แต่ Anthropic ก็วางระบบป้องกันไว้หลายชั้น Claude จะขออนุญาตก่อนเข้าถึงแอปใหม่ทุกครั้ง แอปที่มีความเสี่ยงสูง เช่น แอปธนาคาร แพลตฟอร์มลงทุน เครื่องมือ crypto ถูกบล็อกไว้ตั้งแต่แรก คุณเพิ่ม blocklist เองได้ Claude ต้องขออนุญาตก่อนลบไฟล์ และคุณหยุดมันได้ตลอดเวลา

รหัสผ่านกับข้อมูลการเงินถูกแยกออกจาก memory ของ Cowork และมีระบบสแกน prompt injection อัตโนมัติเพื่อป้องกันไม่ให้เว็บไซต์หรือเนื้อหาภายนอกหลอกให้ Claude ทำสิ่งที่ไม่ควร

ถ้าถามผม ก่อนเปิดใช้ ให้ปิดแอปที่มีข้อมูลส่วนตัวทั้งหมดก่อน อย่าเสี่ยงโดยไม่จำเป็น

ข้อจำกัดที่ต้องรู้ก่อนตัดสินใจ

macOS เท่านั้น Windows ยังใช้ไม่ได้ Anthropic บอกว่ากำลังมา "ในอีกไม่กี่สัปดาห์" แต่ยังไม่มีวันที่แน่นอน

Mac ต้องเปิดตลอด ถ้า Mac หลับหรือปิดแอป Claude Desktop งานหยุดทันที ไม่มีระบบทำงานต่อจากที่ค้างไว้ ถ้าเน็ตหลุดก็สื่อสารกันไม่ได้เช่นกัน

สั่งได้ทีละเรื่อง Dispatch ใช้ได้แค่ thread เดียว ยังสั่งงานหลายอย่างพร้อมกันไม่ได้ และยังไม่มีระบบแจ้งเตือนเมื่องานเสร็จ คุณต้องเข้าไปเช็คเอง

ไม่มี audit log กิจกรรมทั้งหมดไม่ถูกบันทึกลงระบบตรวจสอบ ถ้าทำงานที่ต้องปฏิบัติตามกฎระเบียบ อย่าใช้ฟีเจอร์นี้เด็ดขาด ข้อมูลเก็บแบบ local บนเครื่องเท่านั้น ไม่ได้อยู่บน server ของ Anthropic

Screen control ช้า การขยับเมาส์ช้ากว่าการใช้ connector โดยตรงมาก งานซับซ้อนอาจต้องลองหลายรอบ Anthropic เรียกมันว่า research preview ซึ่งก็คือรุ่นทดลองนั่นเอง

มุมมองผม: นี่คือจุดเริ่มต้น

ถ้าถามผมว่าตอนนี้ควรใช้จริงจังไหม คำตอบคือ "ยังไม่ควร" สำหรับงานสำคัญ แต่ "ลองเล่นได้เลย" สำหรับงานที่พลาดแล้วไม่เจ็บ

ลองให้ Claude สรุปอีเมล ค้นหาไฟล์ ดึงข้อมูลจาก Notion งานพวกนี้ทำได้ดีอยู่แล้ว แต่ถ้าจะให้ส่งอีเมลสำคัญหรือทำงานที่ย้อนกลับไม่ได้ ผมยังไม่แนะนำ

ตลาดนี้ร้อนแรงมาก OpenClaw ที่เป็น open-source มี GitHub stars กว่า 247,000 รองรับทั้ง macOS, Windows และ Linux ส่วน Perplexity กับ Meta ก็มีฟีเจอร์คล้ายกันกำลังตามมา

สิ่งที่ทำให้ Claude น่าจับตาคือระบบ connector 3 ชั้นที่เลือกวิธีทำงานอัตโนมัติ ไม่ได้พึ่ง screen control อย่างเดียว แต่ข้อเสียคือตอนนี้ยังรองรับแค่ macOS และเป็น closed-source

ลองมองให้ไกลกว่าข้อจำกัดวันนี้ เมื่อไม่กี่ปีก่อน AI ทำได้แค่ตอบคำถาม วันนี้มันขยับเมาส์ เปิดไฟล์ กรอกตารางบนคอมพ์ของคุณได้แล้ว แม้จะยังไม่สมบูรณ์ แต่ทิศทางชัดเจนมาก

วันนี้สำเร็จแค่ครึ่งเดียว แต่คำถามที่ต้องถามตัวเองคือ ถ้าอีกปีหนึ่งมันทำได้ 90% ชีวิตการทำงานของเราจะเปลี่ยนไปแค่ไหน

แหล่งอ้างอิง

• Put Claude to work on your computer | Claude Blog (Anthropic)
• Let Claude use your computer in Cowork | Claude Help Center
• Assign tasks to Claude from anywhere in Cowork | Claude Help Center
• Use Cowork safely | Claude Help Center
• Hands-On with Claude Dispatch for Cowork | MacStories
• Release notes | Claude Help Center
• Anthropic is giving Claude the ability to use your Mac for you | 9to5Mac