Bỏ qua để vào nội dung chính
Claude Code lái iPhone thật: tự quay video review App Store

Claude Code lái iPhone thật: tự quay video review App Store

Bởi Amelia Brooks
13 thg 11, 20264 phút đọc

Apple bắt quay video trên máy thật. Một dev dùng XCUITest cho Claude Code lái iPhone cắm cáp, kèm cả 5 lần chạy hỏng và lỗi nguyên văn từ Xcode.

App của bạn bị Apple từ chối và họ yêu cầu một video quay trên máy thật. Bạn quay tay, build mới, rồi lại quay tay lần nữa. Có cách khác: để Claude Code điều khiển chiếc iPhone cắm cáp, chạy lại đúng kịch bản đó mỗi lần build.

Một lập trình viên iOS vừa viết lại toàn bộ quy trình này, kèm từng lần chạy thất bại và lỗi nguyên văn từ Xcode. Điểm quan trọng đầu tiên, theo tác giả: "There is no jailbreak and no hacking. It is Xcode's own UI testing (XCUITest), run on a real iPhone over a cable." Toàn bộ công cụ là đồ Apple đã ship sẵn.

Cách agent "nhìn" màn hình

Không phải đoán pixel. Tác giả mô tả: Claude Code đọc màn hình theo hai đường — một ảnh chụp, và danh sách mọi button cùng label — rồi chạm theo tên chứ không theo toạ độ. Test tìm phần tử bằng đúng chuỗi text mà VoiceOver sẽ đọc, thử lần lượt button khớp chính xác, button khớp một phần, static text, rồi mới tới phần tử bất kỳ.

Chi tiết dễ bỏ sót: hộp thoại xin quyền không thuộc app của bạn. Theo bài viết, chúng thuộc SpringBoard — tiến trình màn hình chính của iPhone. Chỉ tìm bên trong app thì không bao giờ thấy chúng.

Năm lần chạy, năm lần hỏng

Phần giá trị nhất của bài không phải lúc nó chạy được, mà là lúc nó hỏng. Tác giả ghi: tối 2/11, test kết nối Mac chạy năm lần trên iPhone 14 Pro Max (iOS 27.2) trong khoảng tám phút, không lần nào tới đích, với bốn nguyên nhân khác nhau.

  • Ô nhập đã có sẵn giá trị. Ô Port điền sẵn mặc định 50000. Chạm rồi gõ thì Xcode báo "Neither element nor any descendant has keyboard focus" — tap vào nhưng field không nhận focus bàn phím. Cách sửa: kiểm tra focus rồi chạm lại, và xoá sạch nội dung cũ trước khi gõ.
  • Bàn phím che ô kế tiếp. Gõ xong một ô, bàn phím vẫn đứng đó. Trên iPhone 6,7 inch, bàn phím và thanh toolbar nằm đè lên các ô phía dưới. Cách sửa là chạm vào vùng trống gần đỉnh màn hình để đóng bàn phím trước.
  • Kết nối trước khi được cấp quyền. App thử kết nối trước khi người dùng kịp trả lời hộp thoại quyền mạng nội bộ, nên màn hình đứng ở trạng thái lỗi thay vì danh sách terminal. Cách sửa: chấp nhận hộp thoại, chờ, rồi chạm lại vào dòng của máy Mac nếu thông báo lỗi còn trên màn hình.
  • Script chết không một lời. Đây là lỗi thú vị nhất và chẳng liên quan gì tới iPhone. Script bật set -euo pipefail, còn lệnh tìm PID thì pipe ps vào awk. awk in kết quả đầu tiên rồi thoát, ps vẫn đang ghi tiếp vào pipe không ai đọc, nhận SIGPIPE và thoát với status 141 — pipefail lấy luôn 141 làm status cả dòng và set -e kết thúc script.

Lần chạy thứ năm làm được đúng thứ Apple yêu cầu: ghép đôi với máy Mac, kết nối qua Wi-Fi, liệt kê terminal của Mac và mở một terminal mới. Nó dừng ở bước sau đó, tại nút phóng to chữ.

Thứ bạn nhận được sau mỗi lần chạy

Bản ghi đến miễn phí từ test plan. Theo bài, kết quả lần chạy cuối chứa một bản ghi màn hình dài 78 giây ở 1290×2796, 14 ảnh chụp giao diện và 18 sự kiện chạm/gõ được ghi lại. Một mẹo nhỏ đáng chép: script uninstall app trước mỗi lần chạy, vì nếu không, iOS nhớ quyền đã cấp và những hộp thoại mà Apple muốn thấy sẽ không bao giờ hiện ra nữa.

Tác giả nói thẳng về giới hạn: cách này không nhanh. Giá trị nằm ở chỗ lần chạy thứ một trăm trông giống hệt lần chạy thứ nhất — đúng thứ bạn cần khi phải nộp lại video cho mỗi phiên bản.

Đang có app chờ duyệt? Thứ đáng thử trước không phải cả pipeline, mà là mấy dòng cấu hình test plan bật ghi màn hình và giữ ảnh chụp. Có bản ghi tự động rồi hãy tính tới phần còn lại.

Không spam, hủy đăng ký bất kỳ lúc nào.

Bài viết liên quan