Chia tập dữ liệu thành các đơn vị có thể phục hồi
Với trích xuất đặc trưng, phân tích hình ảnh hoặc biến đổi tệp, hãy gán cho mỗi đơn vị công việc một mã định danh ổn định. Ghi kết quả vào một vị trí xác định và ghi lại cả thành công lẫn thất bại. Một lần gián đoạn phải cho phép tiếp tục các phần còn lại mà không nhầm lẫn giữa tệp thiếu và tệp không hợp lệ.
Trước tiên hãy thử cơ chế này trên vài đầu vào không đồng nhất. Sản phẩm hữu ích là một quy trình có khả năng phát hiện công việc chưa hoàn tất, chứ không chỉ là một thư mục chứa kết quả.
Tìm batch giữ được biên an toàn
48 GB cho phép bạn thử những lô lớn hơn so với dung lượng 24 GB, tùy theo tải. Hãy thay đổi số lượng phần tử mà không đổi định dạng, rồi thêm các trường hợp nặng nhất. Batch được chọn phải hấp thụ những chênh lệch này mà không làm đầy bộ nhớ ở mỗi biến thiên đầu vào.
Trong PyTorch, hãy phân biệt bộ nhớ bị tensor chiếm giữ và bộ nhớ được allocator đặt trước. Một con số cao trong công cụ hệ thống không tự động nghĩa là có rò rỉ; hãy xem xét diễn biến của nó và các đối tượng được chương trình giữ lại.
A40, RTX A6000 hay L40S
RTX A6000 vẫn thuộc dòng Ampere với 48 GB và đáng để so sánh cho phần mềm của bạn. L40S giữ dung lượng này trên kiến trúc Ada, đặc biệt cho pipeline hướng suy luận hoặc đa phương tiện. Nếu tập dữ liệu vừa với 24 GB và các lô nhỏ, hãy kiểm tra xem một card khiêm tốn hơn có đủ cho mục tiêu của bạn không.
Căn chỉnh thời hạn với khối lượng cần xử lý
Dùng 3 ngày để ước lượng công việc từ một mẫu, 7 ngày cho một chiến dịch đầu tiên có kiểm soát, hoặc 30 ngày cho nhiều đợt đã lên kế hoạch. Một ước lượng từ chính lần thử của bạn hữu ích hơn việc ngoại suy từ tên GPU.
Cấu hình các lô A40, thời hạn và môi trường, rồi đến thông tin liên hệ của bạn. Sau khi chọn crypto, hãy giữ hồ sơ đơn hàng cùng bản kê tập dữ liệu. Nút « Tôi đã thanh toán » ghi lại thông báo sau khi chuyển khoản và để quá trình xác minh diễn ra.