Tạo một tập dữ liệu phân chia tập dữ liệu đầu vào.
Tạo một tập dữ liệu phân chia tập dữ liệu đầu vào theo num_workers, trả về tập dữ liệu được phân chia cho nhân viên thứ chỉ mục. Điều này cố gắng tự động phân chia tập dữ liệu bằng cách kiểm tra biểu đồ Tập dữ liệu và chèn phân đoạn trước đầu vào cho Tập dữ liệu của trình đọc (ví dụ: CSVDataset, TFRecordDataset).
Tập dữ liệu này sẽ đưa ra lỗi NotFound nếu chúng tôi không thể tự động phân chia tập dữ liệu.
Các lớp lồng nhau
| lớp học | AutoShardDataset.Options | Thuộc tính tùy chọn cho AutoShardDataset | |
Phương pháp công khai
| Đầu ra <Đối tượng> | asOutput () Trả về phần điều khiển tượng trưng của một tenxơ. |
| AutoShardDataset.Options tĩnh | autoShardPolicy (AutoShardPolicy dài) |
| Tập dữ liệu AutoShard tĩnh | tạo ( Phạm vi phạm vi, Toán hạng <?> inputDataset, Toán hạng <Long> numWorkers, Chỉ mục toán hạng <Long>, Danh sách<Class<?>> loại đầu ra, Danh sách< Shape > tùy chọn đầu ra, Tùy chọn... ) Phương thức gốc để tạo một lớp bao bọc một thao tác AutoShardDataset mới. |
| Đầu ra <?> | xử lý () |
| AutoShardDataset.Options tĩnh | numReplicas (Số bản sao dài) |
Phương pháp kế thừa
Phương pháp công khai
Đầu ra công khai <Object> asOutput ()
Trả về phần điều khiển tượng trưng của một tenxơ.
Đầu vào của các hoạt động TensorFlow là đầu ra của một hoạt động TensorFlow khác. Phương pháp này được sử dụng để thu được một thẻ điều khiển mang tính biểu tượng đại diện cho việc tính toán đầu vào.
công khai tĩnh AutoShardDataset tạo ( Phạm vi phạm vi, Toán hạng <?> inputDataset, Toán hạng <Long> numWorkers, Chỉ mục toán hạng <Long>, Danh sách<Class<?>> loại đầu ra, Danh sách< Hình dạng > hình dạng đầu ra, Tùy chọn... tùy chọn)
Phương thức gốc để tạo một lớp bao bọc một thao tác AutoShardDataset mới.
Thông số
| phạm vi | phạm vi hiện tại |
|---|---|
| tập dữ liệu đầu vào | Một tensor biến thể đại diện cho tập dữ liệu đầu vào. |
| numCông nhân | Một đại lượng vô hướng biểu thị số lượng công nhân để phân phối tập dữ liệu này. |
| mục lục | Một đại lượng vô hướng biểu thị chỉ mục của nhân viên hiện tại trong số num_workers. |
| tùy chọn | mang các giá trị thuộc tính tùy chọn |
Trả lại
- một phiên bản mới của AutoShardDataset