Fingerprint

สร้างค่าลายนิ้วมือ

สร้างค่าลายนิ้วมือของ "ข้อมูล"

ปฏิบัติการลายนิ้วมือจะถือว่ามิติแรกของ `ข้อมูล` เป็นมิติข้อมูลแบบกลุ่ม และ `เอาท์พุท [i]` มีค่าลายนิ้วมือที่สร้างจากเนื้อหาใน `ข้อมูล[i, ...]` สำหรับ `i` ทั้งหมด

ลายนิ้วมือ op เขียนค่าลายนิ้วมือเป็นอาร์เรย์ไบต์ ตัวอย่างเช่น วิธีการเริ่มต้น `farmhash64` จะสร้างค่าลายนิ้วมือแบบ 64 บิตในแต่ละครั้ง ค่า 8 ไบต์นี้เขียนออกมาเป็นอาร์เรย์ `uint8` ขนาด 8 ตามลำดับแบบ little-endian

ตัวอย่างเช่น สมมติว่า `data` มีประเภทข้อมูล `DT_INT32` และรูปร่าง (2, 3, 4) และวิธีการพิมพ์ลายนิ้วมือคือ `farmhash64` ในกรณีนี้ รูปร่างเอาต์พุตคือ (2, 8) โดยที่ 2 คือขนาดมิติแบทช์ของ "ข้อมูล" และ 8 คือขนาดของค่าลายนิ้วมือแต่ละค่าในหน่วยไบต์ `output[0, :]` ถูกสร้างขึ้นจากจำนวนเต็ม 12 จำนวนใน `data[0, :, :]` และในทำนองเดียวกัน `output[1, :]` ถูกสร้างขึ้นจากจำนวนเต็ม 12 จำนวนอื่นใน `data[1, :, :] `.

โปรดทราบว่าการดำเนินการนี้จะสแกนลายนิ้วมือของบัฟเฟอร์พื้นฐานดิบ และจะไม่สแกนลายนิ้วมือของข้อมูลเมตาของ Tensor เช่น ประเภทข้อมูลและ/หรือรูปร่าง ตัวอย่างเช่น ค่าลายนิ้วมือจะไม่เปลี่ยนแปลงภายใต้การปรับรูปร่างและบิตคาสต์ตราบใดที่มิติข้อมูลแบทช์ยังคงเหมือนเดิม:

Fingerprint(data) == Fingerprint(Reshape(data, ...))
 Fingerprint(data) == Fingerprint(Bitcast(data, ...))
 

สำหรับข้อมูลสตริง เราควรคาดหวัง `ลายนิ้วมือ(ข้อมูล) != ลายนิ้วมือ(ReduceJoin(data))` โดยทั่วไป