Bangun TensorFlow Lite untuk board ARM

Halaman ini menjelaskan cara membuat pustaka TensorFlow Lite untuk komputer berbasis ARM.

TensorFlow Lite mendukung dua sistem build dan fitur yang didukung dari setiap sistem build tidak sama. Periksa tabel berikut untuk memilih sistem build yang tepat.

Fitur Bazel CMembuat
Rantai alat yang telah ditentukan sebelumnya armhf, aarch64 armel, armhf, aarch64
Rantai alat khusus lebih sulit untuk digunakan mudah digunakan
Pilih operasi TF didukung tidak didukung
Delegasi GPU hanya tersedia untuk Android platform apa pun yang mendukung OpenCL
Paket XNN didukung didukung
Roda Python didukung didukung
CAPI didukung didukung
API C++ didukung untuk proyek Bazel didukung untuk proyek CMake

Kompilasi silang untuk ARM dengan CMake

Jika Anda memiliki proyek CMake atau ingin menggunakan rantai alat khusus, sebaiknya gunakan CMake untuk kompilasi silang. Ada halaman TensorFlow Lite kompilasi silang terpisah dengan CMake yang tersedia untuk ini.

Kompilasi silang untuk ARM dengan Bazel

Jika Anda memiliki proyek Bazel atau ingin menggunakan operasi TF, sebaiknya gunakan sistem build Bazel. Anda akan menggunakan toolchain ARM GCC 8.3 terintegrasi dengan Bazel untuk membangun perpustakaan bersama ARM32/64.

Arsitektur Sasaran Konfigurasi Bazel Perangkat yang Kompatibel
armhf (ARM32) --config=elinux_armhf RPI3, RPI4 dengan OS Raspberry Pi 32-bit
AArch64 (ARM64) --config=elinux_aarch64 Karang, RPI4 dengan Ubuntu 64 bit

Petunjuk berikut telah diuji pada Ubuntu 16.04.3 64-bit PC (AMD64) dan TensorFlow devel docker image tensorflow/tensorflow:devel .

Untuk melakukan kompilasi silang TensorFlow Lite dengan Bazel, ikuti langkah-langkahnya:

Langkah 1. Instal Bazel

Bazel adalah sistem build utama untuk TensorFlow. Instal versi terbaru sistem build Bazel .

Langkah 2. Kloning repositori TensorFlow

git clone https://github.com/tensorflow/tensorflow.git tensorflow_src

Langkah 3. Bangun biner ARM

perpustakaan C
bazel build --config=elinux_aarch64 -c opt //tensorflow/lite/c:libtensorflowlite_c.so

Anda dapat menemukan perpustakaan bersama di: bazel-bin/tensorflow/lite/c/libtensorflowlite_c.so .

Periksa halaman TensorFlow Lite C API untuk mengetahui detailnya.

perpustakaan C++
bazel build --config=elinux_aarch64 -c opt //tensorflow/lite:libtensorflowlite.so

Anda dapat menemukan perpustakaan bersama di: bazel-bin/tensorflow/lite/libtensorflowlite.so .

Saat ini, tidak ada cara langsung untuk mengekstrak semua file header yang diperlukan, jadi Anda harus menyertakan semua file header di tensorflow/lite/ dari repositori TensorFlow. Selain itu, Anda memerlukan file header dari FlatBuffers dan Abseil.

Dll

Anda juga dapat membuat target Bazel lainnya dengan rantai alat. Berikut adalah beberapa target yang berguna.

  • //tensorflow/lite/tools/benchmark:benchmark_model
  • //tensorflow/lite/examples/label_image:label_image