مدل‌های مقیاس‌پذیر، یادگیری عصبی برای رتبه‌بندی (LTR)، مدل‌های مقیاس‌پذیر، یادگیری عصبی برای رتبه‌بندی (LTR)

import tensorflow as tf
import tensorflow_datasets as tfds
import tensorflow_ranking as tfr

# Prep data
ds = tfds.load("mslr_web/10k_fold1", split="train")
ds = ds.map(lambda feature_map: {
    "_mask": tf.ones_like(feature_map["label"], dtype=tf.bool),
    **feature_map
})
ds = ds.shuffle(buffer_size=1000).padded_batch(batch_size=32)
ds = ds.map(lambda feature_map: (
    feature_map, tf.where(feature_map["_mask"], feature_map.pop("label"), -1.)))

# Create a model
inputs = {
    "float_features": tf.keras.Input(shape=(None, 136), dtype=tf.float32)
}
norm_inputs = [tf.keras.layers.BatchNormalization()(x) for x in inputs.values()]
x = tf.concat(norm_inputs, axis=-1)
for layer_width in [128, 64, 32]:
  x = tf.keras.layers.Dense(units=layer_width)(x)
  x = tf.keras.layers.Activation(activation=tf.nn.relu)(x)
scores = tf.squeeze(tf.keras.layers.Dense(units=1)(x), axis=-1)

# Compile and train
model = tf.keras.Model(inputs=inputs, outputs=scores)
model.compile(
    optimizer=tf.keras.optimizers.Adam(learning_rate=0.01),
    loss=tfr.keras.losses.SoftmaxLoss(),
    metrics=tfr.keras.metrics.get("ndcg", topn=5, name="NDCG@5"))
model.fit(ds, epochs=3)
اجرا در یک نوت بوک

TensorFlow Ranking یک کتابخانه منبع باز برای توسعه مدل های مقیاس پذیر و عصبی برای رتبه بندی (LTR) است. مدل‌های رتبه‌بندی معمولاً در سیستم‌های جستجو و توصیه استفاده می‌شوند، اما همچنین با موفقیت در زمینه‌های مختلف، از جمله ترجمه ماشینی ، سیستم‌های گفتگو ، تجارت الکترونیک ، حل‌کننده‌های SAT ، برنامه‌ریزی شهر هوشمند ، و حتی زیست‌شناسی محاسباتی نیز با موفقیت استفاده شده‌اند.

یک مدل رتبه‌بندی فهرستی از موارد (صفحات وب، اسناد، محصولات، فیلم‌ها و غیره) را می‌گیرد و فهرستی را به ترتیب بهینه‌سازی شده تولید می‌کند، مانند بیشتر موارد مرتبط در بالا و کمترین موارد مرتبط در پایین، معمولاً در پاسخ به یک پرسش کاربر:

این کتابخانه از توابع از دست دادن استاندارد نقطه ای، زوجی و لیستی برای مدل های LTR پشتیبانی می کند. همچنین از طیف گسترده‌ای از معیارهای رتبه‌بندی، از جمله میانگین رتبه متقابل (MRR) و سود تجمعی تنزیل‌شده عادی (NDCG) پشتیبانی می‌کند، بنابراین می‌توانید این رویکردها را برای کار رتبه‌بندی خود ارزیابی و مقایسه کنید. کتابخانه رتبه‌بندی همچنین عملکردهایی را برای رویکردهای رتبه‌بندی پیشرفته ارائه می‌دهد که توسط مهندسین یادگیری ماشین در Google مورد تحقیق، آزمایش و ساخته شده‌اند.

با بررسی این آموزش ، با کتابخانه رتبه بندی TensorFlow شروع کنید. با مطالعه مرور کلی درباره قابلیت های کتابخانه بیشتر بیاموزید کد منبع رتبه بندی TensorFlow را در GitHub بررسی کنید.