'mhlo' گویش

عملیات

mhlo.abs (mhlo::AbsOp)

عمل شکم

نحو:

operation ::= `mhlo.abs` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

عملیات abs از نظر عنصر را روی تانسور operand انجام می دهد و یک تانسور result تولید می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#abs

مثال:

%result = mhlo.abs %operand : tensor<3xi32>

صفات: AlwaysSpeculatableImplTrait ، Elementwise ، SameOperandsAndResultShape

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
operand تانسور رتبه‌بندی شده 4/8/16/32/64 بیتی اعداد صحیح بدون علامت یا نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا نوع شناور 16 بیتی فلوات یا فلوات 16 بیتی یا فلوات 16 بیتی یا float 32- نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی شناور یا 4/8/16/32 بیتی یکنواخت عدد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور علامت صحیح یا 4/8/16/ اعداد صحیح بدون علامت کوانتیزه یکنواخت 32 بیتی یا اعداد صحیح بدون علامت 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور

نتایج:

نتیجه شرح
result تانسور رتبه‌بندی شده 4/8/16/32/64 بیتی اعداد صحیح بدون علامت یا نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا نوع شناور 16 بیتی فلوات یا فلوات 16 بیتی یا فلوات 16 بیتی یا float 32- 4/8/16/32 بیتی یکنواخت کوانتیزه عدد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه عدد صحیح بدون علامت یا 4/8/16/ مقادیر عدد صحیح بدون علامت 32 بیتی یکنواخت در هر محور

mhlo.add (mhlo::AddOp)

عملیات را اضافه کنید

نحو:

operation ::= `mhlo.add` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

جمع عنصری دو تانسور lhs و rhs را انجام می دهد و یک تانسور result تولید می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#add

مثال:

%result = mhlo.add %lhs, %rhs : tensor<2x2xi32>

صفات: AlwaysSpeculatableImplTrait , Commutative , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
lhs تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت
rhs تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت

نتایج:

نتیجه شرح
result تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت

mhlo.add_dependency (mhlo::AddDependencyOp)

عملیات AddDependency

نحو:

operation ::= `mhlo.add_dependency` operands attr-dict `:` functional-type(operands, results)

این عملیات برای کامپایلر XLA خصوصی است، بنابراین هنوز مشخصاتی ندارد.

به طور غیر رسمی، این عملیات دو عملوند: یک عملوند داده و یک نشانه. خروجی عملیات، عملوند داده است. هنگامی که با AfterAll استفاده می‌شود، این عملیات سفارش عملیات‌های بدون تأثیر جانبی (آنهایی که مقادیر توکن تولید نمی‌کنند) را امکان‌پذیر می‌کند.

مثال:

%1 = mhlo.add_dependency %arg0, %0 : (tensor<3x4xf32>, !mhlo.token) -> tensor<3x4xf32>

صفات: AlwaysSpeculatableImplTrait

رابط ها: ConditionallySpeculatable ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
operand تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح امضا شده یا 4/8/16/32 بیتی یکنواخت مقادیر عدد صحیح بدون علامت یا تانسور رتبه بندی شده 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور مقادیر یا نشانه های عدد صحیح بدون علامت
token نشانه

نتایج:

نتیجه شرح
output تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح امضا شده یا 4/8/16/32 بیتی یکنواخت مقادیر عدد صحیح بدون علامت یا تانسور رتبه بندی شده 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور مقادیر یا نشانه های عدد صحیح بدون علامت

mhlo.after_all (mhlo::AfterAllOp)

عملیات AfterAll

نحو:

operation ::= `mhlo.after_all` $inputs attr-dict
              `:` custom<VariadicSameOperandsAndResultType>(ref($inputs), type($inputs), type($result))

اطمینان حاصل می کند که عملیات تولید inputs قبل از هر عملیاتی که به result بستگی دارد اجرا می شود.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#after_all

مثال:

%result = mhlo.after_all %input0, %input1 : !mhlo.token

صفات: AlwaysSpeculatableImplTrait

رابط ها: ConditionallySpeculatable ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
inputs تنوع نشانه

نتایج:

نتیجه شرح
result نشانه

mhlo.all_gather (mhlo::AllGatherOp)

عملیات AllGather

در هر گروه فرآیندی در شبکه فرآیند، مقادیر تانسور عملوند از هر فرآیند را در امتداد all_gather_dim به هم متصل می کند و یک تانسور نتیجه تولید می کند. computation به طور جداگانه برای هر عملوند در operands اعمال می شود و یک نتیجه در هر عملوند ایجاد می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#all_gather

مثال:

%result = "mhlo.all_gather"(%operand) {
  all_gather_dim = 1 : i64,
  replica_groups = dense<[[0, 1]]> : tensor<1x2xi64>
  // channel_id = 0
  channel_handle = #mhlo.channel_handle<handle = 0, type = 0>,
  // use_global_device_ids = false
} : (tensor<2x2xf32>) -> tensor<2x4xf32>

صفات: SameOperandsAndResultElementType

ویژگی های:

صفت نوع MLIR شرح
all_gather_dim ::mlir::IntegerAttr ویژگی عدد صحیح بدون علامت 64 بیتی
replica_groups ::mlir::DenseIntElementsAttr ویژگی عناصر عدد صحیح بدون علامت 64 بیتی
channel_handle ::mlir::mhlo::ChannelHandleAttr دو عدد صحیح 64 بیتی 'handle' و 'type'
use_global_device_ids ::mlir::UnitAttr ویژگی واحد

عملگرها:

عملوند شرح
operands متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت ارزش های

نتایج:

نتیجه شرح
«بی نام» متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت ارزش های

mhlo.all_reduce (mhlo::AllReduceOp)

عملیات AllReduce

در هر گروه فرآیند در شبکه فرآیند، یک computation تابع کاهش را برای مقادیر یک تانسور عملوند از هر فرآیند اعمال می‌کند و یک تانسور نتیجه تولید می‌کند. computation به طور جداگانه برای هر عملوند در operands اعمال می شود و یک نتیجه در هر عملوند ایجاد می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#all_reduce

مثال:

%result = "mhlo.all_reduce"(%operand) ({
  ^bb0(%arg0: tensor<f32>, %arg1: tensor<f32>):
    %0 = mhlo.add %arg1, %arg2 : tensor<f32>
    mhlo.return %0 : tensor<f32>
}) {
  replica_groups = dense<[[0, 1]]> : tensor<1x2xi64>
  // channel_id = 0
  channel_handle = #mhlo.channel_handle<handle = 0, type = 0>
  // use_global_device_ids = false
} : (tensor<4xf32>) -> tensor<4xf32>

صفات: InferTensorType ، SingleBlockImplicitTerminator<ReturnOp> ، SingleBlock

رابط ها: InferShapedTypeOpInterface ، InferTypeOpInterface

ویژگی های:

صفت نوع MLIR شرح
replica_groups ::mlir::DenseIntElementsAttr ویژگی عناصر عدد صحیح بدون علامت 64 بیتی
channel_handle ::mlir::mhlo::ChannelHandleAttr دو عدد صحیح 64 بیتی 'handle' و 'type'
use_global_device_ids ::mlir::UnitAttr ویژگی واحد

عملگرها:

عملوند شرح
operands متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت ارزش های

نتایج:

نتیجه شرح
«بی نام» متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت ارزش های

mhlo.all_to_all (mhlo::AllToAllOp)

عملیات AllToAll

در هر گروه فرآیندی در شبکه فرآیند، مقادیر تانسور operand در امتداد split_dimension را به قطعات تقسیم می‌کند، قسمت‌های تقسیم شده را بین فرآیندها پراکنده می‌کند، قطعات پراکنده را در امتداد concat_dimension به هم متصل می‌کند و یک تانسور result تولید می‌کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#all_to_all

مثال:

%result = "mhlo.all_to_all"(%operand) {
  split_dimension = 1 : i64,
  concat_dimension = 0 : i64,
  split_count = 2 : i64,
  replica_groups = dense<[[0, 1]]> : tensor<1x2xi64>
} : (tensor<2x4xf32>) -> tensor<4x2xf32>

صفات: AlwaysSpeculatableImplTrait , InferTensorType , SameOperandsElementType , SameOperandsShape , SameVariadicOperandSize

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
split_dimension ::mlir::IntegerAttr ویژگی عدد صحیح بدون علامت 64 بیتی
concat_dimension ::mlir::IntegerAttr ویژگی عدد صحیح بدون علامت 64 بیتی
split_count ::mlir::IntegerAttr ویژگی عدد صحیح بدون علامت 64 بیتی
replica_groups ::mlir::DenseIntElementsAttr ویژگی عناصر عدد صحیح بدون علامت 64 بیتی
channel_handle ::mlir::mhlo::ChannelHandleAttr دو عدد صحیح 64 بیتی 'handle' و 'type'

عملگرها:

عملوند شرح
operand متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت ارزش های

نتایج:

نتیجه شرح
«بی نام» متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت ارزش های

mhlo.and (mhlo::AndOp)

و عملیات

نحو:

operation ::= `mhlo.and` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

AND دو تانسور lhs و rhs را از نظر عنصر اجرا می کند و یک تانسور result تولید می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#and

مثال:

%result = mhlo.and %lhs, %rhs : tensor<2x2xi32>

صفات: AlwaysSpeculatableImplTrait , Commutative , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
lhs تانسور رتبه بندی شده pred (عدد صحیح بولی یا 1 بیتی AKA) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا مقادیر صحیح بدون علامت 4/8/16/32/64 بیتی
rhs تانسور رتبه بندی شده pred (عدد صحیح بولی یا 1 بیتی AKA) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا مقادیر صحیح بدون علامت 4/8/16/32/64 بیتی

نتایج:

نتیجه شرح
result تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت

mhlo.async_done (mhlo::AsyncDoneOp)

عملیات AsyncDone

این عملیات برای کامپایلر XLA خصوصی است، بنابراین هنوز مشخصاتی ندارد.

به طور غیر رسمی، این عملیات تا پایان یک محاسبات ناهمزمان مسدود می شود. نتیجه نهایی محاسبات ناهمزمان را برمی گرداند.

برای اطلاعات بیشتر به مستندات AsyncStart مراجعه کنید.

رابط ها: InferTypeOpInterface

ویژگی های:

صفت نوع MLIR شرح
called_computation ::mlir::FlatSymbolRefAttr صفت مرجع نماد مسطح
execution_thread ::mlir::StringAttr ویژگی رشته

عملگرها:

عملوند شرح
bundle async_bundle با هر ترکیبی از تانسور رتبه بندی شده از نوع f8e4m3b11fnuz یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16-bit یا 32-bit float یا float or 64-bit یا bfloat16 ) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/ عدد صحیح علامت‌دار 32 بیتی یکنواخت یا عدد صحیح علامت‌دار 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر عدد صحیح علامت‌دار محور یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر مقادیر عدد صحیح بدون علامت محور یا مقادیر نشانه

نتایج:

نتیجه شرح
«بی نام» متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت مقادیر یا توکن یا تاپل تودرتو با هر ترکیبی از تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا نوع 16 بیتی شناور یا 32 بیتی شناور یا شناور 32 بیتی float یا شناور 32 بیتی یا عدد صحیح 1 بیتی) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا نوع مختلط با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4 /8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت یا 4/8/16/32 بیتی مقادیر صحیح کوانتیزه بدون علامت یکنواخت یا تانسور رتبه بندی شده 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور علامت صحیح یا 4/8 /16/32 بیتی یکنواخت در هر محور مقادیر صحیح بدون علامت یا مقادیر نشانه

mhlo.async_start (mhlo::AsyncStartOp)

عملیات AsyncStart

این عملیات برای کامپایلر XLA خصوصی است، بنابراین هنوز مشخصاتی ندارد.

به طور غیر رسمی، این عملیات یک محاسبات ناهمزمان را آغاز می کند.

این زمانی استفاده می شود که توابعی وجود داشته باشد که شامل انتظارات ناهمزمان (مانند DMA) و محاسبات درون رشته ای باشد. به عنوان مثال، یک تابع ممکن است از یک محاسبه، یک DMA، یک محاسبات دیگر، یک DMA دوم و یک محاسبه نهایی تشکیل شده باشد. این به عنوان async_start و به دنبال آن async_update و async_done نمایش داده می شود. async_start اولین محاسبات را روی رشته انجام می دهد و سپس DMA را شروع می کند. async_update منتظر می ماند تا DMA تکمیل شود اگر هنوز انجام نشده باشد، سپس دومین محاسبه را در تابع اجرا می کند و DMA دوم را شروع می کند. در نهایت، async_done در آخرین DMA منتظر می‌ماند و سپس آخرین محاسباتی را که باید روی رشته اجرا شود اجرا می‌کند و نتیجه محاسبات نهایی را برمی‌گرداند.

operands به طور مستقیم به called_computation منتقل می execution_thread . نخ اصلی "اصلی" نامیده می شود. همه رشته ها نام دارند.

این همه حالت مورد نیاز بین عملیات async را برمی گرداند. پس از تخصیص بافر، مقادیر بازگشتی نشان‌دهنده فضای مورد نیاز برای نگهداری ورودی، نتایج، و هرگونه صفحه خراش مورد نیاز یا ویرایش شده توسط async op است.

ویژگی های:

صفت نوع MLIR شرح
called_computation ::mlir::FlatSymbolRefAttr صفت مرجع نماد مسطح
execution_thread ::mlir::StringAttr ویژگی رشته

عملگرها:

عملوند شرح
inputs متغییر تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی (1AKA یا prefloat نوع 16-bit یا prefloat) /8/16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح علامت‌دار کوانتیزه یکنواخت یا عدد صحیح علامت‌دار یکنواخت کوانتیزه شده 4/8/16/32 بیتی عدد صحیح بدون علامت یکنواخت یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور بدون علامت مقادیر یا توکن یا تاپل تودرتو با هر ترکیبی از تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا نوع 16 بیتی شناور یا 32 بیتی شناور یا شناور 32 بیتی float یا شناور 32 بیتی یا عدد صحیح 1 بیتی) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا نوع مختلط با عناصر شناور 32 بیتی یا شناور 64 بیتی یا 4 /8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت یا 4/8/16/32 بیتی مقادیر صحیح کوانتیزه بدون علامت یکنواخت یا تانسور رتبه بندی شده 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر محور علامت صحیح یا 4/8 /16/32 بیتی یکنواخت در هر محور مقادیر صحیح بدون علامت یا مقادیر نشانه

نتایج:

نتیجه شرح
«بی نام» async_bundle با هر ترکیبی از تانسور رتبه بندی شده از نوع f8e4m3b11fnuz یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16-bit یا 32-bit float یا float or 64-bit یا bfloat16 ) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/ عدد صحیح علامت‌دار 32 بیتی یکنواخت یا عدد صحیح علامت‌دار 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر عدد صحیح علامت‌دار محور یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر مقادیر عدد صحیح بدون علامت محور یا مقادیر نشانه

mhlo.async_update (mhlo::AsyncUpdateOp)

عملیات AsyncUpdate

این عملیات برای کامپایلر XLA خصوصی است، بنابراین هنوز مشخصاتی ندارد.

به طور غیررسمی، این عملیات در یک محاسبات ناهمزمان تا زمانی که مانع همگام‌سازی شود، مسدود می‌شود. این bundle پس از عمل بر روی آن برمی گرداند.

برای اطلاعات بیشتر به مستندات AsyncStart مراجعه کنید.

رابط ها: InferTypeOpInterface

ویژگی های:

صفت نوع MLIR شرح
called_computation ::mlir::FlatSymbolRefAttr صفت مرجع نماد مسطح
execution_thread ::mlir::StringAttr ویژگی رشته

عملگرها:

عملوند شرح
bundle async_bundle با هر ترکیبی از تانسور رتبه بندی شده از نوع f8e4m3b11fnuz یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16-bit یا 32-bit float یا float or 64-bit یا bfloat16 ) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/ عدد صحیح علامت‌دار 32 بیتی یکنواخت یا عدد صحیح علامت‌دار 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر عدد صحیح علامت‌دار محور یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر مقادیر عدد صحیح بدون علامت محور یا مقادیر نشانه

نتایج:

نتیجه شرح
«بی نام» async_bundle با هر ترکیبی از تانسور رتبه بندی شده از نوع f8e4m3b11fnuz یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16-bit یا 32-bit float یا float or 64-bit یا bfloat16 ) یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا عدد صحیح بدون علامت 4/8/16/32/64 بیتی یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/ عدد صحیح علامت‌دار 32 بیتی یکنواخت یا عدد صحیح علامت‌دار 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر عدد صحیح علامت‌دار محور یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده در هر مقادیر عدد صحیح بدون علامت محور یا مقادیر نشانه

mhlo.atan2 (mhlo::Atan2Op)

عملیات Atan2

نحو:

operation ::= `mhlo.atan2` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

عملیات atan2 را از نظر عنصر روی تانسور lhs و rhs انجام می دهد و یک تانسور result تولید می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#atan2

مثال:

%result = mhlo.atan2 %lhs, %rhs : tensor<3xf32>

صفات: AlwaysSpeculatableImplTrait ، CompatibleOperandsAndResultType ، Elementwise ، SameOperandsAndResultShape

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
lhs تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا فلوتر 64 بیتی یا فلویت 64 بیتی با المان‌های فلوات 2 بیتی یا پیچیده 2 بیتی یا bfloat 16 4/8/16/32 بیتی یکنواخت کوانتیزه اعداد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت مقادیر عدد صحیح بدون علامت کوانتیزه
rhs تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا فلوتر 64 بیتی یا فلویت 64 بیتی با المان‌های فلوات 2 بیتی یا پیچیده 2 بیتی یا bfloat 16 4/8/16/32 بیتی یکنواخت کوانتیزه اعداد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت مقادیر عدد صحیح بدون علامت کوانتیزه

نتایج:

نتیجه شرح
result تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا فلوتر 64 بیتی یا فلویت 64 بیتی با المان‌های فلوات 2 بیتی یا پیچیده 2 بیتی یا bfloat 16 4/8/16/32 بیتی یکنواخت کوانتیزه اعداد صحیح علامت دار یا 4/8/16/32 بیتی یکنواخت مقادیر عدد صحیح بدون علامت کوانتیزه

mhlo.batch_norm_grad (mhlo::BatchNormGradOp)

عملیات BatchNormGrad

گرادیان های چندین ورودی BatchNormTrainingOp را که از grad_output پس انتشار می یابند محاسبه می کند و تانسورهای grad_operand ، grad_scale و grad_offset تولید می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#batch_norm_grad

مثال:

%grad_operand, %grad_scale, %grad_offset =
"mhlo.batch_norm_grad"(%operand, %scale, %mean, %variance, %grad_output) {
  epsilon = 0.0 : f32,
  feature_index = 2 : i64
} : (tensor<2x2x2xf32>, tensor<2xf32>, tensor<2xf32>, tensor<2xf32>,
    tensor<2x2x2xf32>) -> (tensor<2x2x2xf32>, tensor<2xf32>, tensor<2xf32>)

صفات: AlwaysSpeculatableImplTrait ، InferTensorType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
epsilon ::mlir::FloatAttr ویژگی شناور 32 بیتی
feature_index ::mlir::IntegerAttr ویژگی عدد صحیح بدون علامت 64 بیتی

عملگرها:

عملوند شرح
operand تانسور رتبه بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا فلوتر 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
scale تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
mean تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
variance تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
grad_output تانسور رتبه بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا فلوتر 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16

نتایج:

نتیجه شرح
grad_operand تانسور رتبه بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا فلوتر 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
grad_scale تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
grad_offset تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16

mhlo.batch_norm_inference (mhlo::BatchNormInferenceOp)

عملیات BatchNormInference

تانسور operand را در تمام ابعاد به جز بعد feature_index عادی می کند و یک تانسور result تولید می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#batch_norm_inference

مثال:

%result = "mhlo.batch_norm_inference"(%operand, %scale, %offset, %mean, %variance) {
  epsilon = 0.0 : f32,
  feature_index = 2 : i64
} : (tensor<2x2x2xf32>, tensor<2xf32>, tensor<2xf32>, tensor<2xf32>, tensor<2xf32>) -> tensor<2x2x2xf32>

صفات: AlwaysSpeculatableImplTrait ، InferTensorType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
epsilon ::mlir::FloatAttr ویژگی شناور 32 بیتی
feature_index ::mlir::IntegerAttr ویژگی عدد صحیح بدون علامت 64 بیتی

عملگرها:

عملوند شرح
operand تانسور رتبه بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا فلوتر 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
scale تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
offset تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
mean تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
variance تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16

نتایج:

نتیجه شرح
result تانسور رتبه بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا فلوتر 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16

mhlo.batch_norm_training (mhlo::BatchNormTrainingOp)

عملیات BatchNormTraining

میانگین و واریانس را در ابعاد دسته ای و فضایی محاسبه می کند و تانسور operand را برای هر ویژگی در بعد feature_index عادی می کند و تانسورهای output ، batch_mean و batch_var تولید می کند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#batch_norm_training

مثال:

%output, %batch_mean, %batch_var = "mhlo.batch_norm_training"(%operand, %scale, %offset) {
  epsilon = 0.0 : f32,
  feature_index = 2 : i64
} : (tensor<2x2x2xf32>, tensor<2xf32>, tensor<2xf32>) -> (tensor<2x2x2xf32>, tensor<2xf32>, tensor<2xf32>)

صفات: AlwaysSpeculatableImplTrait ، InferTensorType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
epsilon ::mlir::FloatAttr ویژگی شناور 32 بیتی
feature_index ::mlir::IntegerAttr ویژگی عدد صحیح بدون علامت 64 بیتی

عملگرها:

عملوند شرح
operand تانسور رتبه بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا فلوتر 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
scale تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
offset تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16

نتایج:

نتیجه شرح
output تانسور رتبه بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا فلوتر 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
batch_mean تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16
batch_var تانسور 1 بعدی از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا float 32 بیتی یا مقدار شناور 64 بیتی یا نوع bfloat16

mhlo.bitcast (mhlo::BitcastOp)

عملیات بیتکست

نحو:

operation ::= `mhlo.bitcast` operands attr-dict `:` functional-type(operands, results)

این عملیات برای کامپایلر XLA خصوصی است، بنابراین هنوز مشخصاتی ندارد.

به طور غیررسمی، این عملیات شکل ورودی را به گونه ای تغییر می دهد که آرایش فیزیکی عناصر بدون تغییر است.

این عملیات به اطلاعات چیدمان نیاز دارد تا «آرایش فیزیکی عناصر» را بفهمد، و پشتیبانی چیدمان در MHLO در حال حاضر در حال انجام است.

مثال:

%0 = mhlo.bitcast %arg0 : (tensor<3x4xf32>) -> tensor<3x4x1xf32>

صفات: AlwaysSpeculatableImplTrait

رابط ها: ConditionallySpeculatable ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
operand تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت

نتایج:

نتیجه شرح
«بی نام» تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت

mhlo.bitcast_convert (mhlo::BitcastConvertOp)

عملیات BitcastConvert

نحو:

operation ::= `mhlo.bitcast_convert` operands attr-dict `:` functional-type(operands, results)

یک عملیات بیت‌کست را روی تانسور operand انجام می‌دهد و یک تانسور result تولید می‌کند که در آن بیت‌های کل تانسور operand با استفاده از نوع تانسور result تفسیر مجدد می‌شوند.

ببینید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#bitcast_convert

مثال:

%result = mhlo.bitcast_convert %operand : (tensor<2xf32>) -> tensor<2x4xi8>

صفات: AlwaysSpeculatableImplTrait

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

جلوه ها: MemoryEffects::Effect{}

عملگرها:

عملوند شرح
operand تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت

نتایج:

نتیجه شرح
«بی نام» تانسور رتبه‌بندی شده از نوع f8E4M3B11FNUZ یا نوع f8E4M3FN یا نوع f8E4M3FNUZ یا نوع f8E5M2 یا نوع f8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64 بیتی یا bdloat16 یا bd16 نوع /16/32/64 بیتی عدد صحیح بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با عناصر شناور 32 بیتی یا 64 بیتی یا 4/8/16/32 بیتی یکنواخت کوانتیزه شده عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده عدد صحیح بدون علامت یا 4/8/16/32 بیتی یکنواخت کوانتیزه‌شده در هر محور عدد صحیح علامت‌دار یا 4/8/16/32 بیتی یکنواخت کمی در هر محور مقادیر صحیح بدون علامت

mhlo.broadcast (mhlo :: پخش)

عملیات پخش

این عملیات در راه خروج از Stablehlo است ، بنابراین در مشخصات موجود نیست: https://github.com/openxla/stablehlo/issues/3

به طور غیررسمی ، این عمل همان کار را با پخش XLA انجام می دهد: https://www.tensorflow.org/xla/operation_semantics#broadcast

مثال:

%result = mhlo.broadcast %operand, sizes = [1, 2] : (tensor<3xi32>) -> tensor<1x2x3xi32>

صفات: AlwaysSpeculatableImplTrait ، InferTensorType ، SameOperandsAndResultElementType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
broadcast_sizes :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی

عملیات:

عملوند شرح
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
«بی نام» Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.broadcast_in_dim (mhlo :: broadcastindimop)

عملیات پخش کننده

ابعاد و/یا رتبه یک تانسور ورودی را با کپی کردن داده ها در تانسور operand گسترش می دهد و یک تانسور result تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#broadcast_in_dim

مثال:

%result = mhlo.broadcast_in_dim %operand, dims = [2, 1] : (tensor<1x3xi32>) -> tensor<2x3x2xi32>

صفات: AlwaysSpeculatableImplTrait ، HLO_CompatibleOperandsAndResultElementType

رابط ها: ConditionallySpeculatable ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
broadcast_dimensions :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی

عملیات:

عملوند شرح
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
«بی نام» تانسور به صورت آماری از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا 64-bit شناور یا bfloat16-bloat16) intrge-interg عدد صحیح بدون امضاء 8/16/32/64 بیتی یا 4/8/16/32/64 بیتی بدون امضا یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی یکنواخت بدون امضا یا یکنواخت 4/8/16/32 بیتی در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.case (mhlo :: caseop)

عمل

بسته به مقدار index خروجی را از اجرای دقیقاً یک function از branches تولید می کند.

مشاهده کنید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#case

مثال:

%result0, %result1 = "mhlo.case"(%index) ({
  mhlo.return %result_branch0, %result_branch0 : tensor<2xi64>, tensor<2xi64>
}, {
  mhlo.return %result_branch1, %result_branch1 : tensor<2xi64>, tensor<2xi64>
}) : (tensor<i32>) -> (tensor<2xi64>, tensor<2xi64>)

صفات: RecursiveMemoryEffects ، SingleBlockImplicitTerminator<ReturnOp> ، SingleBlock

رابط ها: InferTypeOpInterface

عملیات:

عملوند شرح
index تانسور از مقادیر عدد صحیح 32 بیتی

نتایج:

نتیجه شرح
«بی نام» variadic از تانسور رتبه بندی شده از f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا float 16 بیتی یا شناور 32 بیتی یا 64 بیتی شناور یا شناور 64-بیت یا bfloat16 نوع blean or /8/16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا 4/8/16/32 بیتی عدد عدد صحیح امضا شده یا 4/8/16/32 بیتی مقادیر عدد صحیح بدون امضا یا تانسور رتبه بندی شده از 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا 4/8/16/32 بیتی یکنواخت اندازه گیری می شود. در هر محور مقادیر عدد صحیح یا علامت گذاری نشده

mhlo.cbrt (mhlo :: cbrtop)

عملکرد CBRT

نحو:

operation ::= `mhlo.cbrt` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

عملکرد ریشه مکعب عناصر را بر روی تانسور operand انجام می دهد و تانسور result ای تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#cbrt

مثال:

%result = mhlo.cbrt %operand : tensor<4xf32>

صفات: AlwaysSpeculatableImplTrait ، CompatibleOperandsAndResultType ، Elementwise ، SameOperandsAndResultShape

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

عملیات:

عملوند شرح
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64-bit یا bfloat16 Type16 Type Type Type Type Float Float-32-Bit با 32-Bit Float 4/8/16/32 بیتی یکنواخت امضا شده با اندازه گیری کمی یا 4/8/16/32 بیتی مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
result Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64-bit یا bfloat16 Type16 Type Type Type Type Float Float-32-Bit با 32-Bit Float 4/8/16/32 بیتی یکنواخت امضا شده با اندازه گیری کمی یا 4/8/16/32 بیتی مقادیر عدد صحیح بدون امضا

mhlo.ceil (mhlo :: ceilop)

عمل سقف

نحو:

operation ::= `mhlo.ceil` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

مجاری عناصر عناصر تانسور operand را انجام می دهد و یک تانسور result تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#ceil

مثال:

%result = mhlo.ceil %operand : tensor<5xf32>

صفات: AlwaysSpeculatableImplTrait ، CompatibleOperandsAndResultType ، Elementwise ، SameOperandsAndResultShape

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

عملیات:

عملوند شرح
operand Tensor از نوع F8E4M3B11fNUZ نوع یا F8E4M3FN نوع یا F8E4M3FNUZ نوع یا F8E5M2 نوع یا F8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناو

نتایج:

نتیجه شرح
result Tensor از نوع F8E4M3B11fNUZ نوع یا F8E4M3FN نوع یا F8E4M3FNUZ نوع یا F8E5M2 نوع یا F8E5M2FNUZ یا شناور 16 بیتی یا شناور 32 بیتی یا شناو

mhlo.cholesky (mhlo :: choleskyop)

عمل جراحی

تجزیه چولسکی یک دسته از ماتریس ها را محاسبه می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#cholesky

مثال:

%result = mhlo.cholesky %a, lower = true : tensor<3x3xf32>

صفات: AlwaysSpeculatableImplTrait ، InferTensorType ، SameOperandsAndResultElementType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
lower :: mlir :: boolattr ویژگی بول

عملیات:

عملوند شرح
a Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64-bit یا bfloat16 Type16 Type Type Type Type Float-Float-Type با 32-BIT FLOAT

نتایج:

نتیجه شرح
«بی نام» Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناور 64-bit یا bfloat16 Type16 Type Type Type Type Float-Float-Type با 32-BIT FLOAT

mhlo.clamp (mhlo :: clampop)

عمل گیره

نحو:

operation ::= `mhlo.clamp` $min `,` $operand `,` $max attr-dict
              `:` custom<SameOperandsAndResultType>(type($min), type($operand), type($max), type($result))

هر عنصر از تانسور operand بین حداقل و حداکثر مقدار گیره می کند و تانسور result را تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#clamp

مثال:

%result = mhlo.clamp %min, %operand, %max : tensor<3xi32>

صفات: AlwaysSpeculatableImplTrait ، HLO_BroadcastingElementwise ، InferTensorType ، SameOperandsAndResultElementType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

عملیات:

عملوند شرح
min Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا
max Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
result Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.collective_broadcast (mhlo :: collectivebroadcastop)

عملیات جمع آوری شده

در هر گروه فرآیند در شبکه فرآیند ، مقدار تانسور operand را از فرآیند منبع به فرآیندهای هدف ارسال کرده و یک تانسور result تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#collective_broadcast

مثال:

%result = "mhlo.collective_broadcast"(%operand) {
  replica_groups = dense<[[0, 1]]> : tensor<1x2xi64>,
  channel_handle = #mhlo.channel_handle<handle = 0, type = 0>
} : (tensor<1x2xi64>) -> tensor<1x2xi64>

صفات: CompatibleOperandsAndResultType

رابط ها: InferShapedTypeOpInterface ، InferTypeOpInterface

ویژگی های:

صفت نوع MLIR شرح
replica_groups :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی
channel_handle :: mlir :: mhlo :: channelhandleattr دو دسته 64 بیتی "دسته" و "نوع"

عملیات:

عملوند شرح
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
«بی نام» Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.collective_permute (mhlo :: collectionpermuteop)

عملیات جمع آوری

در هر گروه فرآیند در شبکه فرآیند ، مقدار تانسور operand را از فرآیند منبع به فرآیند هدف می فرستد و تانسور result ای تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#collective_permute

مثال:

%result = "mhlo.collective_permute"(%operand) {
  source_target_pairs = dense<[[0, 1], [1, 2]]> : tensor<2x2xi64>,
  // channel_id = 0
  channel_handle = #mhlo.channel_handle<handle = 0, type = 0>
} : (tensor<4x2xf32>) -> tensor<4x2xf32>

صفات: AlwaysSpeculatableImplTrait ، CompatibleOperandsAndResultType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
source_target_pairs :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی
channel_handle :: mlir :: mhlo :: channelhandleattr دو دسته 64 بیتی "دسته" و "نوع"

عملیات:

عملوند شرح
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
«بی نام» Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.compare (mhlo :: مقایسه)

عملکرد را مقایسه کنید

نحو:

operation ::= `mhlo.compare` $comparison_direction `,` $lhs `,` $rhs (`,` $compare_type^)?
              attr-dict `:` functional-type(operands, results)

مقایسه عناوین عناصر تنشور lhs و rhs را با توجه به comparison_direction و compare_type انجام می دهد و تانسور result ای را تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#compare

مثال:

%result = mhlo.compare LT, %lhs, %rhs, FLOAT : (tensor<2xf32>, tensor<2xf32>) -> tensor<2xi1>

صفات: AlwaysSpeculatableImplTrait ، Elementwise ، InferTensorType ، SameOperandsAndResultShape ، SameOperandsElementType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
comparison_direction :: mlir :: mhlo :: comparisondirectionattr کدام عملیات مقایسه برای انجام.
compare_type :: mlir :: mhlo :: comparisontypeattr کدام نوع مقایسه برای استفاده.

عملیات:

عملوند شرح
lhs Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا
rhs Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
«بی نام» تانسور رتبه بندی مقادیر Pred (با نام مستعار Boolean یا 1 بیتی)

mhlo.complex (mhlo :: complexop)

عمل پیچیده

نحو:

operation ::= `mhlo.complex` operands attr-dict
              `:` custom<ComplexOpType>(type($lhs), type($rhs), type($result))

تبدیل عنصر عاقلانه به یک مقدار پیچیده از یک جفت از مقادیر واقعی و خیالی ، lhs و rhs را انجام می دهد و یک تانسور result تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#complex

مثال:

%result = mhlo.complex %lhs, %rhs : tensor<2xcomplex<f32>>

صفات: AlwaysSpeculatableImplTrait ، Elementwise ، SameOperandsAndResultShape ، SameOperandsElementType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

عملیات:

عملوند شرح
lhs تانسور رتبه بندی شده از شناور 32 بیتی یا مقادیر شناور 64 بیتی
rhs تانسور رتبه بندی شده از شناور 32 بیتی یا مقادیر شناور 64 بیتی

نتایج:

نتیجه شرح
result تانسور رتبه بندی شده از نوع پیچیده با شناور 32 بیتی یا مقادیر عناصر شناور 64 بیتی

mhlo.composite (mhlo :: compositeop)

عمل کامپوزیت

نحو:

operation ::= `mhlo.composite` $name $inputs attr-dict `:` functional-type(operands, results)

عملیات ساخته شده (تشکیل شده) از سایر عملیات StableHlo را محاصره می کند ، از inputs و composite_attributes استفاده می کند و results تولید می کند. معناشناسی OP توسط ویژگی decomposition اجرا می شود. composite OP را می توان با تجزیه آن بدون تغییر معانی برنامه جایگزین کرد. در مواردی که در حال تجزیه تجزیه ، همان معانی OP را ارائه نمی دهد ، استفاده از custom_call ترجیح می دهید.

قسمت version (پیش فرض 0 ) برای نشان دادن هنگام تغییر معانی کامپوزیت استفاده می شود.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#composite

مثال:

%results = mhlo.composite "my.op" %arg0, %arg1 {
  decomposition = @my_op,
  composite_attributes = { my_attribute = "my_value" },
  version = 1 : i32
} : (tensor<f32>, tensor<f32>) -> tensor<f32>

رابط ها: SymbolUserOpInterface

ویژگی های:

صفت نوع MLIR شرح
name :: mlir :: stringAttr ویژگی رشته
composite_attributes :: mlir :: dictionaryattr فرهنگ لغت مقادیر ویژگی های نامگذاری شده
decomposition :: mlir :: flatsymbolrefattr ویژگی مرجع نماد صاف
version :: mlir :: integerattr ویژگی عدد صحیح 32 بیتی بدون امضا

عملیات:

عملوند شرح
inputs variadic از تانسور رتبه بندی شده از f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا float 16 بیتی یا شناور 32 بیتی یا 64 بیتی شناور یا شناور 64-بیت یا bfloat16 نوع blean or /8/16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح یکنواخت امضا شده یا 4/8/16/32 بیتی یکنواخت یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به امضاء عدد صحیح یا 4/16/32 بیتی یکنواخت در هر محور اندازه گیری نشده بدون علامت مقادیر یا توکن توکن یا توخالی با هر ترکیبی از تانسور رتبه بندی شده از نوع F8E4M3B11fNUZ یا F8E4M3FN نوع یا F8E4M3FNUZ نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16-bit یا شناور یا 32-bit-bit-a-previty یا 64-bit-float یا bil یا عدد صحیح 1 بیتی) یا شماره 4/8/16/32/64 بیتی بدون علامت یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا 4 /8/16/32 بیتی یکنواخت یکنواخت امضا شده یا 4/8/16/32 بیتی مقادیر عدد صحیح یکنواخت یا تانسور رتبه بندی شده از 4/8/16/32 بیتی یکنواخت در هر محور امضا شده یا 4/8 /16/32 بیتی یکنواخت در هر محور مقادیر عدد صحیح امضا نشده یا مقادیر توکن

نتایج:

نتیجه شرح
«بی نام» variadic از تانسور رتبه بندی شده از f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا float 16 بیتی یا شناور 32 بیتی یا 64 بیتی شناور یا شناور 64-بیت یا bfloat16 نوع blean or /8/16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح یکنواخت امضا شده یا 4/8/16/32 بیتی یکنواخت یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به امضاء عدد صحیح یا 4/16/32 بیتی یکنواخت در هر محور اندازه گیری نشده بدون علامت مقادیر یا توکن توکن یا توخالی با هر ترکیبی از تانسور رتبه بندی شده از نوع F8E4M3B11fNUZ یا F8E4M3FN نوع یا F8E4M3FNUZ نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16-bit یا شناور یا 32-bit-bit-a-previty یا 64-bit-float یا bil یا عدد صحیح 1 بیتی) یا شماره 4/8/16/32/64 بیتی بدون علامت یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا 4 /8/16/32 بیتی یکنواخت یکنواخت امضا شده یا 4/8/16/32 بیتی مقادیر عدد صحیح یکنواخت یا تانسور رتبه بندی شده از 4/8/16/32 بیتی یکنواخت در هر محور امضا شده یا 4/8 /16/32 بیتی یکنواخت در هر محور مقادیر عدد صحیح امضا نشده یا مقادیر توکن

mhlo.compute_reshape_shape (mhlo :: computereshapeshapeop)

عملیات computereshapeshape

نحو:

operation ::= `mhlo.compute_reshape_shape` operands attr-dict `:` functional-type(operands, results)

این عمل یک کار در حال انجام است ، بنابراین هنوز در مشخصات گنجانده نشده است: https://github.com/openxla/stablehlo/issues/8

به طور غیررسمی ، این عمل یک خروجی_ش برای DynamicReshapeop از تعداد num_elements عناصر در یک عمل از DynamicReshapeop و شکل dynamic_shape ارائه شده به تغییر شکل TF: https://www.tensorflow.org/api_docs/python/tf/tf/resh/reshapeapeapepe .

به عنوان مثال ، برای num_elements = 12 و dynamic_shape = [2, -1] ، result [2, 6] خواهد بود. اگر عملیات معتبر نباشد (به عنوان مثال اگر ابعاد به طور مساوی تعداد عناصر را تقسیم نمی کند ، یا اگر چندین مقدار -1 در ابعاد وجود داشته باشد) ، این منجر به رفتار نامشخص می شود.

مثال:

%result = mhlo.compute_reshape_shape %num_elements, %dynamic_shape
       : (index, tensor<2xi32>) -> tensor<2xi32>

صفات: AlwaysSpeculatableImplTrait

رابط ها: ConditionallySpeculatable ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

عملیات:

عملوند شرح
num_elements فهرست مطالب
dynamic_shape 1D Tensor of Integer یا index

نتایج:

نتیجه شرح
result 1D Tensor of Integer یا index

mhlo.concatenate (mhlo :: concatenateop)

عمل

تعداد متغیرهای تانسور در inputs در dimension به همان ترتیب آرگومان های داده شده را به هم می پیوندد و تانسور result تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#concatenate

مثال:

%result = mhlo.concatenate %input0, %input1, dim = 0 : (tensor<3x2xi64>, tensor<1x2xi64>) -> tensor<4x2xi64>

صفات: AlwaysSpeculatableImplTrait ، SameOperandsAndResultElementType

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
dimension :: mlir :: integerattr ویژگی عدد صحیح 64 بیتی بدون امضا

عملیات:

عملوند شرح
val variadic از تانسور رتبه بندی شده از f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا float 16 بیتی یا شناور 32 بیتی یا 64 بیتی شناور یا شناور 64-بیت یا bfloat16 نوع blean or /8/16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا 4/8/16/32 بیتی عدد صحیح یکنواخت امضا شده یا 4/8/16/32 بیتی یکنواخت یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به امضاء عدد صحیح یا 4/16/32 بیتی یکنواخت در هر محور اندازه گیری نشده بدون علامت ارزش های

نتایج:

نتیجه شرح
«بی نام» Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.constant (mhlo :: constantop)

عمل ثابت

یک تانسور output از یک value ثابت تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#constant

مثال:

%output = mhlo.constant dense<[[0.0, 1.0], [2.0, 3.0]]> : tensor<2x2xf32>

صفات: AlwaysSpeculatableImplTrait ، ConstantLike

رابط ها: ConditionallySpeculatable ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
value :: mlir :: leasementattr ویژگی بردار/تانسور ثابت

نتایج:

نتیجه شرح
output تانسور به صورت آماری از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا 64-bit شناور یا bfloat16-bloat16) intrge-interg عدد صحیح بدون امضاء 8/16/32/64 بیتی یا 4/8/16/32/64 بیتی بدون امضا یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی یکنواخت بدون امضا یا یکنواخت 4/8/16/32 بیتی در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.convert (mhlo :: convertop)

تبدیل عمل

نحو:

operation ::= `mhlo.convert` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

تبدیل عناصر عاقلانه از یک عنصر به نوع دیگر در تانسور operand را انجام می دهد و یک تانسور result تولید می کند.

مشاهده کنید: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#convert

مثال:

%result = mhlo.convert %operand : (tensor<3xi32>) -> tensor<3xcomplex<f32>>

صفات: AlwaysSpeculatableImplTrait ، Elementwise ، SameOperandsAndResultShape

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

عملیات:

عملوند شرح
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
result Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.convolution (mhlo :: convolutionop)

عملیات پیچیدگی

نحو:

operation ::= `mhlo.convolution` `(`operands`)`
              `dim_numbers` `=` custom<ConvolutionDimensions>($dimension_numbers) `,`
              `window` `=` `{` custom<WindowAttributes>($window_strides, $padding,
              $lhs_dilation, $rhs_dilation,
              $window_reversal) `}`
              attr-dict `:` functional-type(operands, results)

محصولات DOT را بین ویندوز lhs و برش های rhs محاسبه می کند و result تولید می کند.

نگاه کنید به: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#convolution

مثال:

%result = "mhlo.convolution"(%lhs, %rhs) {
  window_strides = dense<4> : tensor<2xi64>,
  padding = dense<0> : tensor<2x2xi64>,
  lhs_dilation = dense<2> : tensor<2xi64>,
  rhs_dilation = dense<1> : tensor<2xi64>,
  window_reversal = dense<false> : tensor<2xi1>,
  dimension_numbers = #mhlo.conv<[b, 0, 1, f]x[0, 1, i, o]->[b, 0, 1, f]>,
  feature_group_count = 1 : i64,
  batch_group_count = 1 : i64,
  precision_config = [#stablehlo<precision DEFAULT>, #stablehlo<precision DEFAULT>]
} : (tensor<1x4x4x1xi32>, tensor<3x3x1x1xi32>) -> tensor<1x2x2x1xi32>

صفات: AlwaysSpeculatableImplTrait

رابط ها: ConditionallySpeculatable ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
window_strides :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی
padding :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی
lhs_dilation :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی
rhs_dilation :: mlir :: denseintelementsattr ویژگی عناصر عدد صحیح 64 بیتی
window_reversal :: mlir :: denseElementSattr ویژگی بردار/تانسور بولی ثابت
dimension_numbers :: mlir :: mhlo :: convdimensionNumbersattr ساختار اطلاعات ابعادی برای کنفرانس
feature_group_count :: mlir :: integerattr ویژگی عدد صحیح 64 بیتی بدون امضا
batch_group_count :: mlir :: integerattr ویژگی عدد صحیح 64 بیتی بدون امضا
precision_config :: mlir :: arrayattr ویژگی پیکربندی دقیق

عملیات:

عملوند شرح
lhs Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا
rhs Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

نتایج:

نتیجه شرح
«بی نام» Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح امضا شده یا 4/8/16/32 بیتی عدد یکنواخت بدون امضا یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا

mhlo.copy (mhlo :: copyop)

عملیات کپی کردن

نحو:

operation ::= `mhlo.copy` operands attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

این عملیات برای کامپایلر XLA خصوصی است ، بنابراین هنوز مشخصات آن را ندارد.

به طور غیررسمی ، این عمل یک نسخه از operand است. بسته به ابرداده متصل به این عملیات ، می تواند کاملاً متفاوت از یک OP رفتار کند.

مثال:

%0 = mhlo.copy %arg0 : tensor<f32>

صفات: AlwaysSpeculatableImplTrait ، CompatibleOperandsAndResultType ، Elementwise

رابط ها: ConditionallySpeculatable ، InferShapedTypeOpInterface ، InferTypeOpInterface ، NoMemoryEffect (MemoryEffectOpInterface)

اثرات: MemoryEffects::Effect{}

ویژگی های:

صفت نوع MLIR شرح
cross_program_prefetch_index :: mlir :: integerattr ویژگی عدد صحیح 32 بیتی بدون امضا

عملیات:

عملوند شرح
operand Tensor از نوع f8e4m3b11fnuz نوع یا f8e4m3fn نوع یا f8e4m3fnuz نوع یا f8e5m2 نوع یا f8e5m2fnuz یا شناور 16 بیتی یا شناور 32 بیتی یا شناورهای 64 بیتی یا bfloat16 یا bfloat16 نوع 4-bloat16-blast/aka integer (aka integer) /16/32/64 بیتی عدد صحیح بدون امضا یا 4/8/16/32/64 بیتی بدون امضاء یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا یکنواخت 4/8/16/32 بیتی عدد صحیح یا یکنواخت یکنواخت یکنواخت یا 4/8/16/32 بیتی یا 4/8/16/32 بیتی یکنواخت در هر محور به صورت عدد صحیح یا یکنواخت 4/8/16/32 بیتی در هر محور مقادیر عدد صحیح بدون امضا یا مقادیر عدد صحیح یا یکنواخت اندازه گیری شده توکن یا توت توک با هر ترکیبی از تانسور رتبه بندی شده F8E4M3B11fNUZ نوع یا F8E4M3FN نوع یا F8E4M3FNUZ نوع F8E5M2 یا F8E5M2FNUZ یا FLOAT 16-BIT یا شناو عدد صحیح) یا 4/8/16/32/64 بیتی بدون علامت یا 4/8/16/32/64 بیتی بدون علامت یا نوع پیچیده با شناور 32 بیتی یا عناصر شناور 64 بیتی یا 4/8 /16/32 بیتی یکنواخت یک عدد صحیح امضا شده یا 4/16/16/32 بیتی مقادیر عدد صحیح بدون امضا یا تانسور رتبه بندی شده از یکنواخت 4/8/16/32 بیتی در هر محور به امضاء عدد صحیح یا 4/8/16 /32 بیتی یکنواخت در هر محور مقادیر عدد صحیح بدون امضا یا مقادیر توکن

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token or nested tuple with any combination of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

mhlo.cosine (mhlo::CosineOp)

Cosine operation

نحو:

operation ::= `mhlo.cosine` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise cosine operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#cosine

مثال:

%result = mhlo.cosine %operand : tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.count_leading_zeros (mhlo::ClzOp)

Clz operation

نحو:

operation ::= `mhlo.count_leading_zeros` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise count of the number of leading zero bits in the operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#count_leading_zeros

مثال:

%result = mhlo.count_leading_zeros %operand : tensor<2x2xi8>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

mhlo.create_token (mhlo::CreateTokenOp)

CreateToken operation

نحو:

operation ::= `mhlo.create_token` attr-dict `:` type(results)

This operation is on its way out of StableHLO, so it is not included in the specification: https://github.com/openxla/stablehlo/issues/3

Informally, this operation does the same thing as AfterAllOp with 0 inputs: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#after_all

مثال:

%output = mhlo.create_token : !mhlo.token

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

نتایج:

نتیجه شرح
output نشانه

mhlo.cross-replica-sum (mhlo::CrossReplicaSumOp)

CrossReplicaSum operation

This operation is on its way out of StableHLO, so it is not included in the specification: https://github.com/openxla/stablehlo/issues/3

Informally, this operation does the same thing as AllReduceOp with channel_id = 0 , use_global_device_ids = false and computation implementing addition: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#all_reduce

مثال:

%result = "mhlo.cross-replica-sum"(%operand) {
  replica_groups = dense<[[0, 1]]> : tensor<1x2xi64>
} : (tensor<4xf32>) -> tensor<4xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
replica_groups ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.cstr_reshapable (mhlo::CstrReshapableOp)

CstrReshapable operation

نحو:

operation ::= `mhlo.cstr_reshapable` operands attr-dict `:` functional-type(operands, results)

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation creates a witness on the constraint that ComputeReshapeShape would succeed with the provided operands.

مثال:

%result = mhlo.cstr_reshapable %num_elements, %dynamic_shape
       : (index, tensor<3xi32>) -> !shape.witness

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
num_elements فهرست مطالب
dynamic_shape 1D tensor of integer or index values

نتایج:

نتیجه شرح
result

mhlo.custom_call (mhlo::CustomCallOp)

CustomCall operation

نحو:

operation ::= `mhlo.custom_call` custom<CustomCallTarget>($call_target_name) `(` $inputs `)`
              attr-dict `:` functional-type(operands, results)

Encapsulates an implementation-defined operation call_target_name that takes inputs and called_computations and produces results .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#custom_call

مثال:

%results = "mhlo.custom_call"(%input0) {
  call_target_name = "foo",
  has_side_effect = false,
  backend_config = "bar",
  api_version = 1 : i32,
  called_computations = [@foo]
} : (tensor<f32>) -> tensor<f32>

A custom call invokes code external to XLA. The `inputs` are passed to the
external code, and the external code is expected to produce a result of the
given type. The exact mechanism is backend-specific. For example, in the CPU
backend, a call instruction is emitted which targets a symbol with the name
`call_target_name`.

If XLA runtime is enabled for a backend, then custom calls use the runtime
custom call calling convention to call into the external functions. This
calling convention defines an ABI for encoding arguments, attributes and
results.

Depending on the API version there are two ways to pass extra bits of static
information to the external function:

1. For `API_VERSION_TYPED_FFI` custom calls `backend_config` must be a
   dictionary attribute, that will be encoded according to the custom call
   calling convention and passed to the external function as the attributes
   argument. External code is expected to use declarative bindings (see
   `xla/runtime/custom_call.h`) to decode them at run time. These custom
   calls are only supported if XLA uses XLA runtime.

2. For previous API versions it is the user responsibility to encode extra
   bits of static information as a string `backend_config` attribute, and
   decode it at run time.

Interfaces: MemoryEffectOpInterface

ویژگی های:

صفت MLIR Type شرح
call_target_name ::mlir::StringAttr string attribute
has_side_effect ::mlir::BoolAttr bool attribute
backend_config ::mlir::Attribute string attribute or dictionary of named attribute values
api_version ::mlir::mhlo::CustomCallApiVersionAttr Custom call API version
called_computations ::mlir::ArrayAttr flat symbol ref array attribute
custom_call_schedule ::mlir::mhlo::CustomCallScheduleAttr Specifies the desired schedule for the custom-call.
operand_layouts ::mlir::ArrayAttr Array of layout (1D tensor of index type) attributes
result_layouts ::mlir::ArrayAttr Array of layout (1D tensor of index type) attributes
output_operand_aliases ::mlir::ArrayAttr Aliasing attribute for outputs and operands of CustomCall

Operands:

عملوند شرح
inputs variadic of tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token or nested tuple with any combination of tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

نتایج:

نتیجه شرح
«unnamed» variadic of tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token or nested tuple with any combination of tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

mhlo.divide (mhlo::DivOp)

Div operation

نحو:

operation ::= `mhlo.divide` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise division of dividend lhs and divisor rhs tensors and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#divide

مثال:

%result = mhlo.divide %lhs, %rhs : tensor<4xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.domain (mhlo::DomainOp)

Domain operation

This operation is private to the XLA compiler, so it is does not yet have a specification.

Informally, these operations are used to group instructions with the same DomainMetadata property. ShardingMetadata is the main use case today to group instructions on the same device. Domain instructions provide two major benefits:

  • Prevent unintentionally optimizing instructions across domains.
  • Automatically assign the metadata of the instructions created in the domain. Without domain instructions, each HLO optimization pass would have to check and propagate the metadata, which would be easy to miss and also adds complexity to the compiler. Since domain instructions connect two different domains, each domain instruction is associated with two DomainMetadata -- one on the operand side and one on the user side of the domain.

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
kind ::mlir::mhlo::DomainKindAttr Kind of domain metatdata attached to an HLO domain.
entry_metadata ::mlir::StringAttr string attribute
exit_metadata ::mlir::StringAttr string attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

mhlo.dot (mhlo::DotOp)

Dot operation

This operation is on its way out of StableHLO, so it is not included in the specification: https://github.com/openxla/stablehlo/issues/3

Informally, this operation does the same thing as XLA's Dot: https://www.tensorflow.org/xla/operation_semantics#dot

مثال:

%0 = mhlo.dot %arg0, %arg1 : (tensor<1x2xi32>, tensor<2x1xi32>) -> tensor<1x1xi32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
precision_config ::mlir::ArrayAttr Precision Config attribute

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dot_general (mhlo::DotGeneralOp)

DotGeneral operation

Computes dot products between slices of lhs and slices of rhs and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#dot_general

مثال:

%result = "mhlo.dot_general"(%lhs, %rhs) {
  dot_dimension_numbers = #mhlo.dot<
    lhs_batching_dimensions = [0],
    rhs_batching_dimensions = [0],
    lhs_contracting_dimensions = [2],
    rhs_contracting_dimensions = [1]
  >,
  precision_config = [#stablehlo<precision DEFAULT>, #stablehlo<precision DEFAULT>]
} : (tensor<2x2x2xi32>, tensor<2x2x2xi32>) -> tensor<2x2x2xi32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
dot_dimension_numbers ::mlir::mhlo::DotDimensionNumbersAttr Attribute that models the dimension information for dot.
precision_config ::mlir::ArrayAttr Precision Config attribute

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_broadcast_in_dim (mhlo::DynamicBroadcastInDimOp)

DynamicBroadcastInDim operation

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation does the same thing as BroadcastInDimOp except that the result shape is specified dynamically via output_dimensions : https://github.com/openxla/stablehlo/blob/main/docs/spec.md#broadcast_in_dim

It also accepts optional attributes to express static knowledge about the expanding behavior of dimensions. If not specified, all dimensions are assumed to be possibly expanding. The sets of dimensions that are known to be expanding and the set of dimensions that are known to be non-expanding must be disjoint and they must be a subset of the operand's dimensions.

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
broadcast_dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
known_expanding_dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
known_nonexpanding_dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
output_dimensions 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_conv (mhlo::DynamicConvOp)

DynamicConv operation

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation does the same thing as ConvolutionOp except that padding is specified dynamically via d_padding : https://github.com/openxla/stablehlo/blob/main/docs/spec.md#convolution

مثال:

%result = "mhlo.dynamic_conv"(%lhs, %rhs, %d_padding) {
  window_strides = dense<4> : tensor<2xi64>,
  lhs_dilation = dense<2> : tensor<2xi64>,
  rhs_dilation = dense<1> : tensor<2xi64>,
  window_reversal = dense<false> : tensor<2xi1>,
  dimension_numbers = #mhlo.conv<[b, 0, 1, f]x[0, 1, i, o]->[b, 0, 1, f]>,
  feature_group_count = 1 : i64,
  batch_group_count = 1 : i64,
  precision_config = [#stablehlo<precision DEFAULT>, #stablehlo<precision DEFAULT>]
} : (tensor<1x4x4x1xi32>, tensor<3x3x1x1xi32>, tensor<2x2xi64>) -> tensor<1x2x2x1xi32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
window_strides ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
padding ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
lhs_dilation ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
rhs_dilation ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
window_reversal ::mlir::DenseElementsAttr constant boolean vector/tensor attribute
dimension_numbers ::mlir::mhlo::ConvDimensionNumbersAttr Structure of dimension information for conv op
feature_group_count ::mlir::IntegerAttr 64-bit signless integer attribute
batch_group_count ::mlir::IntegerAttr 64-bit signless integer attribute
precision_config ::mlir::ArrayAttr Precision Config attribute

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
d_padding ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_gather (mhlo::DynamicGatherOp)

DynamicGather operation

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation does the same thing as GatherOp except that slice_sizes are specified dynamically: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#gather

مثال:

%result = "mhlo.dynamic_gather"(%operand, %start_indices, %slice_sizes) {
  dimension_numbers = #mhlo.gather<
    offset_dims = [2, 3],
    collapsed_slice_dims = [0],
    start_index_map = [0, 2],
    index_vector_dim = 2>,
  indices_are_sorted = false
} : (tensor<3x4x2xi32>, tensor<2x3x2xi64>, tensor<3xi64>) -> tensor<2x3x2x2xi32>

Traits: AlwaysSpeculatableImplTrait , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
dimension_numbers ::mlir::mhlo::GatherDimensionNumbersAttr Attribute that models the dimension information for gather
indices_are_sorted ::mlir::BoolAttr bool attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
start_indices ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
slice_sizes ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_iota (mhlo::DynamicIotaOp)

DynamicIota operation

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation does the same thing as IotaOp except that the result shape is specified dynamically via output_shape : https://github.com/openxla/stablehlo/blob/main/docs/spec.md#iota

مثال:

%0 = mhlo.dynamic_iota %arg0, dim = 0 : (tensor<1xindex>) -> tensor<4xi32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
iota_dimension ::mlir::IntegerAttr 64-bit signless integer attribute

Operands:

عملوند شرح
output_shape 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_pad (mhlo::DynamicPadOp)

DynamicPad operation

نحو:

operation ::= `mhlo.dynamic_pad` operands attr-dict `:` functional-type(operands, results)

Dynamically Pads the operand , with amount of padding added at low-end/high-end/interior is passed through input tensors.

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
padding_value ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
edge_padding_low 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
edge_padding_high 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
interior_padding 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_reshape (mhlo::DynamicReshapeOp)

DynamicReshape operation

نحو:

operation ::= `mhlo.dynamic_reshape` operands attr-dict `:` functional-type(operands, results)

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation does the same thing as ReshapeOp except that the result shape is specified dynamically via output_shape : https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reshape

مثال:

%0 = mhlo.dynamic_reshape %arg0, %shape : (tensor<?xf32>, tensor<2xindex>) -> tensor<?x?xf32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
output_shape 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_slice (mhlo::DynamicSliceOp)

DynamicSlice operation

Extracts a slice from the operand using dynamically-computed starting indices and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#dynamic_slice

مثال:

%result = mhlo.dynamic_slice %operand, %start_indices0, %start_indices1, sizes = [2, 2]
  : (tensor<4x4xi32>, tensor<i64>, tensor<i64>) -> tensor<2x2xi32>

Traits: AlwaysSpeculatableImplTrait , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
slice_sizes ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
start_indices variadic of 0D tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.dynamic_update_slice (mhlo::DynamicUpdateSliceOp)

DynamicUpdateSlice operation

نحو:

operation ::= `mhlo.dynamic_update_slice` operands attr-dict `:` functional-type(operands, results)

Produces a result tensor which is equal to the operand tensor except that the slice starting at start_indices is updated with the values in update .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#dynamic_update_slice

مثال:

%result = mhlo.dynamic_update_slice %operand, %update, %start_indices0, %start_indices1
  : (tensor<4x4xi32>, tensor<2x2xi32>, tensor<i64>, tensor<i64>) -> tensor<4x4xi32>

Traits: AlwaysSpeculatableImplTrait , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
update ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
start_indices variadic of 0D tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.einsum (mhlo::EinsumOp)

Einsum operation

This operation is on its way out of StableHLO, so it is not included in the specification: https://github.com/openxla/stablehlo/issues/3

Informally, this operation does the same thing as TF's einsum: https://www.tensorflow.org/api_docs/python/tf/einsum

مثال:

%result = "mhlo.einsum"(%lhs, %rhs) {
  einsum_config = "ab,bc->ac"
} : (tensor<4x16xf32>, tensor<16x4xf32>) -> tensor<4x4xf32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
einsum_config ::mlir::StringAttr string attribute

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.erf (mhlo::ErfOp)

Erf operation

نحو:

operation ::= `mhlo.erf` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise erf operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#erf

مثال:

%result = mhlo.erf %operand : tensor<2x2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.exponential (mhlo::ExpOp)

Exp operation

نحو:

operation ::= `mhlo.exponential` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise exponential operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#exponential

مثال:

%result = mhlo.exponential %operand : tensor<2x2xf64>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.exponential_minus_one (mhlo::Expm1Op)

Expm1 operation

نحو:

operation ::= `mhlo.exponential_minus_one` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise exponential minus one operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#exponential_minus_one

مثال:

%result = mhlo.exponential_minus_one %operand : tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.fft (mhlo::FftOp)

Fft operation

Performs the forward and inverse Fourier transforms for real and complex inputs/outputs.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#fft

مثال:

%result = mhlo.fft %operand, type = FFT, length = [4] : (tensor<4xcomplex<f32>>) -> tensor<4xcomplex<f32>>

Traits: AlwaysSpeculatableImplTrait , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
fft_type ::mlir::mhlo::FftTypeAttr XLA fast fourier transform type.
fft_length ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.floor (mhlo::FloorOp)

Floor operation

نحو:

operation ::= `mhlo.floor` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise floor of operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#floor

مثال:

%result = mhlo.floor %operand : tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.fusion (mhlo::FusionOp)

Fusion operation

This operation is private to the XLA compiler, so it is does not yet have a specification.

Informally, this operation consists of a group of basic ops (represented as a region attached to it). It serves as a hint to the backend that it is beneficial to emit the contained ops into a single loop nest or kernel.

ویژگی های:

صفت MLIR Type شرح
fusion_kind ::mlir::mhlo::FusionKindAttr fusion kind
output_operand_aliases ::mlir::ArrayAttr Aliasing attribute for outputs and operands of Fusion

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

نتایج:

نتیجه شرح
results variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or nested tuple with any combination of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

mhlo.gather (mhlo::GatherOp)

Gather operation

Gathers slices from operand tensor from offsets specified in start_indices and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#gather

مثال:

%result = "mhlo.gather"(%operand, %start_indices) {
  dimension_numbers = #mhlo.gather<
    offset_dims = [2, 3],
    collapsed_slice_dims = [0],
    start_index_map = [0, 2],
    index_vector_dim = 2>,
  slice_sizes = dense<[0, 2, 2]> : tensor<3xi64>,
  indices_are_sorted = false
} : (tensor<3x4x2xi32>, tensor<2x3x2xi64>) -> tensor<2x3x2x2xi32>

Traits: AlwaysSpeculatableImplTrait , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
dimension_numbers ::mlir::mhlo::GatherDimensionNumbersAttr Attribute that models the dimension information for gather
slice_sizes ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
indices_are_sorted ::mlir::BoolAttr bool attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
start_indices ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.get_dimension_size (mhlo::GetDimensionSizeOp)

GetDimensionSize operation

Produces the size of the given dimension of the operand .

See https://github.com/openxla/stablehlo/blob/main/docs/spec.md#get_dimension_size

مثال:

%result = mhlo.get_dimension_size %operand, dim = 1 : (tensor<2x3xf32>) -> tensor<i32>

Traits: AlwaysSpeculatableImplTrait , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
dimension ::mlir::IntegerAttr 64-bit signless integer attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» tensor of 32-bit signless integer values

mhlo.get_tuple_element (mhlo::GetTupleElementOp)

GetTupleElement operation

نحو:

operation ::= `mhlo.get_tuple_element` $operand `[` $index `]` attr-dict `:` functional-type(operands, results)

Extracts element at index position of the operand tuple and produces a result .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#get_tuple_element

مثال:

%result = mhlo.get_tuple_element %operand[0] : (tuple<tensor<2xf32>, tuple<tensor<i32>>>) -> tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
index ::mlir::IntegerAttr 32-bit signless integer attribute

Operands:

عملوند شرح
operand nested tuple with any combination of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token or nested tuple with any combination of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

mhlo.if (mhlo::IfOp)

If operation

Produces the output from executing exactly one branch from true_branch or false_branch depending on the value of pred .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#if

Example: %result = "mhlo.if"(%pred) ({ "mhlo.return"(%result_true_branch) : (tensor ) -> () }, { "mhlo.return"(%result_false_branch) : (tensor ) -> () }) : (tensor ) -> tensor

Traits: RecursiveMemoryEffects , SingleBlockImplicitTerminator<ReturnOp> , SingleBlock

Interfaces: InferTypeOpInterface

Operands:

عملوند شرح
pred ranked tensor of pred (AKA boolean or 1-bit integer) values

نتایج:

نتیجه شرح
«unnamed» variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

mhlo.imag (mhlo::ImagOp)

Imag operation

نحو:

operation ::= `mhlo.imag` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Extracts the imaginary part, element-wise, from the operand and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#imag

مثال:

%result = mhlo.imag %operand : (tensor<2xcomplex<f32>>) -> tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.infeed (mhlo::InfeedOp)

Infeed operation

Reads data from the infeed and produces results .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#infeed

مثال:

%results:2 = "mhlo.infeed"(%token) {
  infeed_config = ""
} : (!mhlo.token) -> (tensor<3x3x3xi32>, !mhlo.token)

ویژگی های:

صفت MLIR Type شرح
infeed_config ::mlir::StringAttr string attribute
layout ::mlir::ArrayAttr array attribute

Operands:

عملوند شرح
token نشانه

نتایج:

نتیجه شرح
«unnamed» variadic of statically shaped tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or statically shaped tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

mhlo.iota (mhlo::IotaOp)

Iota operation

Fills an output tensor with values in increasing order starting from zero along the iota_dimension dimension.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#iota

مثال:

%output = mhlo.iota dim = 0 : tensor<4x5xi32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
iota_dimension ::mlir::IntegerAttr 64-bit signless integer attribute

نتایج:

نتیجه شرح
output statically shaped tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values

mhlo.is_finite (mhlo::IsFiniteOp)

IsFinite operation

نحو:

operation ::= `mhlo.is_finite` $x attr-dict `:` functional-type(operands, results)

Performs element-wise check whether the value in x is finite (ie is neither +Inf, -Inf, nor NaN) and produces a y tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#is_finite

مثال:

%y = mhlo.is_finite %x : (tensor<7xf32>) -> tensor<7xi1>

Traits: AlwaysSpeculatableImplTrait , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
x ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

نتایج:

نتیجه شرح
y ranked tensor of pred (AKA boolean or 1-bit integer) values

mhlo.log (mhlo::LogOp)

Log operation

نحو:

operation ::= `mhlo.log` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise logarithm operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#log

مثال:

%result = mhlo.log %operand : tensor<2x2xf64>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.log_plus_one (mhlo::Log1pOp)

Log1p operation

نحو:

operation ::= `mhlo.log_plus_one` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise logarithm plus one operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#log_plus_one

مثال:

%result = mhlo.log_plus_one %operand : tensor<6xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.logistic (mhlo::LogisticOp)

Logistic operation

نحو:

operation ::= `mhlo.logistic` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise logistic operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#logistic

مثال:

%result = mhlo.logistic %operand : tensor<2x2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.map (mhlo::MapOp)

Map operation

Applies a map function computation to inputs along the dimensions and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#map

مثال:

%result = "mhlo.map"(%input0, %input1) ({
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = mhlo.multiply %arg0, %arg1 : tensor<i32>
    mhlo.return %0 : tensor<i32>
}) {
  dimensions = dense<[0, 1]> : tensor<2xi64>
} : (tensor<2x2xi32>, tensor<2x2xi32>) -> tensor<2x2xi32>

Traits: InferTensorType , RecursiveMemoryEffects , SameOperandsAndResultShape , SingleBlockImplicitTerminator<ReturnOp> , SingleBlock

Interfaces: InferShapedTypeOpInterface , InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.maximum (mhlo::MaxOp)

Max operation

نحو:

operation ::= `mhlo.maximum` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise max operation on tensors lhs and rhs and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#maximum

مثال:

%result = mhlo.maximum %lhs, %rhs : tensor<4xf32>

Traits: AlwaysSpeculatableImplTrait , Commutative , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.minimum (mhlo::MinOp)

Min operation

نحو:

operation ::= `mhlo.minimum` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise min operation on tensors lhs and rhs and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#minimum

مثال:

%result = mhlo.minimum %lhs, %rhs : tensor<4xf32>

Traits: AlwaysSpeculatableImplTrait , Commutative , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.multiply (mhlo::MulOp)

Mul operation

نحو:

operation ::= `mhlo.multiply` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise product of two tensors lhs and rhs and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#multiply

مثال:

%result = mhlo.multiply %lhs, %rhs : tensor<2xi32>

Traits: AlwaysSpeculatableImplTrait , Commutative , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.negate (mhlo::NegOp)

Neg operation

نحو:

operation ::= `mhlo.negate` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise negation of operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#negate

مثال:

%result = mhlo.negate %operand : tensor<2x3xi32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.not (mhlo::NotOp)

Not operation

نحو:

operation ::= `mhlo.not` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise NOT of tensor operand of type integer and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#not

مثال:

%result = mhlo.not %operand : tensor<5x3x1xi1>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

mhlo.optimization_barrier (mhlo::OptimizationBarrierOp)

OptimizationBarrier operation

نحو:

operation ::= `mhlo.optimization_barrier` attr-dict ($operand^ `:` custom<PairwiseOpType>(type($operand), type($result))):(`(` `)`)?

Ensures that the operations that produce the operand are executed before any operations that depend on the result and prevents compiler transformations from moving operations across the barrier. Other than that, the operation is an identity, ie result = operand .

See https://github.com/openxla/stablehlo/blob/main/docs/spec.md#optimization_barrier

مثال:

%result0, %result1 = mhlo.optimization_barrier %operand0, %operand1 : tensor<f32>, tensor<f32>

Traits: AlwaysSpeculatableImplTrait , HLO_PairwiseSameOperandAndResultType

Interfaces: ConditionallySpeculatable , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

نتایج:

نتیجه شرح
result variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

mhlo.or (mhlo::OrOp)

Or operation

نحو:

operation ::= `mhlo.or` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise OR of two tensors lhs and rhs and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#or

مثال:

%result = mhlo.or %lhs, %rhs : tensor<2xi1>

Traits: AlwaysSpeculatableImplTrait , Commutative , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
rhs ranked tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.outfeed (mhlo::OutfeedOp)

Outfeed operation

Writes inputs to the outfeed and produces a result token.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#outfeed

مثال:

%result = "mhlo.outfeed"(%input0, %token) {
  outfeed_config = ""
} : (tensor<3x3x3xi32>, !mhlo.token) -> !mhlo.token

Interfaces: InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
outfeed_config ::mlir::StringAttr string attribute

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های
token نشانه

نتایج:

نتیجه شرح
«unnamed» نشانه

mhlo.pad (mhlo::PadOp)

Pad operation

Expands operand by padding around the tensor as well as between the elements of the tensor with the given padding_value .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#pad

مثال:

%0 = mhlo.pad %arg0, %arg1, low = [0, 1], high = [2, 1], interior = [1, 2]
  : (tensor<2x3xi32>, tensor<i32>) -> tensor<5x9xi32>

Traits: AlwaysSpeculatableImplTrait , SameOperandsAndResultElementType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
edge_padding_low ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
edge_padding_high ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
interior_padding ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
padding_value ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.partition_id (mhlo::PartitionIdOp)

PartitionId operation

نحو:

operation ::= `mhlo.partition_id` attr-dict `:` type(results)

Produces partition_id of the current process.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#partition_id

مثال:

%result = mhlo.partition_id : tensor<ui32>

Interfaces: InferTypeOpInterface

نتایج:

نتیجه شرح
«unnamed» ranked tensor of 32-bit unsigned integer values

mhlo.popcnt (mhlo::PopulationCountOp)

PopulationCount operation

نحو:

operation ::= `mhlo.popcnt` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise count of the number of bits set in the operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#popcnt

مثال:

%result = mhlo.popcnt %operand : tensor<4xi8>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

mhlo.power (mhlo::PowOp)

Pow operation

نحو:

operation ::= `mhlo.power` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise exponentiation of lhs tensor by rhs tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#power

مثال:

%result = mhlo.power %lhs, %rhs : tensor<6xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.real (mhlo::RealOp)

Real operation

نحو:

operation ::= `mhlo.real` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Extracts the real part, element-wise, from the operand and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#real

مثال:

%result = mhlo.real %operand : (tensor<2xcomplex<f32>>) -> tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.real_dynamic_slice (mhlo::RealDynamicSliceOp)

RealDynamicSlice operation

نحو:

operation ::= `mhlo.real_dynamic_slice` operands attr-dict `:` functional-type(operands, results)

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation does the same thing as SliceOp except that start_indices , limit_indices and strides are specified dynamically: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#slice

مثال:

%result = mhlo.real_dynamic_slice %operand,
            %start_indices, %limit_indices, %strides
       : (tensor<256x?xf32>, tensor<2xindex>, tensor<2xindex>, tensor<2xindex>) -> tensor<256x?xf32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
start_indices 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
limit_indices 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
strides 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.recv (mhlo::RecvOp)

Recv operation

Receives data from a channel with channel_id and produces results .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#recv

مثال:

%results:2 = "mhlo.recv"(%token) {
  // channel_id = 5 : i64,
  // channel_type = #stablehlo<channel_type HOST_TO_DEVICE>,
  channel_handle = #mhlo.channel_handle<handle = 5, type = 3>,
  is_host_transfer = true
} : (!mhlo.token) -> (tensor<3x4xi32>, !mhlo.token)

ویژگی های:

صفت MLIR Type شرح
channel_handle ::mlir::mhlo::ChannelHandleAttr two 64-bit integers 'handle' and 'type'
is_host_transfer ::mlir::BoolAttr bool attribute

Operands:

عملوند شرح
token نشانه

نتایج:

نتیجه شرح
«unnamed» variadic of statically shaped tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or statically shaped tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

mhlo.reduce (mhlo::ReduceOp)

Reduce operation

Applies a reduction function body to inputs and init_values along the dimensions and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reduce

مثال:

%result = "mhlo.reduce"(%input, %init_value) ({
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = "mhlo.add"(%arg0, %arg1) : (tensor<i32>, tensor<i32>) -> tensor<i32>
    "mhlo.return"(%0) : (tensor<i32>) -> ()
}) {
  dimensions = dense<1> : tensor<1xi64>
} : (tensor<1x6xi32>, tensor<i32>) -> tensor<1xi32>

Traits: InferTensorType , RecursiveMemoryEffects , SameVariadicOperandSize , SingleBlockImplicitTerminator<ReturnOp> , SingleBlock

Interfaces: InferShapedTypeOpInterface , InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های
init_values variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

نتایج:

نتیجه شرح
«unnamed» variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

mhlo.reduce_precision (mhlo::ReducePrecisionOp)

ReducePrecision operation

نحو:

operation ::= `mhlo.reduce_precision` $operand `,` `format` `=` custom<ExponentMantissa>($exponent_bits, $mantissa_bits)
              attr-dict `:` custom<SameOperandsAndResultType>(type($operand), type($output))

Performs element-wise conversion of operand to another floating-point type that uses exponent_bits and mantissa_bits and back to the original floating-point type and produces an output tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reduce_precision

مثال:

%output = mhlo.reduce_precision %operand, format = e5m2 : tensor<6xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
exponent_bits ::mlir::IntegerAttr 32-bit signless integer attribute
mantissa_bits ::mlir::IntegerAttr 32-bit signless integer attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

نتایج:

نتیجه شرح
output ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.reduce_scatter (mhlo::ReduceScatterOp)

ReduceScatter operation

Within each process group in the process grid, performs reduction, using computations , over the values of the operand tensor from each process, splits the reduction result along scatter_dimension into parts, and scatters the split parts between the processes to produce the result .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reduce_scatter

مثال:

%result = "mhlo.reduce_scatter"(%operand) ({
  ^bb0(%arg0: tensor<f32>, %arg1: tensor<f32>):
  %0 = mhlo.add %arg0, %arg1 : tensor<f32>
  mhlo.return %0 : tensor<f32>
}) {
  scatter_dimension = 1 : i64,
  replica_groups = dense<[[0, 1]]> : tensor<1x2xi64>,
  // channel_id = 0
  channel_handle = #mhlo.channel_handle<handle = 0, type = 0>
  // use_global_device_ids = false
} : (tensor<2x4xf32>) -> tensor<2x2xf32>

ویژگی های:

صفت MLIR Type شرح
scatter_dimension ::mlir::IntegerAttr 64-bit signless integer attribute
replica_groups ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
channel_handle ::mlir::mhlo::ChannelHandleAttr two 64-bit integers 'handle' and 'type'
use_global_device_ids ::mlir::UnitAttr unit attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.reduce_window (mhlo::ReduceWindowOp)

ReduceWindow operation

Applies a reduction function body to windows of inputs and init_values and produces results .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reduce_window

مثال:

%result = "mhlo.reduce_window"(%input, %init_value) ({
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = mhlo.add %arg0, %arg1 : tensor<i32>
    mhlo.return %0 : tensor<i32>
}) {
  window_dimensions = dense<[2, 1]> : tensor<2xi64>,
  window_strides = dense<[4, 1]> : tensor<2xi64>,
  base_dilations = dense<[2, 1]> : tensor<2xi64>,
  window_dilations = dense<[3, 1]> : tensor<2xi64>,
  padding = dense<[[2, 1], [0, 0]]> : tensor<2x2xi64>
} : (tensor<3x2xi32>, tensor<i32>) -> tensor<2x2xi32>

Traits: InferTensorType , RecursiveMemoryEffects , SameVariadicOperandSize , SingleBlockImplicitTerminator<ReturnOp> , SingleBlock

Interfaces: InferShapedTypeOpInterface , InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
window_dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
window_strides ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
base_dilations ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
window_dilations ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
padding ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های
init_values variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

نتایج:

نتیجه شرح
«unnamed» variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

mhlo.remainder (mhlo::RemOp)

Rem operation

نحو:

operation ::= `mhlo.remainder` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise remainder of dividend lhs and divisor rhs tensors and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#remainder

مثال:

%result = mhlo.remainder %lhs, %rhs : tensor<4xi64>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.replica_id (mhlo::ReplicaIdOp)

ReplicaId operation

نحو:

operation ::= `mhlo.replica_id` attr-dict `:` type(results)

Produces replica_id of the current process.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#replica_id

مثال:

%result = mhlo.replica_id : tensor<ui32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

نتایج:

نتیجه شرح
«unnamed» ranked tensor of 32-bit unsigned integer values

mhlo.reshape (mhlo::ReshapeOp)

Reshape operation

نحو:

operation ::= `mhlo.reshape` operands attr-dict `:` functional-type(operands, results)

Performs reshape of operand tensor to a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reshape

مثال:

%result = mhlo.reshape %operand : (tensor<2xf32>) -> tensor<1x2xf32>

Traits: AlwaysSpeculatableImplTrait , HLO_CompatibleOperandsAndResultElementType

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» statically shaped tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.return (mhlo::ReturnOp)

_This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/425

Informally, this operation serves as a terminator for regions defined by
the StableHLO ops. Non-StableHLO ops, e.g. `func.func`, have their own
terminators, e.g. `func.return`.

Example:

    ```mlir
    %result = "mhlo.reduce"(%input, %init_value) ({
      ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
        %0 = "mhlo.add"(%arg0, %arg1) : (tensor<i32>, tensor<i32>) -> tensor<i32>
        "mhlo.return"(%0) : (tensor<i32>) -> ()
    }) {
      dimensions = dense<1> : tensor<1xi64>
    } : (tensor<1x6xi32>, tensor<i32>) -> tensor<1xi32>
    ```_


Syntax:

```

operation ::= mhlo.return $results attr-dict ( : type($results)^)?



Traits: `AlwaysSpeculatableImplTrait`, `Terminator`

Interfaces: `ConditionallySpeculatable`, `NoMemoryEffect (MemoryEffectOpInterface)`

Effects: `MemoryEffects::Effect{}`

#### Operands:

| Operand | Description |
| :-----: | ----------- |
| `results` | variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token or nested tuple with any combination of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values


### `mhlo.reverse` (mhlo::ReverseOp)

_Reverse operation_

Reverses the order of elements in the `operand` along the specified
`dimensions` and produces a `result` tensor.

See:
<a href="https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reverse">https://github.com/openxla/stablehlo/blob/main/docs/spec.md#reverse</a>

Example:
```mlir
%result = mhlo.reverse %operand, dims = [1] : tensor<3x2xi32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.rng (mhlo::RngOp)

Rng operation

Generates random numbers using the rng_distribution algorithm and produces a result tensor of a given shape shape .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#rng

مثال:

%result = mhlo.rng %a, %b, %shape, distribution = NORMAL : (tensor<i32>, tensor<i32>, tensor<2xi64>) -> tensor<3x3xi32>

Traits: InferTensorType

Interfaces: InferShapedTypeOpInterface , InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
rng_distribution ::mlir::mhlo::RngDistributionAttr XLA PRNG distribution to be used.

Operands:

عملوند شرح
a 0D tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values
b 0D tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values
shape 1D tensor of index or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.rng_bit_generator (mhlo::RngBitGeneratorOp)

RngBitGenerator operation

Returns an output filled with uniform random data and an updated output state output_state given an initial state initial_state using the pseudorandom number generator algorithm rng_algorithm .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#rng_bit_generator

مثال:

%output_state, %output = mhlo.rng_bit_generator %initial_state, algorithm = THREE_FRY : (tensor<2xui64>) -> (tensor<2xui64>, tensor<2x2xui64>)

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
rng_algorithm ::mlir::mhlo::RngAlgorithmAttr XLA PRNG algorithm to be used.

Operands:

عملوند شرح
initial_state ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

نتایج:

نتیجه شرح
output_state ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values
output statically shaped tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.round_nearest_afz (mhlo::RoundOp)

Round operation

نحو:

operation ::= `mhlo.round_nearest_afz` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise rounding towards the nearest integer, breaking ties away from zero, on the operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#round_nearest_afz

مثال:

%result = mhlo.round_nearest_afz %operand : tensor<5xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.round_nearest_even (mhlo::RoundNearestEvenOp)

RoundNearestEven operation

نحو:

operation ::= `mhlo.round_nearest_even` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise rounding towards the nearest integer, breaking ties towards the even integer, on the operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#round_nearest_even

مثال:

%result = mhlo.round_nearest_even %operand : tensor<5xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.rsqrt (mhlo::RsqrtOp)

Rsqrt operation

نحو:

operation ::= `mhlo.rsqrt` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise reciprocal square root operation on operand tensor and produces a result tensor, implementing the rSqrt operation from the IEEE-754 specification.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#rsqrt

مثال:

%result = mhlo.rsqrt %operand : tensor<2x2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.scatter (mhlo::ScatterOp)

Scatter operation

Produces results tensors which are equal to inputs tensors except that several slices specified by scatter_indices are updated with the values updates using update_computation .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#scatter

مثال:

%result = "mhlo.scatter"(%input, %scatter_indices, %update) ({
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = mhlo.add %arg0, %arg1 : tensor<i32>
    mhlo.return %0 : tensor<i32>
}) {
  scatter_dimension_numbers = #mhlo.scatter<
    update_window_dims = [2,3],
    inserted_window_dims = [0],
    scatter_dims_to_operand_dims = [1, 0],
    index_vector_dim = 2>,
  indices_are_sorted = false,
  unique_indices = false
} : (tensor<3x4x2xi32>, tensor<2x3x2xi64>, tensor<2x3x2x2xi32>) -> tensor<3x4x2xi32>

Traits: RecursiveMemoryEffects , SameVariadicOperandSize

Interfaces: InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
scatter_dimension_numbers ::mlir::mhlo::ScatterDimensionNumbersAttr Attribute that models the dimension information for scatter
indices_are_sorted ::mlir::BoolAttr bool attribute
unique_indices ::mlir::BoolAttr bool attribute

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های
scatter_indices ranked tensor of integer or index values
updates variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

نتایج:

نتیجه شرح
«unnamed» variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

mhlo.select (mhlo::SelectOp)

Select operation

نحو:

operation ::= `mhlo.select` operands attr-dict `:`
              custom<SelectOpType>(type($pred), type($on_true), type($on_false), type($result))

Produces a result tensor where each element is selected from on_true or on_false tensor based on the value of the corresponding element of pred .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#select

مثال:

%result = mhlo.select %pred, %on_true, %on_false : tensor<2x2xi1>, tensor<2x2xi32>

Traits: AlwaysSpeculatableImplTrait , HLO_BroadcastingElementwise , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
pred ranked tensor of pred (AKA boolean or 1-bit integer) values
on_true ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
on_false ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.select_and_scatter (mhlo::SelectAndScatterOp)

SelectAndScatter operation

Scatters the values from the source tensor using scatter based on the outcome of reduce_window of the input tensor using select and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#select_and_scatter

مثال:

%result = "mhlo.select_and_scatter"(%operand, %source, %init_value) ({
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = "mhlo.compare"(%arg0, %arg1) {
      comparison_direction = #stablehlo<comparison_direction GE>
    } : (tensor<i32>, tensor<i32>) -> tensor<i1>
    "mhlo.return"(%0) : (tensor<i1>) -> ()
}, {
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = "mhlo.add"(%arg0, %arg1) : (tensor<i32>, tensor<i32>) -> tensor<i32>
    "mhlo.return"(%0) : (tensor<i32>) -> ()
}) {
  window_dimensions = dense<[3, 1]> : tensor<2xi64>,
  window_strides = dense<[2, 1]> : tensor<2xi64>,
  padding = dense<[[0, 1], [0, 0]]> : tensor<2x2xi64>
} : (tensor<4x2xi32>, tensor<2x2xi32>, tensor<i32>) -> tensor<4x2xi32>

Traits: RecursiveMemoryEffects

Interfaces: InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
window_dimensions ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
window_strides ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
padding ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
source ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
init_value ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.send (mhlo::SendOp)

Send operation

Sends inputs to a channel channel_id and produces a result token.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#send

مثال:

%result = "mhlo.send"(%operand, %token) {
  // channel_id = 5 : i64,
  // channel_type = #stablehlo<channel_type DEVICE_TO_HOST>,
  channel_handle = #mhlo.channel_handle<handle = 5, type = 2>,
  is_host_transfer = true
} : (tensor<3x4xi32>, !mhlo.token) -> !mhlo.token

Interfaces: InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
channel_handle ::mlir::mhlo::ChannelHandleAttr two 64-bit integers 'handle' and 'type'
is_host_transfer ::mlir::BoolAttr bool attribute

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های
token نشانه

نتایج:

نتیجه شرح
«unnamed» نشانه

mhlo.set_dimension_size (mhlo::SetDimensionSizeOp)

SetDimensionSize operation

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/8

Informally, this operation does the same thing as XLA's SetDimensionSize: https://www.tensorflow.org/xla/operation_semantics#setdimensionsize

مثال:

%0 = mhlo.set_dimension_size %arg0, %arg1, dim = 1 : (tensor<4x2xf32>, tensor<i32>) -> tensor<4x2xf32>

Traits: AlwaysSpeculatableImplTrait , InferTensorType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
dimension ::mlir::IntegerAttr 64-bit signless integer attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
size tensor of 32-bit signless integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.shift_left (mhlo::ShiftLeftOp)

ShiftLeft operation

نحو:

operation ::= `mhlo.shift_left` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise left-shift operation on the lhs tensor by rhs number of bits and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#shift_left

مثال:

%result = mhlo.shift_left %lhs, %rhs : tensor<6xi8>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
rhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

mhlo.shift_right_arithmetic (mhlo::ShiftRightArithmeticOp)

ShiftRightArithmetic operation

نحو:

operation ::= `mhlo.shift_right_arithmetic` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise arithmetic right-shift operation on the lhs tensor by rhs number of bits and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#shift_right_arithmetic

مثال:

%result = mhlo.shift_right_arithmetic %lhs, %rhs : tensor<6xi8>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
rhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

mhlo.shift_right_logical (mhlo::ShiftRightLogicalOp)

ShiftRightLogical operation

نحو:

operation ::= `mhlo.shift_right_logical` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise logical right-shift operation on the lhs tensor by rhs number of bits and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#shift_right_logical

مثال:

%result = mhlo.shift_right_logical %lhs, %rhs : tensor<6xi8>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
rhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

mhlo.sign (mhlo::SignOp)

Sign operation

نحو:

operation ::= `mhlo.sign` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Returns the sign of the operand element-wise and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#sign

مثال:

%result = mhlo.sign %operand : tensor<7xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of 4/8/16/32/64-bit signless integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.sine (mhlo::SineOp)

Sine operation

نحو:

operation ::= `mhlo.sine` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise sine operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#sine

مثال:

%result = mhlo.sine %operand : tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.slice (mhlo::SliceOp)

Slice operation

Extracts a slice from the operand using statically-computed starting indices and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#slice

مثال:

%result = "mhlo.slice" (%operand) {
  start_indices = dense<[1, 2]> : tensor<2xi64>,
  limit_indices = dense<[3, 4]> : tensor<2xi64>,
  strides = dense<1> : tensor<2xi64>
} : (tensor<3x4xi64>) -> tensor<2x2xi64>

Traits: AlwaysSpeculatableImplTrait , SameOperandsAndResultElementType

Interfaces: ConditionallySpeculatable , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
start_indices ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
limit_indices ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute
strides ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.sort (mhlo::SortOp)

Sort operation

Sorts a variadic number of tensors in inputs together, according to a custom comparator , along the given dimension and produces a variadic number of tensors as results .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#sort

مثال:

%result0, %result1 = "mhlo.sort"(%input0, %input1) ({
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>, %arg2: tensor<i32>, %arg3: tensor<i32>):
    %predicate = "mhlo.compare"(%arg0, %arg1) {
      comparison_direction = #stablehlo<comparison_direction GT>
      } : (tensor<i32>, tensor<i32>) -> tensor<i1>
    "mhlo.return"(%predicate) : (tensor<i1>) -> ()
}) {
  dimension = 0 : i64,
  is_stable = true
} : (tensor<2x3xi32>, tensor<2x3xi32>) -> (tensor<2x3xi32>, tensor<2x3xi32>)

Traits: InferTensorType , RecursiveMemoryEffects , SameOperandsAndResultShape

Interfaces: InferShapedTypeOpInterface , InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
dimension ::mlir::IntegerAttr 64-bit signless integer attribute
is_stable ::mlir::BoolAttr bool attribute

Operands:

عملوند شرح
inputs variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

نتایج:

نتیجه شرح
«unnamed» variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

mhlo.sparse_dot (mhlo::SparseDotOp)

Sparse dot operation

Similar to dot_general operation, with one or both of the operands being sparse. An additional argument provides sparsity meta information. Disclaimer: this op is experimental / a work in progress.

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
lhs_sparsity ::mlir::mhlo::SparsityDescriptorAttr Describes structured (N:M) sparsity configuration
rhs_sparsity ::mlir::mhlo::SparsityDescriptorAttr Describes structured (N:M) sparsity configuration
dot_dimension_numbers ::mlir::mhlo::DotDimensionNumbersAttr Attribute that models the dimension information for dot.
precision_config ::mlir::ArrayAttr Precision Config attribute

Operands:

عملوند شرح
lhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
meta variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4 /8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer ارزش های

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.sqrt (mhlo::SqrtOp)

Sqrt operation

نحو:

operation ::= `mhlo.sqrt` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise square root operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#sqrt

مثال:

%result = mhlo.sqrt %operand : tensor<2x2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.stochastic_convert (mhlo::StochasticConvertOp)

StochasticConvert operation

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/295

Informally, this operation performs element-wise conversion of values from a bigger type to a smaller one with stochastic rounding using the random number passed in.

Traits: AlwaysSpeculatableImplTrait , Elementwise

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values
random ranked tensor of 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.subtract (mhlo::SubtractOp)

Subtract operation

نحو:

operation ::= `mhlo.subtract` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise subtraction of two tensors lhs and rhs and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#subtract

مثال:

%result = mhlo.subtract %lhs, %rhs : tensor<2xi32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
rhs ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.tan (mhlo::TanOp)

Tan operation

نحو:

operation ::= `mhlo.tan` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

This operation is a work in progress, so it is not yet included in the specification: https://github.com/openxla/stablehlo/issues/954

Informally, this operation returns Tan(operand) element-wise.

مثال:

%0 = mhlo.tan %arg0 : tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values

mhlo.tanh (mhlo::TanhOp)

Tanh operation

نحو:

operation ::= `mhlo.tanh` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise hyperbolic tangent operation on operand tensor and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#tanh

مثال:

%result = mhlo.tanh %operand : tensor<2xf32>

Traits: AlwaysSpeculatableImplTrait , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values

mhlo.topk (mhlo::TopKOp)

TopK operation

نحو:

operation ::= `mhlo.topk` `(`$operand `,` `k` `=` $k (`,` `largest` `=` $largest^)? `)` attr-dict `:`
              type($operand) `->` `(`type($values)`,` type($indices)`)`

Returns top k values and their indices, along the last dimension of the operand if largest=true or the bottom k values if largest=false .

See: https://www.tensorflow.org/xla/operation_semantics#top-k

مثال:

%values, %indices = mhlo.topk(%operand, k=5, largest=true)
  : tensor<100xf32> -> (tensor<5xf32>, tensor<5xi32>)

Traits: InferTensorType , RecursiveMemoryEffects

Interfaces: InferShapedTypeOpInterface , InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
k ::mlir::IntegerAttr 64-bit signless integer attribute
largest ::mlir::BoolAttr bool attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
values ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
indices ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.torch_index_select (mhlo::TorchIndexSelectOp)

TorchIndexSelect operation

This operation is on its way out of StableHLO, so it is not included in the specification: https://github.com/openxla/stablehlo/issues/3

Informally, this operation does the same thing as PyTorch's index_select, augmented with support for batch dimensions: https://pytorch.org/docs/stable/generated/torch.index_select.html

The batch_dims attribute specifies the number of major batch dimensions (0 or more) that act like a multidimensional loop over both the operand and the index.

مثال:

%result = "mhlo.torch_index_select"(%operand, %index) {
  dim = 2 : i64,
  batch_dims = 1 : i64
} : (tensor<8x128x3072x64xf32>, tensor<8x16x1024xi32>) -> tensor<8x128x16x1024x64xf32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
dim ::mlir::IntegerAttr 64-bit signless integer attribute
batch_dims ::mlir::IntegerAttr 64-bit signless integer attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values
index ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.trace (mhlo::TraceOp)

Trace operation

نحو:

operation ::= `mhlo.trace` $operand `,` $tag attr-dict `:` type($operand)

This operation is on its way out of StableHLO, so it is not included in the specification: https://github.com/openxla/stablehlo/issues/604

It is not used by JAX, PyTorch or TensorFlow, so it looks like we should've classified it as "Private to XLA" and not included it in StableHLO in the first place. With that in mind, its semantics will not be documented here.

مثال:

mhlo.trace %arg0, "In test code." : tensor<5x1x5xi32>

ویژگی های:

صفت MLIR Type شرح
tag ::mlir::StringAttr string attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.transpose (mhlo::TransposeOp)

Transpose operation

Permutes the dimensions of operand tensor using permutation and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#transpose

مثال:

%0 = mhlo.transpose %arg0, dims = [2, 1, 0] : (tensor<1x2x3xi32>) -> tensor<3x2x1xi32>

Traits: AlwaysSpeculatableImplTrait , HLO_CompatibleOperandsAndResultElementType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
permutation ::mlir::DenseIntElementsAttr 64-bit signless integer elements attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.triangular_solve (mhlo::TriangularSolveOp)

TriangularSolve operation

Solves batches of systems of linear equations with lower or upper triangular coefficient matrices.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#triangular_solve

مثال:

%result = "mhlo.triangular_solve"(%a, %b) {
  left_side = true,
  lower = true,
  unit_diagonal = false,
  transpose_a = #stablehlo<transpose NO_TRANSPOSE>
} : (tensor<3x3xf32>, tensor<3x3xf32>) -> tensor<3x3xf32>

Traits: AlwaysSpeculatableImplTrait , InferTensorType , SameOperandsAndResultElementType

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
left_side ::mlir::BoolAttr bool attribute
lower ::mlir::BoolAttr bool attribute
unit_diagonal ::mlir::BoolAttr bool attribute
transpose_a ::mlir::mhlo::TransposeAttr Transpose options

Operands:

عملوند شرح
a ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values
b ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or complex type with 32-bit float or 64-bit float elements values

mhlo.tuple (mhlo::TupleOp)

Tuple operation

نحو:

operation ::= `mhlo.tuple` $val attr-dict `:` custom<TupleOpType>(type($val), type($result))

Produces a result tuple from values val .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#tuple

مثال:

%result = mhlo.tuple %val0, %val1 : tuple<tensor<2xf32>, tuple<tensor<i32>>>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
val variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token or nested tuple with any combination of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

نتایج:

نتیجه شرح
result nested tuple with any combination of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token values

mhlo.unary_einsum (mhlo::UnaryEinsumOp)

UnaryEinsum operation

This operation is on its way out of StableHLO, so it is not included in the specification: https://github.com/openxla/stablehlo/issues/3

Informally, this operation does the same thing as TF's einsum: https://www.tensorflow.org/api_docs/python/tf/einsum

مثال:

%result = "mhlo.unary_einsum"(%operand) {
  einsum_config = "ab->a"
} : (tensor<4x16xf32>) -> tensor<4xf32>

Traits: AlwaysSpeculatableImplTrait

Interfaces: ConditionallySpeculatable , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

ویژگی های:

صفت MLIR Type شرح
einsum_config ::mlir::StringAttr string attribute

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
«unnamed» ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.uniform_dequantize (mhlo::UniformDequantizeOp)

UniformDequantize operation

نحو:

operation ::= `mhlo.uniform_dequantize` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise conversion of quantized tensor operand to a floating-point tensor result according to the quantization parameters defined by the operand type.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#uniform_dequantize

مثال:

%result = mhlo.uniform_dequantize %operand : (tensor<16x16x!quant.uniform<i8:f32, 34.0:16>>) -> tensor<16x16xf32>

Traits: AlwaysSpeculatableImplTrait , Elementwise , InferTensorType , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type values

mhlo.uniform_quantize (mhlo::UniformQuantizeOp)

UniformQuantize operation

نحو:

operation ::= `mhlo.uniform_quantize` $operand attr-dict
              `:` custom<SameOperandsAndResultType>(type($operand), type($result))

Performs element-wise conversion of floating-point tensor or quantized tensor operand to a quantized tensor result according to the quantization parameters defined by the result type.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#uniform_quantize

مثال:

%result = mhlo.uniform_quantize %operand : (tensor<16x16xf32>) -> tensor<16x16x!quant.uniform<ui8:f32, 34.0:16>>

Traits: AlwaysSpeculatableImplTrait , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
operand ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

mhlo.while (mhlo::WhileOp)

While operation

Produces the output from executing body function 0 or more times while the cond function outputs true .

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#while

مثال:

%results0, %results1 = "mhlo.while"(%operand0, %operand1) ({
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = "mhlo.compare"(%arg0, %arg1) {
      comparison_direction = #stablehlo<comparison_direction LT>
    } : (tensor<i32>, tensor<i32>) -> tensor<i1>
    "mhlo.return"(%0) : (tensor<i1>) -> ()
}, {
  ^bb0(%arg0: tensor<i32>, %arg1: tensor<i32>):
    %0 = "mhlo.add"(%arg0, %constant0) : (tensor<i32>, tensor<i32>) -> tensor<i32>
    "mhlo.return"(%0, %arg1) : (tensor<i32>, tensor<i32>) -> ()
}) : (tensor<i32>, tensor<i32>) -> (tensor<i32>, tensor<i32>)

Traits: RecursiveMemoryEffects , SingleBlockImplicitTerminator<ReturnOp> , SingleBlock

Interfaces: InferTypeOpInterface , OpAsmOpInterface

Operands:

عملوند شرح
operand variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

نتایج:

نتیجه شرح
«unnamed» variadic of ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer values or ranked tensor of 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values or token

mhlo.xla.rng_get_and_update_state (mhlo::XlaRngGetAndUpdateStateOp)

XlaRngGetAndUpdateState operation

نحو:

operation ::= `mhlo.xla.rng_get_and_update_state` attr-dict

This operation is private to the XLA compiler, so it is does not yet have a specification.

Informally, this operation represents the change of the global random number generator state for rng instructions. The global state is incremented by delta and the old state is returned.

The output is currently defined for a single output type. If this changes in the future to support multiple types, lowering to use of a global memref must ensure that a single memref is still used and updated appropriately.

Interfaces: InferTypeOpInterface

ویژگی های:

صفت MLIR Type شرح
delta ::mlir::IntegerAttr 64-bit signless integer attribute

نتایج:

نتیجه شرح
«unnamed» statically shaped tensor of 64-bit unsigned integer values

mhlo.xor (mhlo::XorOp)

Xor operation

نحو:

operation ::= `mhlo.xor` $lhs `,` $rhs attr-dict
              `:` custom<SameOperandsAndResultType>(type($lhs), type($rhs), type($result))

Performs element-wise XOR of two tensors lhs and rhs and produces a result tensor.

See: https://github.com/openxla/stablehlo/blob/main/docs/spec.md#xor

مثال:

%result = mhlo.xor %lhs, %rhs : tensor<2xi32>

Traits: AlwaysSpeculatableImplTrait , Commutative , CompatibleOperandsAndResultType , Elementwise , SameOperandsAndResultShape

Interfaces: ConditionallySpeculatable , InferShapedTypeOpInterface , InferTypeOpInterface , NoMemoryEffect (MemoryEffectOpInterface)

Effects: MemoryEffects::Effect{}

Operands:

عملوند شرح
lhs ranked tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values
rhs ranked tensor of pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer values

نتایج:

نتیجه شرح
result ranked tensor of f8E4M3B11FNUZ type or f8E4M3FN type or f8E4M3FNUZ type or f8E5M2 type or f8E5M2FNUZ type or 16-bit float or 32-bit float or 64-bit float or bfloat16 type or pred (AKA boolean or 1-bit integer) or 4/8/16/32/64-bit signless integer or 4/8/16/32/64-bit unsigned integer or complex type with 32-bit float or 64-bit float elements or 4/8/16/32-bit uniform quantized signed integer or 4/8/16/32-bit uniform quantized unsigned integer or 4/8/16/32-bit uniform quantized per axis signed integer or 4/8/16/32-bit uniform quantized per axis unsigned integer values

ویژگی های

ArgResultAliasAttr

Attribute that models the alias relationship of entry function argument

This attribute captures the alias relationship of an MHLO main function argument to one of the results, denoted by resultIndex . The argTupleIndices and resultTupleIndices are used to index into nested tuples in operand and result respectively. If isMustAlias is true then the operand-result pair must alias.

This is meant to be used as an attribute on a function argument in MHLO. For example, in the following code it expresses that %arg1 may alias 0-th result.

func @main(%arg0: tensor<2xf32>, %arg1: tensor<3xf32> {mhlo.result_alias =
    mhlo.result_alias<result_index = [2], ...>}
  ) -> tensor<2xf32>, tensor<3xf32> {
  // function body ...
}

مولفه های:

پارامتر C++ type شرح
argTupleIndices ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
resultIndex int64_t
resultTupleIndices ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
isMustAlias bool

ChannelHandleAttr

two 64-bit integers 'handle' and 'type'

نحو:

#mhlo.channel_handle<
  int64_t,   # handle
  int64_t   # type
>

مولفه های:

پارامتر C++ type شرح
رسیدگی int64_t
نوع int64_t

ComparisonDirectionAttr

Which comparison operation to perform.

نحو:

#mhlo.comparison_direction<
  ::mlir::mhlo::ComparisonDirection   # value
>

Enum cases:

  • EQ ( EQ )
  • NE ( NE )
  • GE ( GE )
  • GT ( GT )
  • LE ( LE )
  • LT ( LT ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::ComparisonDirection an enum of type ComparisonDirection

ComparisonTypeAttr

Which comparison type to use.

نحو:

#mhlo.comparison_type<
  ::mlir::mhlo::ComparisonType   # value
>

Enum cases:

  • NOTYPE ( NOTYPE )
  • FLOAT ( FLOAT )
  • TOTALORDER ( TOTALORDER )
  • SIGNED ( SIGNED )
  • UNSIGNED ( UNSIGNED ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::ComparisonType an enum of type ComparisonType

ConvDimensionNumbersAttr

Structure of dimension information for conv op

مولفه های:

پارامتر C++ type شرح
inputBatchDimension int64_t
inputFeatureDimension int64_t
inputSpatialDimensions ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
kernelInputFeatureDimension int64_t
kernelOutputFeatureDimension int64_t
kernelSpatialDimensions ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
outputBatchDimension int64_t
outputFeatureDimension int64_t
outputSpatialDimensions ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه

CrossProgramPrefetchAttr

Argument that is prefetched from another program

نحو:

#mhlo.cross_program_prefetch<
  int64_t,   # parameter
  ::llvm::ArrayRef<int64_t>,   # indices
  std::optional<int64_t>   # offset
>

This attribute captures an argument that is prefetched from another program. For a given CrossProgramPrefetchAttr , parameter tells us which argument of the main function of the module is prefetched, and indices is a shape index telling us what subshape of that argument is prefetched.

A shape has a subshape iff it is a tuple. In that case, the subshape of the tuple by indices is the shape achieved after indexing by each element of indices in turn. For example, the [1,0] subshape of tuple<tuple<token, token>, tuple<tensor<i32>, token>> is tensor<i32> .

An empty value for indices means the whole shape is prefetched.

مثلا،

module attributes { mhlo.cross_program_prefetch = [ #mhlo.cross_program_prefetch< parameter = 0, indices = [0]> ]} {
  func.func @copy(%arg0 : tuple<tensor<2x3xi32>, tensor<i32>>) -> tuple<tensor<2x3xi32>, tensor<i32>> {
    %0 = "mhlo.copy"(%arg0) {is_cross_program_prefetch}
    return %0 : tuple<tensor<2x3xi32>, tensor<i32>>
  }
  func.func @main(%arg0 : tuple<tensor<2x3xi32>, tensor<i32>>) -> tuple<tensor<2x3xi32>, tensor<i32>> {
    %1 = "mhlo.async_start"(%arg0) {called_computation=@copy}
    %2 = "mhlo.async_done"(%1) {called_computation=@copy}
    return %2 : tuple<tensor<2x3xi32>, tensor<i32>>
  }
}

The parameter = 0 tells us that the async copy of the 0 th parameter is a cross_program_prefetch , while the index of [0] tells us that the 0 th element of the tuple is prefetched while the other element of the tuple is not.

مولفه های:

پارامتر C++ type شرح
پارامتر int64_t
شاخص ها ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
انحراف std::optional<int64_t>

CustomCallScheduleAttr

Specifies the desired schedule for the custom-call.

نحو:

#mhlo.custom_call_schedule<
  ::mlir::mhlo::CustomCallSchedule   # value
>

Enum cases:

  • NONE ( NONE )
  • LATEST ( LATEST )
  • EARLIEST ( EARLIEST ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::CustomCallSchedule an enum of type CustomCallSchedule

DequantizeModeAttr

Dequantization mode. Only MIN_COMBINED is supported.

نحو:

#mhlo.dequantize_mode<
  ::mlir::mhlo::DequantizeMode   # value
>

Enum cases:

  • MIN_COMBINED ( MIN_COMBINED ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::DequantizeMode an enum of type DequantizeMode

DomainKindAttr

Kind of domain metatdata attached to an HLO domain.

نحو:

#mhlo.kind<
  ::mlir::mhlo::DomainKind   # value
>

Enum cases:

  • sharding ( sharding ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::DomainKind an enum of type DomainKind

DotDimensionNumbersAttr

Attribute that models the dimension information for dot.

مولفه های:

پارامتر C++ type شرح
lhsBatchingDimensions ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
rhsBatchingDimensions ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
lhsContractingDimensions ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
rhsContractingDimensions ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه

FftTypeAttr

XLA fast fourier transform type.

نحو:

#mhlo.fft_type<
  ::mlir::mhlo::FftType   # value
>

Enum cases:

  • FFT ( FFT )
  • IFFT ( IFFT )
  • RFFT ( RFFT )
  • IRFFT ( IRFFT ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::FftType an enum of type FftType

FusionKindAttr

fusion kind

نحو:

#mhlo.fusion_kind<
  ::mlir::mhlo::FusionKind   # value
>

Enum cases:

  • kLoop ( kLoop )
  • kInput ( kInput )
  • kOutput ( kOutput )
  • kCustom ( kCustom ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::FusionKind an enum of type FusionKind

GatherDimensionNumbersAttr

Attribute that models the dimension information for gather

مولفه های:

پارامتر C++ type شرح
offsetDims ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
collapsedSliceDims ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
startIndexMap ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
indexVectorDim int64_t

OutputOperandAliasAttr

Attribute that models the alias relationship of output and operand of a CustomCall op

نحو:

#mhlo.output_operand_alias<
  ::llvm::ArrayRef<int64_t>,   # outputTupleIndices
  int64_t,   # operandIndex
  ::llvm::ArrayRef<int64_t>   # operandTupleIndices
>

This attribute captures the alias relationship of the output to one of the operands for a CustomCall op, denoted by operand_index . The output_tuple_indices and operand_tuple_indices are used to index into output and operand types. These indices lists are empty if the corresponding types are not tuple types, and can be arbitrarily long in case of arbitrarily nested tuple types.

See https://www.tensorflow.org/xla/aliasing

Example when used as array with in mhlo.custom-call:

%0 = "mhlo.custom_call"(%arg0, %arg1) {
  // other attributes
  output_operand_alias = [
    #mhlo.output_operand_alias<output_tuple_indices = [0],
                               operand_index = 0,
                               operand_tuple_indices = [1]>
  ]
} : (tuple<tensor<1x1xf32>, tensor<2x3xf32>>, tensor<5x5xf32>) -> tuple<tensor<2x3xf32>>

The output and the 0th operand are both tuples. The aliasing shows the
relationship between the 0th element in output tuple with the 1st element in
the 0th operand. And both of them are of the same type: tensor<2x3xf32>.

مولفه های:

پارامتر C++ type شرح
outputTupleIndices ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
operandIndex int64_t
operandTupleIndices ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه

PrecisionAttr

XLA precision for an operand. Has backend specific meaning.

نحو:

#mhlo.precision<
  ::mlir::mhlo::Precision   # value
>

Enum cases:

  • DEFAULT ( DEFAULT )
  • HIGH ( HIGH )
  • HIGHEST ( HIGHEST )
  • PACKED_NIBBLE ( PACKED_NIBBLE ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::Precision an enum of type Precision

RngAlgorithmAttr

XLA PRNG algorithm to be used.

نحو:

#mhlo.rng_algorithm<
  ::mlir::mhlo::RngAlgorithm   # value
>

Enum cases:

  • DEFAULT ( DEFAULT )
  • THREE_FRY ( THREE_FRY )
  • PHILOX ( PHILOX ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::RngAlgorithm an enum of type RngAlgorithm

RngDistributionAttr

XLA PRNG distribution to be used.

نحو:

#mhlo.rng_distribution<
  ::mlir::mhlo::RngDistribution   # value
>

Enum cases:

  • UNIFORM ( UNIFORM )
  • NORMAL ( NORMAL ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::RngDistribution an enum of type RngDistribution

ScatterDimensionNumbersAttr

Attribute that models the dimension information for scatter

مولفه های:

پارامتر C++ type شرح
updateWindowDims ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
insertedWindowDims ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
scatterDimsToOperandDims ::llvm::ArrayRef<int64_t> بعد، ابعاد، اندازه
indexVectorDim int64_t

SparsityDescriptorAttr

Describes structured (N:M) sparsity configuration

نحو:

#mhlo.sparsity<
  int64_t,   # dimension
  int64_t,   # n
  int64_t   # m
>

This attribute is defined for a sparse dot operation with a structured sparse input tensor. With (N=2,M=4), every 4 consecutive logical elements have exactly 2 non-zero physical elements in the input tensor.

$dimension defines the index of the contracting dimension that is sparse (it has to be the most minor dimension). The additional metadata operand in the sparse dot operation defines which logical elements are zeroed out.

مولفه های:

پارامتر C++ type شرح
بعد، ابعاد، اندازه int64_t
n int64_t
متر int64_t

TransposeAttr

Transpose options

نحو:

#mhlo.transpose<
  ::mlir::mhlo::Transpose   # value
>

Enum cases:

  • TRANSPOSE_INVALID ( TRANSPOSE_INVALID )
  • NO_TRANSPOSE ( NO_TRANSPOSE )
  • TRANSPOSE ( TRANSPOSE )
  • ADJOINT ( ADJOINT ) #### Parameters:
پارامتر C++ type شرح
ارزش ::mlir::mhlo::Transpose an enum of type Transpose

TypeExtensionsAttr

Attribute that extends tensor type with MHLO type properties.

نحو:

#mhlo.type_extensions<
  ::llvm::ArrayRef<int64_t>   # bounds
>

This attribute is used to extend MLIR tensor type with MHLO tensor specific properties. These properties aren't modeled in the MLIR type. This attribute is set in the encoding field of the tensor type.

See HLO_BoundedAttrInterface for documentation for bounds .

مولفه های:

پارامتر C++ type شرح
محدوده ::llvm::ArrayRef<int64_t>

انواع

AsyncBundleType

Opaque collection of other types

نحو:

!mhlo.async_bundle<
  ::llvm::ArrayRef<Type>   # types
>

مولفه های:

پارامتر C++ type شرح
انواع ::llvm::ArrayRef<Type>