Transform Gate

مكوّن في طبقة الطريق السريع يُخرج قيمة بين 0 و1 لكل بُعد عبر دالة سيغمويد، ويُقرّر كم من ناتج التحويل H(x) يمرّ إلى خرج الطبقة. عندما تكون قيمتها 1 تعمل الطبقة كطبقة تقليدية، وعندما تكون 0 يمرّ المدخل دون تغيير.

A component in a highway layer that outputs a value between 0 and 1 for each dimension via a sigmoid function, deciding how much of the transformation H(x) passes to the layer output. At 1 the layer acts as a plain layer; at 0 the input passes through unchanged.