Deep RNN

بنية للشبكات التكرارية تتكوّن من عدة طبقات RNN مكدّسة فوق بعضها، بحيث يُمرَّر خرج كل طبقة إلى الطبقة التالية في كل خطوة زمنية. يزيد هذا العمق من قدرة النموذج على تمثيل الأنماط المعقدة، لكنه يجعل تدريب الشبكة أكثر عرضة لمشكلتي تلاشي التدرّج وانفجاره.

A recurrent neural network architecture composed of multiple RNN layers stacked on top of each other, where the output of each layer is fed to the next layer at every time step. This added depth increases representational power but can exacerbate vanishing and exploding gradient problems during training.