تقسيم الاستعلامات

استراتيجية توزيع العمل في FlashAttention-2 حيث تُقسَّم مصفوفة الاستعلامات على الأشرطة بينما تبقى المفاتيح والقيم مشتركة، فيملك كل شريط صفوف مخرجه الخاصة دون حاجة للتزامن.

A work partitioning strategy in FlashAttention-2 where the query matrix is split across warps while keys and values remain shared, so each warp owns its output rows with no synchronization needed.