الروبوتات2017متوسط9 دقيقة قراءة

التعشير النطاقي لنقل الشبكات العصبية العميقة من المحاكاة إلى العالم الحقيقي

Domain Randomization for Transferring Deep Neural Networks from Simulation to the Real World

Tobin, J. · Fong, R. · Ray, A. · Schneider, J. · Zaremba, W. · Abbeel, P. — IROS

المشكلة

التعلُّم المعزَّز العميق يحتاج ملايين العيّنات، لكنّ جمع هذه البيانات من روبوتات حقيقية بطيء ومُكلف وفيه مخاطرة. المحاكيات الفيزيائية توفّر بيانات بلا حدود، إلا أنّ النماذج التي تتدرّب على صور المحاكاة تفشل حين تنتقل للواقع، لأنّ ما يراه المحاكي — من أنسجة وإضاءة وانعكاسات — لا يُشبه ما تراه الكاميرا الحقيقية. هذا الفارق هو ما يُسمّى «»، ومحاولة سدّها بضبط المحاكي يدوياً عملية شاقّة وهشّة.

الإسهام

التعشير النطاقي: بدلاً من محاولة جعل المحاكي واقعياً، اجعله يبدو مختلفاً جذرياً في كل إطار — أنسجة عشوائية، إضاءة عشوائية، أوضاع كاميرا عشوائية، أجسام مُشتِّتة عشوائية. يرى كمّاً هائلاً من التنوّع البصري حتى يغدو العالم الحقيقي مجرد عيّنة إضافية ضمن ما رآه. الكاشف المُدرَّب حصرياً على صور محاكاة غير واقعية بصيغة RGB حدّد مواقع الأجسام بدقة 1.5 سم في الواقع ومكّن الروبوت من الالتقاط وسط بيئة مزدحمة — وكان هذا أول نقل ناجح لشبكة عصبية عميقة من المحاكاة إلى الواقع دون أي مسبق على صور حقيقية.

الأثر

صار التعشير النطاقي تقنيةً تأسيسيةً في مجال ، ومهّد مباشرةً لنتائج محورية مثل «تعلُّم البراعة» من OpenAI عام 2018 حيث تعلّمت يد روبوتية حلّ مكعّب روبيك بالكامل داخل المحاكاة. فكرة أنّ «التنوّع الكافي في المحاكاة يجعل الواقع مجرد شكل آخر» غيّرت وجهة المجال من السعي وراء الواقعية البصرية إلى تبنّي العشوائية، فنتج عنها التعشير النطاقي المُهيكَل وضبطه الآلي وأنظمة النقل المُستخدَمة اليوم في الروبوتات والقيادة الذاتية والفحص الصناعي.

تخيّل أنك تُعلِّم طفلةً التعرّف على التفاح. لو عرضت عليها صورة استوديو واحدة مثالية، ستفشل في اللحظة التي تتغيّر فيها الإضاءة. التعشير النطاقي يعكس الفكرة تماماً: أرِها التفاح في كل ظرف غريب يمكن تخيُّله — إضاءة نيون، مفارش منقّطة، كاميرا مائلة — إلى أن يصبح العالم الحقيقي مملاً بالمقارنة.

روبوت يتدرّب بالأسلوب نفسه داخل المحاكاة يرى من الأنسجة والزوايا الغريبة ما يكفي لجعل مطبخ حقيقي مجرد مشهد عادي لا يستحقّ الدهشة.

فجوة الواقعية: لماذا تفشل المحاكاة حين تُنقل مباشرةً

محاكيات الفيزياء مثل MuJoCo توفّر بيانات تدريب غير محدودة وموسومة بدقة تامّة. يستطيع الروبوت أن يسقط ألف مرة دون أن ينكسر شيء. لكنّ المشكلة أنّ الصور التي يولّدها المحاكي لا تشبه ما تلتقطه كاميرا حقيقية: الأنسجة نظيفة أكثر من اللازم، والإضاءة موحّدة بإفراط، والانعكاسات والظلال تسلك سلوكاً مختلفاً. هذا الفارق البصري — أي فجوة الواقعية — يعني أنّ تعمل بإتقان في المحاكاة قد تعجز تماماً حين تواجه صوراً حقيقية.

قبل هذه الورقة، جرّب الباحثون مسارين لسدّ هذه الفجوة. المسار الأول هو : تعديل كل في المحاكي يدوياً — الاحتكاك، الكتلة، الانعكاسية، تشوّه العدسة — ليُطابق الإعداد الفعلي. هذا النهج بطيء وهشّ ولا يكتمل أبداً، لأنّ الواقع مليء بتأثيرات لا يستطيع أي محاكٍ تمثيلها: مرونة الكابلات، تراكم الغبار، التآكل. المسار الثاني هو تكييف النطاق: جمع بعض البيانات الحقيقية ثم تعديل النموذج أو للتقريب بين . لكنّ هذا يحتاج بيانات واقعية، وهو بالضبط ما أردنا الاستغناء عنه.

افتح في المختبر
يساراً: مشهد محاكاة غير واقعي من MuJoCo. يميناً: ما تلتقطه الكاميرا الحقيقية. على الشبكة أن تعبر هذه الهُوّة البصرية.
تستيقظ التجربة عند وصولك…

البصيرة الجوهرية: اجعل الواقع يبدو مملاً

الفكرة بسيطة بشكل لافت: لا تحاول جعل المحاكي واقعياً — اجعله متنوّعاً بشكل يفوق الواقع. فكّر في الأمر هكذا: إذا درّبت النموذج على فوضى بصرية كافية — أرضيات وردية صارخة، سماء بنمط رقعة الشطرنج، أضواء كاشفة من كل اتجاه — فإنّ العالم الحقيقي بإضاءة مكتبه الرتيبة وفيزيائه المنتظمة يغدو مجرد عيّنة عادية من توزيع أتقنه النموذج بالفعل.

على المستوى العملي، كل صورة تدريب تُولَّد بسحبة عشوائية جديدة من محاور التنويع التالية:

  • الأنسجة لجميع الأسطح — الطاولة، الأرضية، صندوق السماء، الروبوت، والأجسام — تُختار من قيم RGB عشوائية أو تدرّجات لونية أو أنماط رقعة شطرنج عشوائية
  • الإضاءة — العدد والموضع والاتجاه والخصائص الانعكاسية لكل مصدر ضوء
  • الكاميرا — يُزاح موضعها عشوائياً ضمن صندوق 10×5×10 سم، ويُمال اتجاهها حتى 0.1 راديان، ويتغيّر مجال الرؤية بنسبة تصل إلى 5%
  • المُشتِّتات — من 0 إلى 10 أجسام هندسية عشوائية تُبعثر على الطاولة
  • — تشويش بكسلي عشوائي يُضاف إلى الصور المُولَّدة
افتح في المختبر
اضغط "عشوائي!" لتوليد مشهد عشوائي جديد. كل ضغطة تغيّر الأنسجة والإضاءة وزاوية الكاميرا والمُشتِّتات — بينما يبقى الجسم نفسه.
تستيقظ التجربة عند وصولك…

المهمة: أين يقع الجسم؟

تركّز الورقة على : المطلوب هو أخذ صورة واحدة من كاميرا أحادية العين والتنبّؤ بالإحداثيات الديكارتية الثلاثية (x,y,z)(x, y, z) لجسم مستهدف موضوع على طاولة. هذه خطوة تمهيدية نحو التلاعب الروبوتي العام — لأنّ الروبوت يحتاج أن يعرف أين يقع الشيء قبل أن يلتقطه.

الكاشف عبارة عن من طراز VGG-16 مُعدَّلة. القياسية تستخلص السمات البصرية كالمعتاد، لكنّ أصغر حجماً (256 و64 عقدة بدلاً من 4096) لأنّ المخرج ثلاثة أرقام فقط هي الإحداثيات. لم يُستخدَم . تُدرَّب الشبكة على تصغير مسافة L2 بين المواقع المتنبَّأ بها والمواقع الحقيقية باستخدام بـ قدره 10410^{-4}.

افتح في المختبر
بنية VGG-16 المعدّلة. انقر على أي مجموعة طبقات لترى دورها. المدخل صورة 224×224 والمُخرَج موضع (x, y, z).
تستيقظ التجربة عند وصولك…
L=p^p22=(x^x)2+(y^y)2+(z^z)2\mathcal{L} = \| \hat{p} - p \|_2^2 = (\hat{x} - x)^2 + (\hat{y} - y)^2 + (\hat{z} - z)^2
خسارة L2 — هدف التدريبتُصغِّر الشبكة مربّع المسافة الإقليدية بين الموقع المتنبَّأ به p̂ والموقع الحقيقي p. كل خطأ في إحداثي يُعاقَب بالتساوي.

تشريح التعشير: ماذا يتغيّر ولماذا

ليست كل محاور التعشير متساوية في الأهمية. دراسة الاجتزاء تكشف ترتيباً واضحاً:

  • تنوّع الأنسجة هو العامل الحاسم. حين يقلّ عدد الأنسجة الفريدة عن 1,000، يتراجع أداء النقل بحدّة. في المقابل، مع أنسجة كافية حتى 1,000 صورة فقط تستطيع مجاراة أداء 10,000 صورة ذات أنسجة أقلّ. وفي ظروف شُحّ البيانات، أهمّ من تعشير مواضع الأجسام.
  • المُشتِّتات ضرورية لتحقيق المتانة. بدون أجسام مُشتِّتة أثناء التدريب، يعمل الكاشف جيداً على أجسام منفردة (خطأ 1.5 سم) لكنه ينهار في البيئة المزدحمة (خطأ 7.2 سم — تدهور بمقدار 5 أضعاف).
  • تعشير الكاميرا مفيد لكنّه ليس جوهرياً. إزاحة موضع الكاميرا ومجال الرؤية عشوائياً تعطي تحسيناً ثابتاً (نحو 0.7 سم)، لكنّ النظام يعمل بشكل معقول بدونها.
  • أثر الضوضاء مهمَل على الدقة النهائية، وإن كانت تساعد في استقرار التدريب عبر تسهيل الإفلات من .
افتح في المختبر
فعّل أو عطّل كل محور تعشير لترى أثره على خطأ الكشف في العالم الحقيقي. لاحظ كيف أنّ إزالة الأنسجة أو المُشتِّتات تُحدث أكبر القفزات.
تستيقظ التجربة عند وصولك…

النتائج: دقة 1.5 سم من صور مُصطنَعة

اختُبرت الكواشف على 480 صورة حقيقية من كاميرا ويب لثمانية أجسام هندسية (مخروط، مكعّب، أسطوانة، منشور سداسي، هرم، منشور مستطيل، رباعي أوجه، ومنشور ثلاثي) على مسافات تتراوح بين 70 و105 سم من الكاميرا. جرى الاختبار في ثلاثة أوضاع: الجسم وحده، الجسم مع مُشتِّتات، والجسم محجوب جزئياً.

متوسط خطأ تحديد الموقع بلغ نحو 1.5 سم عبر جميع الأوضاع — وهو أداء يُضاهي أنظمة تقدير الوضعية التقليدية التي تعتمد صوراً بدقة أعلى ومطابقة سمات مصمَّمة يدوياً. وحافظ النظام على هذه الدقة حتى مع ازدحام كبير وحجب جزئي.

من النتائج المفاجئة أنّ على ImageNet لم يكن ضرورياً. مع بيانات محاكاة كافية (أكثر من 50,000 صورة)، الشبكات التي تدرّبت من الصفر جارت أو تفوّقت على الشبكات المُهيَّأة بـأوزان ImageNet. التدريب المسبق ساعد بالدرجة الأولى حين كانت البيانات شحيحة (أقلّ من 10,000 صورة).

افتح في المختبر
خطأ الكشف (سم) لكل جسم عبر الأوضاع الثلاثة. مرّر فوق العمود لترى القيمة الدقيقة والانحراف المعياري.
تستيقظ التجربة عند وصولك…

لإثبات أنّ الكواشف دقيقة بما يكفي للعمل الحقيقي، نشرها الفريق على روبوت Fetch. باستخدام المواقع المتنبَّأ بها وبرنامج تخطيط حركة جاهز، نجح الروبوت في التقاط الجسم المستهدف في 38 محاولة من أصل 40 — بما في ذلك مشاهد شديدة الازدحام كان فيها الهدف مخفياً جزئياً. اعتمد الكاشف على الشكل والحجم فقط دون أي معلومة لونية، وتعامل بنجاح مع مُشتِّتات جديدة لم يصادفها قطّ أثناء التدريب.

كم من البيانات يكفي؟

تقدّم الورقة تحليلاً مفصَّلاً لأثر حجم البيانات. مع أوزان مدرَّبة مسبقاً، يبدأ أداء الكشف بالتحسّن الملحوظ عند نحو 5,000 صورة ويصل إلى مرحلة التشبُّع قرب 50,000. بدون تدريب مسبق (تهيئة عشوائية)، تحتاج الشبكة مزيداً من البيانات للّحاق لكنّها تبلغ في النهاية مستوى الأداء نفسه.

التفاعل بين تنوّع الأنسجة وحجم البيانات لافت بشكل خاص: عند 10,000 صورة، استخدام 100 نسيج فريد فقط يُعطي نتائج ضعيفة، لكنّ استخدام 1,000 نسيج أو أكثر يرفع الأداء إلى مستوى قريب من النظام الكامل. الدرس هنا أنّ الشبكة تحتاج أن ترى مظاهر بصرية كثيرة ومتمايزة لكل تكوين مكاني، وليس مجرد تكوينات مكانية كثيرة بالمظاهر القليلة ذاتها.

افتح في المختبر
اسحب المنزلقين لاستكشاف كيف يؤثّر عدد صور التدريب وعدد الأنسجة الفريدة على خطأ الكشف في العالم الحقيقي.
تستيقظ التجربة عند وصولك…

الفكرة ذاتها في شيفرة برمجية

التعشير النطاقي — عيّنات الأنسجة والكاميراpython

مبسَّط لإظهار الفكرة — ليس التنفيذ الحقيقي.

import numpy as np

def random_texture():
    """وَلِّد نسيجاً عشوائياً: لون موحّد أو تدرّج أو رقعة شطرنج."""
    kind = np.random.choice(['solid', 'gradient', 'checker'])
    c1 = np.random.randint(0, 256, 3)  # لون RGB عشوائي
    c2 = np.random.randint(0, 256, 3)
    if kind == 'solid':
        return {'type': 'solid', 'color': c1}
    elif kind == 'gradient':
        return {'type': 'gradient', 'start': c1, 'end': c2}
    else:
        return {'type': 'checker', 'color_a': c1, 'color_b': c2}

def random_camera(base_pos, base_fov):
    """أزِح موضع الكاميرا واتجاهها ومجال رؤيتها عشوائياً."""
    pos = base_pos + np.random.uniform(
        [-0.05, -0.025, -0.05],   # صندوق 10×5×10 سم
        [ 0.05,  0.025,  0.05]
    )
    angle_offset = np.random.uniform(-0.1, 0.1, 3)  # حتى 0.1 راديان
    fov = base_fov * np.random.uniform(0.95, 1.05)   # ±5%
    return pos, angle_offset, fov

def generate_scene(n_distractors_max=10):
    """أنشئ عيّنة تدريب عشوائية واحدة."""
    scene = {
        'table_texture': random_texture(),
        'floor_texture': random_texture(),
        'sky_texture':   random_texture(),
        'robot_texture': random_texture(),
        'target_pos':    np.random.uniform(table_bounds),
        'distractors':   [],
    }
    n = np.random.randint(0, n_distractors_max + 1)
    for _ in range(n):
        scene['distractors'].append({
            'shape': np.random.choice(shapes),
            'pos':   np.random.uniform(table_bounds),
            'texture': random_texture(),
        })
    return scene
# حلقة التدريب: ارسم(أنشئ_مشهداً())، وسِم → انحدار تدريجي على خسارة L2

لماذا أحدثت فارقاً

  1. 2017

    التعشير النطاقي (هذه الورقة)

    أول نقل ناجح من المحاكاة إلى الواقع باستخدام صور RGB اصطناعية غير واقعية فقط. تحديد موقع الأجسام بدقة 1.5 سم والتقاط في بيئة مزدحمة.

  2. 2018

    التعشير النطاقي المُهيكَل

    وسّع ترمبلي وزملاؤه الفكرة بإضافة تعشير واعٍ بالسياق — توضع الأجسام في مواقع منطقية دلالياً، ممّا حسّن معايير الكشف.

  3. 2018

    نقل المحاكاة للواقع بتعشير الديناميكا

    وسّع بنغ وزملاؤه التعشير ليشمل معاملات الفيزياء — الكتلة والاحتكاك وزمن الاستجابة — ممّا أتاح نقل سياسات الحركة.

  4. 2019

    تعلّم البراعة (OpenAI)

    يد روبوتية تحلّ مكعّب روبيك بسياسات دُرِّبت بالكامل داخل المحاكاة مع تعشير نطاقي مكثّف. نتيجة محورية في النقل من المحاكاة إلى الواقع.

  5. 2020

    التعشير النطاقي الآلي (ADR)

    أتمتت OpenAI ضبط معاملات التعشير — نطاقاته تتوسّع تلقائياً كلما تحسّنت السياسة، فتُغلَق الحلقة دون تدخُّل بشري.

ما أثبتته هذه الورقة هو أنّ الانتقال من المحاكاة إلى الواقع لا يستلزم جعل المحاكي يبدو واقعياً — بل يستلزم جعل النموذج قادراً على التعامل مع أي تنوّع بصري. هذه الرؤية غيّرت مسار بحوث السياسات الحركية البصرية ومهّدت مباشرةً لإنجازات التلاعب البارع التي تلتها.

المرجعTobin, Fong, Ray, Schneider, Zaremba, Abbeel. Domain Randomization for Transferring Deep Neural Networks from Simulation to the Real World. IROS, 2017.

مصطلحات هذه الورقة