النقطة الحمراء في الزاوية العليا اليسرى روبوت لا يعرف شيئًا. يستطيع التحرك إلى الأعلى أو الأسفل أو اليمين أو اليسار، لكنه لا يعرف مكان الهدف ولا يعرف أن الحفر خطرة. عليه أن يكتشف ذلك بنفسه، بتجربة الحركات وتذكُّر ما حدث بعدها.
الوصول إلى الهدف الأخضر يمنحه +10 نقاط، والسقوط في حفرة وردية يُفقده 10 نقاط، وكل خطوة تكلِّفه 0.1 نقطة، فالتجوّل بلا اتجاه ليس خطة جيدة. اضغط «درِّب 100 جولة» وشاهد كيف يتعلم، ثم غيِّر الإعدادات ولاحظ ما يحدث.
أعد ضبط كل شيء، واجعل إبسيلون يساوي 0، ثم درِّب 100 جولة. لن يستكشف الروبوت عن قصد، بل يختار دائمًا الحركة التي تبدو الأفضل حاليًا، ولا يختار عشوائيًا إلا إذا تساوت عدة حركات.
أعد الضبط، ثم ارفع إبسيلون إلى 1.00 ودرِّب. الآن يتجاهل الروبوت ما تعلمه ويتحرك عشوائيًا في كل مرة.
جرِّب غاما = 0.10، فلا يهتم الروبوت إلا بما سيحدث الآن وليس بالهدف البعيد. ثم جرِّب غاما = 0.99.
حرِّك تكلفة الخطوة إلى أقصى قيمة سالبة. الآن كل خطوة مؤلمة حقًا، والروبوت يريد الخروج بأسرع ما يمكن.
اجعل تكلفة الخطوة 0. لم يعد هناك ثمن للتأخر. أعد الضبط ودرِّب.
انتقل إلى «تعديل العالم»، وأحِط الهدف بالحفر مع ترك مربع آمن واحد بجانبه. ثم عُد إلى التدريب.
افتح الصفحة في علامتي تبويب، واستخدم المتاهة نفسها في كلتيهما. اجعل إبسيلون مرتفعًا في الأولى ومنخفضًا في الثانية، ودرِّب كلًّا منهما 100 جولة.
ارفع مكافأة الهدف إلى +50، ثم أعد الضبط ودرِّب.