Як робот передбачає наступну секунду

Текстова модель вгадує наступне слово. Модель світу вгадує наступний кадр — разом із масою, швидкістю і гравітацією. Один повзунок проходить увесь цикл: від камери до перехоплення.

Етап Що він бачить
  1. 0
  2. 1
  3. 2
  4. 3
  5. 4

Натисніть на ділянку схеми, щоб відкрити етап.

Увесь цикл

Побачити кадр, стиснути його у стан, прокрутити цей стан швидше за реальний час, узяти дію, яка переживає прогін, і порівняти те, що сталося, з уявленим. Різниця і є уроком.

Що всередині

  1. 1 М’яч котиться до краю столу — Мовна модель написала б до цього підпис. Модель світу відповідає на інше питання: що буде далі?
  2. 2 Картинка перетворюється на жменю чисел — Це не опис сцени, а стан, який можна прокрутити вперед.
  3. 3 П’ятдесят кроків уперед, не рухаючись — Крапки — це не справжній м’яч. Це уява моделі, намальована попереду нього.
  4. 4 Маніпулятор бере траєкторію, що встигає — Планування тут — це симуляція власних варіантів, а не лише світу.
  5. 5 Дві криві, що майже збіглися — Помилка передбачення вчить модель світу так само, як помилка в наступному слові вчить текстову.

Інтерактивні пояснення

Етап Що він бачить
  1. 0
  2. 1
  3. 2
  4. 3
  5. 4
1 / 5