Автономные системы полета на базе RL столкнулись с серьезной проблемой недавно. Они были полностью функциональны примерно две недели назад, но затем всё разрушилось. Провел несколько дней, устраняя четыре абсолютно жестоких бага — такие, что заставляют сомневаться во всем. Честно говоря, было очень нервно; почти пришлось откатить всю реализацию. Настоящий вывод: сочетание аппаратной интеграции с глубоким обучением оказывается обманчиво сложным. Между теорией и реальностью существует огромная пропасть, когда нейронные сети сталкиваются с реальными физическими системами. Каждая переменная важна, и одна упущенная деталь может привести к сбою.