В настоящее время работаю над обучением модели RL непосредственно на основе пиксельных данных - создал кастомные структуры данных и рендеринговые пайплайны с нуля. Реализовал общие пулы деревьев для ускорения операций трассировки лучей в нескольких рандомизированных средах. Последняя оптимизация на самом деле сократила требования к параллелизации, но теперь я сталкиваюсь с ограничениями по размеру пакета. Компромиссы на каждом шагу в этом рабочем процессе.