«Вы открываете изображения неправильно!» В современных архитектурах машинного обучения загрузка изображений из файлов часто становится узким местом из-за ограничений CPU. Каждая миллисекунда на подготовку данных имеет значение, особенно при работе с большими датасетами и сложными моделями. Я решил проверить эффективность стандартных инструментов и сравнил производительность Pytorch DataLoader с NVIDIA DALI — библиотекой, специально разработанной для ускорения загрузки и предварительной обработки изображений. Результаты эксперимента: • JPEG: За 10 эпох обработки 1000 изображений NVIDIA DALI справился за 4 секунды, в то время как Pytorch потребовал 55 секунд — разница более чем в 15 раз! • PNG: Для изображений в формате PNG разница также заметна: 16 секунд против 55 секунд. Код Потыкаться в код можно тут оставил в комментариях версию поста от MrBeast для более расслабленного чтения