AugLy: фреймворк для проверки устойчивости моделей к искажениям данных

Sana Hassan опубликовала туториал по AugLy — библиотеке для аугментации мультимодальных данных на PyTorch. Фреймворк позволяет генерировать синтетические датасеты для изображений, текста и аудио, а затем тестировать на них устойчивость моделей к возмущениям.

В туториале показано, как бенчмарить детекцию копий изображений при искажениях, оценивать текстовые классификаторы против adversarial-атак и Unicode-обфускации, интегрировать аугментацию прямо в PyTorch DataLoaders. Система отслеживает метаданные трансформаций и поддерживает bounding-box-aware преобразования для сохранения аннотаций.