Руслан Рахметов, Security Vision
Традиционные методы тестирования программ и их фрагментов, такие как модульные или интеграционные тесты, отлично справляются с проверкой ожидаемого поведения. Но разработчики и те, кто пытаются взломать эти программы, обращают внимание и на ситуации, когда программа получает данные, к обработке которых она алгоритмически не готова. Именно про это явление мы и поговорим в текущей статье.
Представьте, как ребенок, получив пульт от телевизора, хаотично нажимает все кнопки одновременно. Это приводит к зависанию устройства или вызову сервисных меню, чего взрослый пользователь (обычный тест) никогда бы не сделал. Или как инженеры автоконцерна намеренно разбивают автомобиль о препятствия под разными углами и на разных скоростях, чтобы выявить скрытые слабости конструкции до выхода на рынок. Так проводят краш- и стресс-тесты, которые иначе, в терминологии разработки, называют фаззинг-тестами. Мы расскажем про концепцию фаззинга и специалистов, которые его проводят, разберем разные способы обнаружения неисправностей и типы тестирования, и про то, как этот процесс встраивается в цикл CI/CD.
Оглавление
1. Концепция и методика фаззинга
2. Сиды и правила тестирования
3. Санитайзеры памяти и отравленные байты
5. Возможности, ограничения и регулирование
Концепция и методика фаззинга
Фаззинг – это метод динамического тестирования программного обеспечения, при котором системе на вход подаются случайные, специально сгенерированные или намеренно искаженные данные. Делается это с целью вызвать аварийное завершение работы, утечку памяти или нарушение логики приложения. В отличие от ручного тестирования, где программисты часто ограничиваются несколькими предсказуемыми тест-кейсами, фаззинг позволяет автоматизировать процесс перебора миллионов комбинаций.
Если программа упала или повела себя некорректно под воздействием таких данных, фиксируется программная ошибка (баг), которая потенциально может стать вектором для атаки, например, для отказа в обслуживании (DoS) или удаленного выполнения кода (и возможного проникновения в инфраструктуру при помощи этого).
Специализированная программа, которая управляет всем процессом тестирования называется фаззером. Он генерирует данные, отправляет их в целевую программу (Target / PUT - Program Under Test), отслеживает покрытие кода, мониторит состояние системы и адаптирует следующие поколения входных данных на основе полученной обратной связи. Работает эта программа как автоотмычка или робот-взломщик: механический алгоритм перебирает миллионы комбинаций кодового замка с огромной скоростью, анализируя щелчки механизма, пока дверь не откроется.
Сиды и правила тестирования
Представьте себе механизм эволюции. В нём мутации не происходят «из ничего». Они всегда опираются на существующий жизнеспособный генетический код, который видоизменяется и вызывается внешними условиями. ДНК такого организма с точки зрения фаззинг-тестов называется его корпусом. Тест редко начинается с абсолютно случайного набора байтов, так как это неэффективно. Поэтому для ускорения процесса используется корпус (corpus, seed pool), набор начальных, корректных входных данных, которые целевая программа должна уметь обрабатывать в нормальном режиме.
Например, при тестировании парсера PDF-файлов корпусом будет набор валидных документов: фаззер берет эти файлы за основу и начинает их итеративно мутировать (corpus progression). Если в процессе теста мутированный файл открывает новую ветку кода, фаззер сохраняет его обратно в корпус для дальнейших экспериментов.
Существует еще один модуль или набор правил, работающий в связке с фаззером, задача которого – безошибочно определять, что в программе произошло нарушение политики безопасности. Он называется оракулом багов и работает как датчик угарного газа в доме или на производстве: опасный газ не имеет цвета и запаха; человек может не заметить его до критических последствий. Датчик реагирует на невидимую угрозу и немедленно поднимает тревогу.
Обычный фаззер может заметить только явные сбои (падение процесса с ошибкой сегментации, тайм-аут). Но поскольку множество критических уязвимостей, таких как переполнение буфера или чтение неинициализированной памяти, могут происходить «тихо», не вызывая немедленного падения приложения, оракул багов (чаще всего это санитайзеры, о которых мы расскажем ниже) делает эти скрытые ошибки фатальными, заставляя программу немедленно завершиться. И фиксирует новую ветку кода.
Санитайзеры памяти и отравленные байты
Чтобы оракул багов работал эффективно, исходный код программы перед тестом компилируется со специальными инструментами, санитайзерами. Исторически наиболее эффективными из них признаны AddressSanitizer (ASan) и UndefinedBehaviorSanitizer (UBSan).
ASan
Это инструмент динамического анализа, разработанный инженерами Google, который модифицирует код программы во время компиляции, вставляя строгие проверки перед каждым обращением к оперативной памяти. Основа архитектуры этого санитайзера – концепция теневой памяти (Shadow Memory), когда виртуальное пространство делится на две части: основная память приложения и теневая память. ASan жестко отображает каждые 8 байт реальной памяти приложения в 1 байт теневой памяти. Это можно представить, как журнал бронирования в отеле. Сами номера могут выглядеть одинаково, но на стойке регистрации есть реестр, точно указывающий, какие комнаты сданы, а какие закрыты на ремонт. Так и санитайзер ведет учет памяти приложения.
Чтобы улавливать выходы за границы буфера (buffer overflow) или использование освобожденной памяти (use-after-free), ASan окружает каждую выделенную область памяти (номер в отеле) на куче, стеке или в глобальных переменных специальными барьерными зонами, называемыми Redzones. В соответствующую теневую память записываются специальные шестнадцатеричные маркеры, так эти зоны «отравляются» и становятся отравленными байтами (Poisoned Bytes). Это как краска в инкассаторской сумке: если грабитель пытается вскрыть сумку с деньгами, капсула взрывается, «отравляя» купюры несмываемой краской, делая очевидным факт незаконного доступа. Перед чтением или записью скомпилированный код обращается к теневой памяти. Если программа пытается получить доступ к Redzones, ASan видит отравленный байт в теневой памяти, перехватывает операцию и немедленно останавливает выполнение с детальным отчетом.
UBSan
Этот инструмент детектирует аномальное поведение в коде, которое не связано напрямую с доступом к памяти, но может вести к логическим уязвимостям. Сюда входят целочисленные переполнения (integer overflow), некорректные битовые сдвиги, деление на ноль и разыменование нулевых указателей. UBSan добавляет дополнительные проверки на этапе исполнения, гарантируя, что математические операции остаются в безопасных пределах.
Представьте себе электрощиток, в котором UBSan выполняет роль предохранителя. При коротком замыкании или скачке напряжения (неопределенном поведении и аномалии) предохранитель мгновенно размыкает цепь до того, как начнется пожар.
Типы тестирования
Как и в сканерах уязвимостей, фаззинг тестирования проводятся тремя основными методами:
Black-box
Метод, при котором тестировщик или фаззер не имеет доступа к исходному коду и полностью игнорирует внутреннее устройство системы, называется черный ящик. Данные отправляются во внешние интерфейсы программы (сетевые порты, API, интерфейс командной строки), а фаззер просто генерирует информацию и следит за реакцией приложения – упало ли оно, выдало ли ошибку тайм-аута или вернуло неверный статус. Главное преимущество метода – это скорость подготовки и генерации. Однако есть и недостаток – крайне низкое покрытие глубоких участков кода.
Работает это как попытка угадать что находится в закрытом новогоднем подарке или как слепая дегустация: ресторанный критик или сомелье пробует блюдо/вино с завязанными глазами, оценивая только финальный вкус, совершенно не зная рецепта и процессов на кухне.
White-box
Подход, при котором тестировщик обладает полным знанием об архитектуре, а фаззер имеет доступ к исходному коду или бинарным инструкциям. Здесь применяется символьное и конкольное выполнение. Система генерирует входные данные, необходимые для прохождения сложнейших логических барьеров (например, проверка криптографических контрольных сумм). Основной недостаток метода – вычислительная сложность и медленная работа.
Зато работает это уверенно, как ремонт двигателя по заводским чертежам. Механик не пытается угадать причину стука по звуку, а берёт точные схемы, разбирает агрегат и математически вычисляет допуски и износ каждой детали.
Grey-box
Гибридный подход, доминирующий в современной индустрии кибербезопасности, совмещает подходы белого и черного ящиков. Это не похоже на прохождение лабиринта вслепую (как бы это выглядело с черным ящиком) или по карте сверху (как с белым ящиком) и выглядит больше, как поиск металлолома с металлоискателем, когда есть какой-то инструмент, с помощью которого можно заглянуть внутрь тестируемого приложения. Искатель не видит, что под землей, но прибор дает звуковой сигнал (обратную связь). Чем ближе цель, тем громче сигнал, что направляет движение. А сам механизм обратной связи называется coverage-guided fuzzing.
Возможности, ограничения и регулирование
Исторически фаззинг ассоциировался исключительно с небезопасными языками вроде C/C++, где ошибки работы с памятью ведут к компрометации, но логические ошибки и падения сервисов существуют во всех экосистемах, что привело к адаптации фаззеров под современные языки: для Golang есть функция fuzz; для Rust – cargo-fuzz, работающий поверх libFuzzer; для Python – Atheris от Google; для Java – Jazzer и т.д.
Так этот процесс встраивается в конвейеры непрерывной интеграции и доставки (CI/CD), обеспечивая непрерывный фаззинг. Работает этот процесс как автоматический контроль орфографии, который помогал писать эту статью в текстовом редакторе. Он не ждет, пока статья будет завершена, а непрерывно, в фоновом режиме, подчеркивает красным опечатки сразу же, как только автор их напечатал.
Несмотря на доказанную эффективность в выявлении уязвимостей некоторых типов, фаззинг обладает слепыми зонами. Фундаментальный недостаток технологии заключается в неспособности алгоритмов понимать ошибки бизнес-логики и семантический контекст приложения, поэтому нужно грамотно оценивать активы компании в виде разрабатываемых приложений и их связи с бизнес-процессами внутри и снаружи (в компании). В этих случаях применяются другие инструменты: DAST (Dynamic Application Security Testing) сканеры, SAST анализаторы, модульное тестирование и ручной аудит на проникновение (Penetration testing).
Более того, безопасную разработку регулирует и государство. Так фундаментальным документом является ГОСТ Р 56939-2016 (и его обновленные редакции, например, 2024 года) «Защита информации. Разработка безопасного программного обеспечения. Общие требования». В нём содержится прямое требование к проведению фаззинг-тестирования в рамках этапа динамического анализа кода программы. Для разработчиков и операторов значимых объектов Критической Информационной Инфраструктуры (КИИ) это требование подкреплено Приказом ФСТЭК России от 25.12.2017 № 239 и Приказом № 117 для государственных информационных систем (ГИС).
Инструментарий фаззинг-тестирования прошел впечатляющий путь технологической от примитивных скриптов, отправляющих случайный мусор в сетевые порты, до высокоинтеллектуальных, распределенных архитектур. Внедрение мощных санитайзеров памяти (ASan, UBSan), гибридных методов (Grey-box) и конкольного анализа (Sydr) совершили революцию в способах поиска уязвимостей. Это превратило фаззинг в одну из самых эффективных методологий борьбы с угрозами нулевого дня (0-day). А для защиты от других уязвимостей и небезопасных конфигураций можно воспользоваться решениями вроде сканеров уязвимостей (VS, Vulnerability Scanner) и инструментов аудита конфигураций (SPC, Security Profile Compliance).
