С чего всё началось

Долгое время я просто играл в игры и пользовался уже готовыми сборками Windows или playbook, но всегда чего‑то не хватало. В октябре я сел за изучение Windows Internals, и началась моя небольшая история в этой сфере.

Мне стала интересна тема Ideal Processor, описанная в книге Windows Internals. Хотелось понять, как заставить планировщик Windows распределять потоки определённого процесса по ядрам, используя свой алгоритм миграции.

Первые эксперименты с Ideal Processor привели к тому, что было непонятно, куда смотреть и что именно нужно замерять через WPR. После долгого тестирования я пришёл к выводу, что первые несколько версий программы с Ideal Processor скорее вредили обычной миграции потоков по ядрам, чем помогали ей.

Первый раз я открыл трассу в WPA ещё около года назад. Первым впечатлением было: «Какие красивые и непонятные графики». Спустя время разобрался, как работать с этим инструментом.

Теперь о том, почему я так загорелся идеей написать свой Toolbox и playbook, а также инструменты для тестирования.

Очень много «плацебо» оптимизаций, кастомных образов и playbook, которые ломают системные алгоритмы и механизмы работы ядра Windows и защитника. При этом разница в производительности 3–5%, но пользователь получает систему, в которой нарушена её базовая схема работы.

Были ситуации, когда твики или кастомные образы ломали меню Пуск, обновления безопасности, которые нужны для работы античитов, ломали индексацию файлов и поиск в проводнике, давали синие экраны из‑за плацебо‑изменений в реестре, подписанных как «+999 FPS». И проблема в том, что люди действительно в это верят.

Мой хороший знакомый, который сам делает сборку Windows, однажды сказал мне: без тестов и замеров задержек и рывков нет смысла что‑то пробовать. У каждого изменения есть плюсы и минусы, и всё нужно проверять инструментами вроде WPR, MXA и WPA.

Так и появилось главное правило проекта: каждое изменение сначала меряем, и если замер не показывает пользы, изменение убираем.

Как я мерил

Обычный пользователь, чтобы провести тест, потратит десятки часов только на то, чтобы разобраться, как открыть трассу. Почему бы не написать программу, которая делает такую же ETW запись, но на выходе превращает непонятный набор цифр в аккуратный график задержек и рывков, а в отдельном файле расписывает, у какого потока какой был пик задержки.

Так появилась моя утилита DomainSchedTest. Она записывает ETW трассу ядра и кадры по событиям DXGI Present. Меряет она две вещи: сколько готовый к работе поток ждёт свободное ядро (от события ReadyThread до переключения контекста) и время каждого кадра игры. 1% и 0.1% low считаются по времени кадра, а рывком я считаю кадр, который в 2.5 раза длиннее медианного.

Картинка 1: график ожиданий потоков, CS2 DM, 30 секунд. Каждая полоска это одно ожидание, высота это сколько поток ждал ядро.

Картинка 1: график ожиданий потоков, CS2 DM, 30 секунд. Каждая полоска это одно ожидание, высота это сколько поток ждал ядро.

Нужно делать одинаковое число прогонов и всегда не менее трёх, чтобы исключить разовые скачки задержки или рывки потоков, которые могут быть багом или системным сбоем. Сравниваю я среднее и разброс: если разбросы двух вариантов пересекаются, разница в пределах шума.

Картинка 2: три прогона одного варианта и их разброс.

Картинка 2: три прогона одного варианта и их разброс.

В простое нужно мерить, чтобы посмотреть основные системные прерывания и узнать, как ведёт себя система в простое или при обычной работе: браузер, музыка и подобное.

Сверку с записью WPR (профили GPU activity и Video glitches) я сделал, чтобы понять, правильно ли моя программа измеряет игру или у неё есть проблемные места, которые нужно исправить. Результат совпал: и WPR, и моя утилита показали медиану ожидания 1.9 мкс и p99 около 4 мкс, потерянных событий 0. Тяжёлая запись WPR сама по себе снижает FPS, поэтому для обычных замеров удобнее лёгкая утилита.

Что я выбросил, потому что не помогло

Больше всего было жалко выкидывать твик «ядра процессора не засыпают», но с ним кадры стали хуже, поэтому я от него отказался.

От жёсткой привязки потоков к ядрам тоже отказались, потому что перешли на постоянную миграцию потоков по ядрам. По тестам результат положительный, в отличие от жёсткой привязки.

С Win32PrioritySeparation история такая. По внешним замерам 0×18 выглядел стабильнее, поэтому я его оставил. Но мой собственный A/B разницы не нашёл: 874 FPS в обоих вариантах, 1% low 535 против 533, 0.1% low 501 против 498, разбросы пересекаются. То есть на моём ПК это изменение ничего не ломает, но и ничего не даёт, и я так и пишу в журнале тестов.

Ещё один тест был про то, как разводить игру и устройства по ядрам. Я попробовал перенести все устройства (видеокарту, USB, сеть) на ядро 0 и отдать игре остальные ядра 1–7. Обычная схема другая: устройства стоят на своих ядрах, видеокарта на 6–7, а игра работает на 0–5. Цифры у обычной схемы вышли лучше: 1% low 468 против 440 и рывков 41 против 72. Но разбросы пересекались, так что это мог быть и шум, и я вернул прежнюю схему.

При этом сам принцип остался главным для Toolbox: потоки игры не должны занимать ядра, к которым привязаны устройства. Иначе либо поток игры ждёт ядро после прерывания устройства, либо устройство ждёт ядро после потока игры, и отсюда нестабильность и кривой frametime.

Что я увидел в цифрах

Один раз по моей вине был сделан неправильный ручной разгон видеокарты по ядру и памяти. Я сравнил игру с разгоном и без него, по 3 прогона по 30 секунд в DM с ботами:

FPS: с разгоном 766 (от 729 до 826), без разгона 734 (от 728 до 740) 1% low: с разгоном 439 (от 421 до 458), без разгона 432 (от 427 до 441) Самый долгий кадр: с разгоном от 9.0 до 11.4 мс, без разгона от 8.3 до 9.4 мс Рывков: с разгоном 58 (от 27 до 91), без разгона 50 (от 42 до 58)

Без разгона FPS чуть ниже, зато прогоны намного ровнее и самые плохие кадры короче. После этого я решил снизить частоты памяти и ядра, чтобы вернуть стабильность.

Картинка 3: время кадра с разгоном и без, по одному прогону из каждой серии, одинаковый масштаб.

Картинка 3: время кадра с разгоном и без, по одному прогону из каждой серии, одинаковый масштаб.

Было ощущение, что после смерти в игре сильные просадки фреймтайма, но это скорее самовнушение от увиденного в графиках)

А вот откуда на самом деле скачки ожиданий по 1–2 мс в CS2 DM, которые видно на первой картинке. Это не драйверы и не фоновые программы, а фоновые потоки самой игры с низким приоритетом: они ждут ядро, пока его заняты её же более загруженные потоки. На кадры это влияет мало: в прогоне из 50 рывков только в 8 было такое долгое ожидание внутри кадра.

Откат

Представьте: вы установили кастомную сборку через playbook, вам не нравится её производительность или то, что вырезана половина функционала. Чтобы откатить систему, придётся ставить чистую Windows заново. У меня такой проблемы нет. В самом начале установки создаётся файл отката, который позволяет вернуть систему в исходное состояние, а ещё есть проверка после отката (какие службы откатились, вернулись ли настройки) и проверка после установки.

При первом тесте отката нашлись 4 ошибки. Это было ожидаемо: любую новую функцию нужно тестировать вживую, не на виртуалках, а на живой системе, чтобы проверить все пункты.

После исправлений откат на моём ПК закончился строкой «Restored: 164 items. Failed: 0». Потом я сверил каждую сохранённую настройку с тем, что стало на ПК: 190 вернулись как было, а 3 изменила сама Windows. И этот же круг «установка, проверка, откат» теперь запускается на настоящей Windows при каждом изменении проекта.

Картинка 4: конец журнала отката на реальном ПК.

Картинка 4: конец журнала отката на реальном ПК.

Проверяемые сборки

Мне хотелось, чтобы любой мог проверить, что файл собран именно из открытых исходников, а не где‑то у меня на компьютере. Поэтому архив плейбука и exe Toolbox собирает сам GitHub и подписывает аттестацией. Проверить это можно одной командой:

gh attestation verify Domain-OS-2.2.4.apbx -R 6kane1/DomainOS

Обновления Toolbox приходят только по подписанному фиду с проверкой SHA-256 каждого файла. А fuzz‑тесты, которые прогоняют все разборщики внешних данных на тысячах случайных входов, уже нашли и закрыли две ошибки в разборе фида.

Картинка 5: проверка аттестации архива плейбука.

Картинка 5: проверка аттестации архива плейбука.

Ограничения

Пока всё проверено в основном на одном ПК: Ryzen 7 7800×3D и RTX 5060. Проект делаю один, внешнего аудита пока не было. Поэтому сейчас больше всего нужны тестеры с другим железом: Intel, ноутбуки, видеокарты Radeon, Ryzen X3D с двумя CCD.

Ссылки

GitHub: https://github.com/6kane1/DomainOS

Сайт: https://6kane1.github.io/DomainOS/ru/

Discord: https://discord.gg/wBGsV7WEpm