Engineer / Платформа / Категорії
Тестування та QA
Оптимізувала CI/CD, заощадивши 4 000 годин
Оптимізувала процеси CI/CD, заощадивши 4 000 годин завдяки впровадженню автоматизації в пайплайнах розробки програмного забезпечення.
Автоматизація повернула близько 4 000 годин і зробила релізи водночас швидшими й надійнішими. Команда могла випускати релізи без зайвого напруження:…
Згенерувала контракт API із самої бази даних
Згенерувала контракт API з бази даних назовні — OpenAPI, типізований TypeScript‑клієнт на 44 076 рядків, 61 mock‑обробник та обмеження, які застосовує UI, — з перевіркою на кожній ланці, що падає в разі розбіжностей.
Поле не може змінитися лише з одного боку — це виявляється на першому ж переході, у збірці, за кілька хвилин після зміни.
Побудувала пайплайни CI/CD на GitHub Actions
Побудувала пайплайни CI/CD на GitHub Actions з distroless‑образом продакшн‑фронтенду та просуванням релізів між кількома середовищами.
Релізи перестали бути обережним ручним ритуалом і стали рутинною, нудною подією, а саме цього від релізів і хочеться.
Написала 578 цілей автоматизації go‑task
Написала 578 цілей автоматизації go‑task, що охоплюють нативний, Docker- та HTTPS‑режими розробки, лінтинг, тестування, базу даних та розгортання.
Будь-хто може виконати task --list і побачити весь інструментарій як на долоні, а будь-яку його частину запустити однаково, хоч би що було під капотом.
Запровадила нуль попереджень у шести мовах
Встановила стандарт якості без жодних попереджень для шести мов — Go, TypeScript, SQL, Python, Shell і Markdown — дотримання якого забезпечували pre‑commit hooks.
Проблеми виправляються там, де виникають, а не відкладаються в беклог, який ніхто не розчищає, і кодова база лишається чистою за замовчуванням, а не завдяки…
Побудувала тести для Go, SQL і браузера
Побудувала багаторівневий набір автоматизованих тестів — 981 тест Go, 543 фронтендні та браузерні специфікації, 494 поведінкові тести SQL — з мутаційним тестуванням, property‑based тестами та обов'язковою перевіркою доступності.
Змінювати щось структурне вже не страшно, а тільки це й рятує кодову базу такого розміру від закам'яніння.
Побудувала механізм із 268 перевірок репозиторію
Побудувала механізм перевірок репозиторію — 268 зареєстрованих перевірок коміту, 277 правил лінтингу та 15 власних правил ESLint — а також 146 тестів самих перевірок, щоб стандарт тримала збірка, а не код‑рев'ю.
Рецензенти могли приділяти більше часу проєктуванню, бо ще до відправлення гілки автоматичні перевірки опрацьовували закладені в них формальні правила.
Тримала схему узгодженою впродовж 1 022 міграцій
Тримала схему узгодженою впродовж 1 022 міграцій за допомогою перевірки CI, яка збирає базу даних обома шляхами — чиста інсталяція та інсталяція плюс усі міграції — і падає, коли вони розходяться.
Нове середовище й те, що живе давно, — одна й та сама база даних, і це перевіряється, а не приймається на віру.
Посилила SSH до 24 перевірених директив
Посилила захист SSH: 24 директиви, кожну з яких перевіряє assert, і триетапна валідація — файл‑кандидат, зібрана конфігурація, а потім зворотне зчитування самим демоном, — після того як таке зчитування виявило, що запущений сервер мовчки перевизначав дві з двадцяти чотирьох.
Стан захисту SSH тепер визначає відповідь демона, а не твердження репозиторію, і різниця не теоретична: коли писали перевірку, вона вже становила два…
Довела, що блокування вторгнень працює щоразу
Довела працездатність усього ланцюжка блокування вторгнень під час кожного запуску посилення захисту: блокувала зарезервовану тестову адресу, зчитувала створене правило ядра й знімала блокування в гарантованому блоці очищення, тож jail, який перестав працювати, обриває запуск помилкою, а не звітує про справність.
Якщо шлях блокування перестає працювати, converge тепер обривається, а не звітує й далі про справність, — і лише ця властивість насправді мала значення.
Перевірила правила фаєрвола за позицією
Перевірила правила фаєрвола за позицією, а не лише за наявністю, зчитуючи пронумерований перелік правил і чинний ланцюжок фільтрації пакетів, бо наявне правило ще не означає, що до нього доходить хоч один пакет.
Тепер стан брандмауера перевіряють так, як його бачить пакет. Найкориснішим підсумком стала не сама перевірка, а те, що вона показала про звітність, яка була…
Домоглася, щоб check mode в Ansible казав правду
Домоглася, щоб check mode показував правду на всій платформі, після того як знайшла шість перевірок, що ухвалювали рішення за значенням, якого хост ніколи не повертав: модуль command в Ansible у режимі --check звітує про успіх, узагалі не виконуючи команду.
Тепер пробний прогін або щось вимірює, або повідомляє, що не виміряв, і жоден із цих варіантів не є тим третім, який він мав раніше.
Додала секундну попередню перевірку секретів
Додала попередній плей (preflight), який приблизно за секунду проганяє той самий код, що й converge, на локальних секретах оператора, — після того як продакшн‑запуск обірвався на дев'ятому завданні, застосувавшись лише наполовину, а налаштування swap уже було записано на робочий хост.
Секрет, який не вдається отримати, тепер коштує двосекундної відмови на ноутбуці, а не частково застосованої зміни на живому сервері.
Посилила ізоляцію systemd для кожного юніта
Знизила оцінку відкритості (exposure) у пісочниці systemd для кожного юніта, який встановлює платформа: служба dead man's switch — з 9,6 UNSAFE до 1,5, відкритий в інтернет git‑сервер — з 8,3 EXPOSED до 1,5, — і додала перевірку парсером під час converge, після того як знайшла у трьох шаблонах юнітів директиву з орфографічною помилкою, яку systemd мовчки ігнорував.
Кожен юніт працює з тими привілеями, які йому потрібні, і без зайвих, числа виміряно, а не задекларовано, а клас дефектів, де описка непомітно перетворюється…
Побудувала перевірку комітів із 22 лінтерів
Побудувала перевірку перед комітом із 22 лінтерів, кожен з яких описується одним рядком, і ще п'ятьох, що заслуговують окремого абзацу, без рівня попереджень і без дозволу на вбудоване вимкнення правил, яка охоплює HTML, CSS, JavaScript, Python, YAML, Markdown, shell, посилання, орфографію, секрети й типографіку.
Механічні зауваження робить машина ще до того, як з'являється коміт, і ці перевірки — єдиний рецензент у проєкті.
Страховка, що більше не забирає пів години
Скоротила браузерну перевірку якості сайту з 1 636 секунд до 615, запускаючи перевірки від найдовших до найкоротших через пул воркерів із максимум чотирма одночасними перевірками, після того як виміряла, що алфавітний порядок коштував 320 секунд проти 224.
Увесь набір перевірок тепер триває 615 секунд замість 1 636, хоча самі перевірки стали ширшими, а не вужчими: сумарна послідовна вартість зросла, а реальний…
Виправила мапу сайту з однією позначкою часу
Виправила мапу сайту, де 172 з 176 URL мали одну позначку часу зміни, взявши дату з історії git, після того як з'ясувала, що експорт переписує кожен файл під час кожного запуску.
Повторна синхронізація після місяця редагування вмісту тепер змінює вісім файлів зі 186, а не всі, і карта сайту повідомляє правду.
Перевірила лінтером 10 242 рядки перевірки якості
Охопила форматувальником і лінтером 10 242 рядки JavaScript у перевірках якості, з'ясувавши, що це найбільший обсяг коду в репозиторії і єдиний, який ніщо не перевіряло, — виправила 13 зауважень і не вимкнула жодного.
Найбільший і найвідповідальніший код у репозиторії тепер відформатовано й перевірено лінтером і засобом перевірки типів: тринадцять проблем виправлено, жодної…
Забезпечила генератору 981 тест і 92% покриття
Покрила генератор 981 тестовим випадком із мінімальним порогом покриття гілок 92%, де попередження вважаються помилками, і перевірила ідемпотентність, двічі запустивши весь пайплайн збірки з порожнього файлу та вимагаючи, щоб другий прохід нічого не змінював.
Пайплайн можна без побоювань повторно запускати на робочій базі даних, і саме це взагалі уможливлює поступову роботу з вмістом.
Увімкнула всі правила лінтера Python як помилки
Увімкнула всі правила лінтера Python як помилки й довела 1 815 зауважень до нуля; кожен із небагатьох винятків має письмове обґрунтування, а два з них підкріплені перевіркою, а не коментарем.
Лінтер працює з усіма правилами й не дає жодного зауваження, а кожне відхилення задокументовано в тому рядку, де його зроблено.
Написала тести для самих перевірок
Написала тести для самих перевірок, з'ясувавши, що перевірка, яка отримує лише чисті вхідні дані, одного дня звітуватиме про чистоту, бо нічого не прочитала: підклала помилку правопису, щоб підтвердити, що перевірка орфографії її знаходить, і взяла діапазон ідентифікаторів із бази даних, а не з числа в тесті.
Тепер для кожного скрипту перевірки в проєкті є тест, який доводить, що на хибних вхідних даних той завершується з помилкою, а перевірки діапазону беруть дані…
Виявила розбіжність між хуками й гейтом якості
Виявила, що хуки комітів і гейт якості виконують різні перевірки, хоча документ обіцяв, що вони однакові, порівнявши два переліки в тесті, — п'ять перевірок, які запускалися лише вручну, були саме тими, що читали текст CV.
Те, що хук і гейт запускають однакові перевірки, тепер доведено, а перевірки тексту виконуються під час кожного коміту.
Перевірила CI‑хук git‑сервера, знайшла 2 дефекти
Відрепетирувала CI‑хук на боці git‑сервера й знайшла два дефекти, яких не виявити читанням файлу: запасний варіант, що передавав на вхід хука аргумент, який неможливо розв'язати, і власну змінну середовища git, яка потрапляла слідом за гейтом у checkout і робила 19 тестів червоними.
Хук працює в обох сценаріях, і обидва дефекти знайдено ще до того, як на них натрапив справжній пуш.
Обмежений потік подій у застосунку macOS
Обмежила буфери подій і журналювання після зафіксованого інциденту macOS зі зростанням на 41 МБ за секунду й 111 ГБ стиснених сторінок на машині з 36 ГБ; зафіксований повний тестовий запуск зменшив журнал ядра з 610 996 до 1 411 рядків.
Запис інциденту містить порівняння повних тестових запусків: кількість рядків журналу ядра застосунку зменшилася з 610 996 до 1 411, а розмір збереженого…
Написала парсер, що перевіряє кожен виклик FFI
Написала парсер, який читає справжній C‑заголовок на 7 308 рядків і перевіряє кожне місце виклику, кожну константу переліку й те, що кожен клас‑власник вказівника є final, після того як через написаний вручну заголовок‑заглушку виклики трьох вилучених функцій компілювалися, лінкувалися й аварійно завершувалися.
Клас дефектів, через який стався початковий збій, більше не може повторитися, бо застаріле посилання тепер спричиняє помилку збірки, а не помилку під час…
Пришвидшила набір тестів до 8,9 секунди
Скоротила набір тестів від шести тестів, що перевищували ліміт у шістдесят секунд, до 135 успішних за 8,9 секунди, профілюючи головний потік і прибравши два виклики, у яких він перебував 3 989 із 4 017 вибірок.
Було шість тестів, що перевищували шістдесят секунд, — 74 секунди реального часу, — а стало 135 тестів, які проходять за 8,9 секунди, і цього досить, щоб…
Задіяла невикористану половину ядра
Задіяла ту половину ядра обміну повідомленнями, якою застосунок ніколи не користувався, — передавання резервної копії, зникомі повідомлення, редагування та повторне надсилання, підтверджені запрошення, проксі та політику шифрування, — проганяючи кожен тест на справжній бібліотеці без заглушок.
Половину ядра, до якої раніше не діставалися, тепер задіюють тести зі справжньою бібліотекою, а для обгортки встановлено найвищий мінімальний рівень покриття…
Змусила шість збирачів звітувати про пропущене
Змусила шість збирачів звітів повідомляти ту частину свого входу, яку вони так і не прочитали, — файли, що лишилися закритими, невстановлені зонди, нерозпізнані рядки журналу, — і підігнала пороги до 116 виміряних зразків, з'ясувавши, що сліпий збір і справний хост дають однакову сторінку.
Сторінка з числами цієї платформи тепер показує власні сліпі зони поряд із результатами. Самовимірювання не працює як гейт, і це сказано прямо, а не лише…