Архив рубрики ‘Тестирование’

После ИИ писать код руками ощущается уже не как норма

TL;DR: ИИ не заменяет инженерный контроль, но меняет базовую планку разработки. С ним проще удерживать скоуп, тесты, техническое качество и в режиме дедлайна. Главный риск — потерять ownership, поэтому уровень автономности должен зависеть от проекта, стадии и зрелости инженерного процесса. У меня есть один личный проект

70% кода с AI — и ни на день быстрее

Вступление В какой-то момент это происходит почти в каждой компании. Собрание. Слайды. Уверенный голос. «Мы должны активнее использовать AI».«Он ускорит разработку в несколько раз».«Нам нужно повышать эффективность».«Возможно, нам и не понадобится столько людей». Формулировки могут быть мягкими. Могут быть вдохновляющими. Могут быть завёрнутыми в стратегию трансформации. Суть остаётся той же: технология должна кратно увеличить производительность.

ИИ в HR: тестирование сотрудников. Практический кейс и промпт проверки знаний правил habr с AI

ИИ-тесты — это один из самых простых, эффективных и надёжных методов использования искусственного интеллекта в компаниях и организациях. В статье рассмотрим реальный кейс, и на примере простого промпта сгенерируем тесты для проверки знаний правил habr. Разберём кейс: надо срочно обучить 10 новых сотрудников, при этом существующие тесты устарели, кроме того руководитель отдела продаж обычно тратит […]

Философия автотестов: управление, поддержка и флаки

Зелёные галочки лгут: почему AI пишет тесты, которые ничего не тестируют, и как это починить

Тесты зелёные, покрытие растёт, а багов меньше не становится. На QA-митапе инженер из крупной продуктовой компании показал механику: AI-агенты подгоняют моки, меняют ассерты, генерируют результаты, которые ничего не проверяют. Стек у команды — near-SOTA. Модель свежая. Агент — один из лидеров open-source. Значит, дело не в инструментах. А в чём именно — разбираю ниже: от […]

Пробуем на себе: LLM в разработке

Рассказываю о реальном опыте использования AI в разработке и о тех практических результатах, которых удалось добиться за один год регулярной работы с современными языковыми моделями. Спойлер: получилось многое, но не все.

AI-Driven подход «Harness Engineering»: наступившее будущее или лишь метод с ограничениями?

В какой-то момент мне стало интересно не “умеет ли агент писать код”, а другой вопрос: можно ли провести заметную инженерную задачу так, чтобы продуктовый код руками не писать вообще. То есть совсем. Человек формулирует задачу, задаёт ограничения, пишет тест кейсы, ревьюит результат и проводит финальные проверки. Все изменения в коде делает агент.

Soft skills в IT: почему я против?

Не так давно я ездила на конференцию, где в том числе разбиралась важность мягких навыков, хотя вообще конференция то была по моделям ИИ и по тестированию. Но даже сюда, в святую святых для меня, в тестирование, запихали эти их «важные» навыки. Я перечислю основные мягкие навыки, которые разбирались. Адаптивность, коммуникабельность, стрессоустойчивость, тайм менеджмент, эмоциональный интеллект, […]

Почему 80% автотестов в итоге не окупаются

Вступление Автоматизация тестирования почти всегда начинается одинаково. Мы пишем автотесты, ускоряем релизы, ловим баги раньше и вроде бы делаем бизнес счастливым. В первые месяцы всё действительно работает: тесты быстрые, фидбэк полезный, ручного тестирования меньше. А потом проходит пару лет — и что-то идёт не так. Автотесты начинают падать «просто потому что». Прогоны растягиваются на часы. […]

Хроники Agent Driven Development трансформации .1: улучшаем agent feedback loop

Это первая статья из цикла «Хроники Agent Driven Development трансформации». В цикле я рассказываю, как постепенно перевожу реальный продакшен-проект на рельсы agent-driven development — когда LLM-агенты становятся полноценными участниками разработки, а не просто подсказчиками в автокомплите. В нулевой статье я рассказал, как ускорил прогон ~800 тестов в 6 раз — с 10 минут до 101 […]