Как использовать LLM в тестировании: разбираем harness, автотесты и LLM-судью

Поговорим об этом на Bugs Busters — бесплатном митапе ЮMoney для QA-специалистов. В программе — три доклада о задачах, с которыми тестировщики уже сталкиваются при работе с LLM:
— как устроен LLM-harness и зачем агенту нужна обвязка;
— как собрать помощника на базе ИИ для разбора падений автотестов;
— как понять, подходит ли конкретная LLM для вашей задачи, и сравнивать модели с помощью LLM-судьи.
Покажем не только идеи, но и практические подходы с инструментами, которые используем в работе.
Это отрывок статьи. Полную версию читайте на сайте источника по ссылке ниже.