Перейти к содержимому
SBER 294,81 ₽ 1,04% снижениеIMOEX 2 424,74 1,83% снижение
·Технологии·источник: Habr·1 мин

Цена ошибки: паддинг, чекпоинты на сетевом диске и сторож, который гасил здоровое обучение

Ошибки бывают в любой настоящей работе. Обычно о них пишут одной строкой где-то между графиками с результатами, а я решил сделать наоборот: собрать наши промахи в одну статью и разобрать их по-инженерному, то есть что именно сломалось, сколько это стоило и что мы после этого поменяли.

Во второй статье серии я пообещал рассказать, как арендовал видеокарты в облаке и сжёг на них деньги, почти ничего не посчитав. В третьей напомнил, что обещание в силе. Теперь выполняю. Большая часть статьи про облачное дообучение языковой модели, а в конце я расскажу о нескольких ошибках в измерениях: денег они почти не стоили, но были опаснее.

Как и раньше, я не называю базовые модели, техники дообучения, чекпоинты и источники данных. Классы карт, поставщиков, цены в час и порядок величин называю, потому что без них разговор о стоимости теряет смысл.

Отрывок из ленты источникаЧитать у источника: Habr

Цена ошибки: паддинг, чекпоинты на сетевом диске и сторож, который гасил здоровое обучение