Моя практика показывает, что генерируемые тесты тестируют преимущественно генератор тестов :)

Да, мы писали конструкции, которые генерировали тесты. Но помимо них были и вручную написанные тесты, особенно на краевые условия, и спецификации на то и другое были ... ну, нет, все же не тупой, но очень нудной задачей. Толкового junior'а на нее было бы, в общем, достаточно, но у нас все прекрасно понимали, что он там долго не протянет. Работали над тестами все.

Еще гуй рисовать и методично обвешивать коллбэками тоже такая работа. Для нее есть только плохие и очень плохие инструменты, а хороших еще не придумали.

Я вот, в частности, сейчас занимаюсь работой, которая больше чем наполовину состоит из того, что сидишь и муторно, по видеозаписи с оригинала и крайне хреновой документации воспроизводишь поведение имитируемого прибора. Для тренажера. И это еще графику для этой фиговины рисует другой человек. Ага, вымеряя размеры по фоткам оригинала. А на остаток эта работа требует немалой квалификации.