Я делал так.
На чердаке ночью гнездо заморил дихлофосом, но убирать не стал, просто хорошо пропитал. Следующие осы которые решили строить себе домик, первым делом разбирают на стройматериал гнезда поблизости, которые с зимы остались. По осени нашел на чердаке несколько недостроенных домиков, видимо начинали разбирать отравленное гнездо и сами травились.