ackで検索してdirnameでディレクトリ名を取得して、rm -rfでまとめて消してます。

ack-grep -l foo | xargs dirname | xargs rm -rf