環境を汚したくないのなら、debianならdebootstrapとか
つかってchroot環境でbuildすればいいんじゃないの？

Fedoraならその為のmockというツールがある