こんにちは。
そうですね、「建物の建設・改修」については、新事業進出補助金の公募要領には「専ら補助事業のために使用される生産施設、加工施設、販売施設、検査施設、作業場、その他事業計画の実施に不可欠と認められる建物の建設・改修に要する経費」とあります。

「新築」の明記はありませんが、直接的にこれを禁ずるルールはないと考えます。
新築は慎重に審査がなされますので、採択突破にも影響があるかもしれません。
無事通過した後も、新築の場合は提出書類が異なりますので注意が必要です。