その現象は起きます。外と中の気温差により空気の圧力差が生じますので、夏と冬では給排気の風量が変わります。圧力差を無くしたければ、外と中の気温を合わせると良いです。つまり、断熱や冷暖房をしなければそういうことは発生しにくいです。
高気密高断熱でもそういうことが起きる。のではなく、高気密高断熱だからこそ、そういうことが起きるんですね。