インボイス、免税事業者との取引

消費税の計算における仕入税額控除は減ってしまうが、当該支出の損金性に問題がない限り、その分法人税の計算における損金が増加するので、免税事業者だから取引辞めます!(又は取引金額引下げます!)というのは意味がわからないような・・・