ちゃんと理由があるなら、さすがに喧嘩が長引けば「妹だった」とか「あれは女装してる男だ」とか「母親だ」とか弁明すると思う
自宅まで来といて「浮気じゃない」と言っただけで撤退したところ見る限り、誤解を解けるだけの理由は持ち合わせて無いということじゃないかな