それでお断りされる程度の関係ならそもそも元から脈ないんじゃないかと思うのだが
恋人関係になったら少なからず背後の人格関わってくるわけだし