愛人関係を止めたい・・・

私は、既婚男性と不倫をしています。
ありがちなことなのですが、職場の上司と出来てしまいまして。別に年上好きとかそういうのではなかったのですが、優しい上司で、手取り足取り仕事を教えてくれたのがきっかけで仲良くなり、そのまま自然と付き合うようになりました。

体の相性もよく、毎週1回はホテルに行って、エッチをしています。１回だけオフィスでしたこともあります・・・。

上司の家庭は、とても仲がよく、どうして私と不倫関係になっているのか分からないくらいです。私自身、そんな家庭を壊したくない気持ちなのですが、上司に求められてしまうと、断れなくて・・・結局私は上司のことが好きなんだと思います。

しかし、この関係は先のない関係だと、重々承知しています。上司には、帰るところがありますが、私にはありません。上司は離婚して私と結婚なんて考えてないでしょうからね。それに不倫しているような人とは、結婚はできません。自分も浮気されるのではと考えると、不安で仕方なくなりますから。

このまま、ズルズル関係を続けるのは辛いです。私はどうしたらいいのでしょうか？