已婚男人爱我但是从不主动联系我怎么办