我和情人分手，我们双方都有家庭，情人跟我要补偿费，如果不给就去找我妻子麻烦我该怎么办？