我们结婚三年没有去领结婚证，也没有夫妻生活，现在想分开了，他当初的彩礼和后来给的钱需要赔给他吗？