我要离婚他不准,还不要我回去看儿子,…

我要离婚他不准,还不要我回去看儿子,还威胁我说在会刊儿子的话,碰到我就会打我,我们离婚原因是开始他赌博,还借高利贷,开始是少数,很多次之后就是多数,但是我都没有意见,因为我觉得没有钱不要紧,关键你改了和他离婚他不离,我死的心都有,我改怎么办