怎么才能离婚我和老公7年了，一直以来…

怎么才能离婚我和老公7年了，一直以来都不太理我，性生活也很少，他在外面也有女人，（但没有证据）当地人大家都知道他有，我想离婚要怎么做，但他表面不肯离，实际上是想离。就是不肯签字，就说没空也不理我，他说你爱怎么搞就怎么搞