Развод с несовершенно летними детьми

В браке 7 лет. Последний год постоянно ссоры и разборки. У нас 2 детей несовершеннолетних. По ночам муж устраивает разборки, напивается и не даёт спать детям. Причины разные, то ревность ,то просто слово за слово. В общем мне надоело и я ушла к другому неделю назад. Забрала только одного младшего ребёнка , так как двоих пока прокормить не смогу. Получаю только детское пособие, работать не могу, малого оставлять не с кем. Хочу подать на развод, но боюсь. Меня муж постоянно пугает, мол оставлю без детей, так как к другому ушла и бросила ребёнка! Что он может в этой ситуации сделать плохого мне и как это может отразится на детях?Как правильно мне поступить чтоб не было лишних проблем во время развода? Он обоюдно разводиться не хочет, говорит чтоб первая шла подавать, в чём подвох? Могу ли я смело подать на развод?