相談です
長文すみません。

1歳8ヶ月の息子がいます。
だいぶやんちゃになってきて悪さもするようになったのですが、同居している義父がもう手を出しそうなくらいに怒鳴って注意します。
一度手も出しそうな雰囲気だったので「お義父さん!」と私もついつい怒鳴ってしまいました。
してはいけないことは確かに注意すべきだと思いますし、私もしているのですが、義父は1歳に対してその限度を超えている気がして、旦那や義母に伝えても「あの人はそういう人だから」と言われ、直接義父に下からお願いしたことも何度もありますが「気に入らないなら孫を置いて1人で出て行け」と言われました。
旦那に家を出ようと言うと憤がいして今までどれほど金銭面で親にお世話になったか忘れたかとキレられ
(お世話になったといっても別にする予定のなかった結婚式を義両親に豪華なものをするべきと会場からド乚スから全て決められて私の意思なくやらされた分の金額くらいで、あとは毎月別居したら逆にプラスになるくらいの金額を義実家に入れています)家を出るというなら離婚、親権は渡さないと旦那に言われました。
私には実家も両親もなく、仕事も結婚と同時に退職して遠方義実家に住んだので、離婚したら息子に貧しい暮らしをさせるかも知れないし、そもそも親権が取れないかも知れない…などいろいろ考えてしまいます。
まだ義父は怒鳴り散らすだけではっきりと手を出したわけではないので、このまま義実家に暮らすほうがいいのか、離婚に向けて動いたほうが良いか、子どものためにはどうすれば良いでしょうか?
読みづらくてすみません。