Garde des enfants dun père quittant sa femme pour un homme

Bonjour,

J'ai rencontré voilà quelques mois un homme, marié et qui a deux enfants. Nous songeons très sérieusement à nous installer ensemble, ce qui implique qu'il va devoir quitter sa femme, et bien évidemment divorcer.
Ses enfants ont 5 et 7 ans et il y tient évidemment comme à la prunelle de ses yeux.
Nous sommes à peu prêt convaincus que le divorce se passera mal étant donné la situation et la personnalité de son épouse.
Un juge pourrait-il lui refuser le droit de garde, voire pire, le priver de ses enfants, dans la mesure où il vivrait avec moi, donc avec un homme.

Je vous remercie d'avance de toute l'attention que vous voudrez bien porter à ma question et pour l'aide que vous pourrez nous apporter.