Aide : obtenir la garde de mes enfants et ne pas perdre ma maison

Je suis en concubinage depuis maintenant 7 ans avec le père de mes 2 enfants. Récemment depuis maintenant prés d'un an nous vivons dans une autre ville, la maison étant un logement social et le bail étant à nos deux noms. Mes enfants portent aussi le nom de leur père mais je ne suis pas marier avec lui. Il y a maintenant 1 mois tout à dégénérer il veut me mettre dehors et veut faire une garde alterner avec mes deux enfants une semaine chacun. Ayant autant de droit que moi sur les enfants, je ne peux pas lui refuser, mais la situation a la maison est devenu invivable. Il ne veut plus que je touche à quoique se soit à la maison étant donner que la majorité des biens matériels étant à lui m'obligeant donc à dormir sur un drap par terre avec mes enfants quand ils veulent dormir avec moi. Moralement, je suis sur le point de craquer m'insultant et me criant dessus tout les jours. Il m'appelle au travail pour me faire écouter mes enfants qui pleurent. Il regarde des films pornographique sur l'ipad de ma fille. Je suis déjà partie a la gendarmerie voir l'assistance social la caisse des affaires familiales rien n'a faire personne ne lèvent le petit doigt pour moi. Tous me dise de quitter la maison. J'aimerais bien le problème c'est Partir pour aller ou?? Si je pars il va voir la gendarmerie et dis que je l'empêche de voir les enfants? Je suis dans une situation ou je suis perdante quoique je fasse?? Pour mes enfants je reste et lutte pour tenir mais la.....