Divorce et déménagement

Bonjour,
Je suis divorcée avec deux enfants de 10 et 13 ans, avec un mode de garde classique, mon ex-mari les ayant un week-end sur deux et la moitié des vacances.Il est reconnu bipolaire, a fait deux tentatives de suicide et un internement en institut psychiatrique . Je vis dans une région loin de ma région natale(en haute-savoie, je suis originaire de normandie), dans laquelle je n'ai aucun soutien familial, un tres bas salaire(environ 800?/mois) , et une pension alimentaire totale de 400? par mois pour les deux enfants. Je voudrais retourner dans ma région d'origine, la vie ici étant très chère et très difficile du fait de mon isolement . Mon ex mari s'y oppose fermement. Peut-il m'empêcher de rentourner chez moi? Quels recours ai-je pour obtenir gain de cause auprès du juge? Que se passe -t'il si les enfants ne veulent pas partir? Et qu se passerait-il si je voulais me remarier ou recommencer ma vie avec une personne vivant en normandie? Un juge peut-il me prendre la gade de mes enfants au profit du père , suis-je obligée de rester en savoie jusqu'à la majorité de mes enfants? Mon ex mari a des antécédents judiciaires pour coups et blessures envers un ancien voisin, cela est-il pris en compte ? Du fait de sa maladie et de son comportement général, ses réactions me font peur, que se passerait-il en cas de menaces ou de violences?
Ma fille ainée était d'accord pour partir vivre en normandie, mon fils n'en a pas envie de peur d'être séparé de son père définitivement, ce qui n'est pas mon but. Mon ex-mari peut-il aller au commissariat ou chez un juge pendant son week-end de garde pour faire constater le désaccord des enfants, et si oui, cela jouerait-il en ma défaveur? un juge peut -il réellement m'obliger à rester ici, me sachant isolée et sans aucune aide quotidienne, je dois m'absenter de mon travail pour raisons familiales régulièrement (maladie des enfants, visites chez le medecin, rencontres ave les professeurs) et dans ce cas, mes heures perdues ne sont pas payées puisqu'étant vacataire en mairie ( je travaille en service animation aupres d'enfants de 3 à 12 ans depuis quatre ans), je suis payée en fonction des heures réalisées, et non mensualisée. De plus, étant sans soutien, je ne peux pas trouver un travail à temps plein, je dois garder du temps pour mes enfants qui ne sont pas encore autonomes, ce qui réduit beaucoup mes possibilités dans un avenir proche d'obtenir un emploi à temps plein, et donc un salaire décent .
Merci de me répondre rapidement, je me sens totalement démunie, et très stressée par toute cette situation.