Déménagement de la maman

Bonjour,
Mon ami est moi vivont à 35 kms d'écart, donc nous ne pouvons vivre ensemble pour le moment car nous avons 2 enfants chacun de notre côté.
Nous avions prévu de trouver un logement entres les deux villes pour pouvoir un jour habiter tous ensemble. Le gros problème c'est que l 'ex femme de mon conjoint à décidé d'acheter dans la ville ou ils sont actuellement sans lui en parler alors qu'il avait évoqué l'idée de quitter la ville pour qu'on puisse vivre tous ensemble. Elle a un conjoint qui n'a pas d'enfants et qui n'a aucuns soucis de garde ou autre. Sachant qu'elle était au courant de notre projet et qu'elle a acheté sans nous en parler en amont, je voulais savoir si elle avait le droit car cela touche la garde des filles.
L'école se trouve dans la ville ou elle a acheté mais on avait évoqué le changement d'école aussi, du coup on ne pourra pas vivre ensemble avant au moins 10 ans car nos enfants sont encore en primaire et début de collège.
Auriez-vous des idées au niveau juridique pour régler ce problème.
Merci