我前一次的婚姻生了两个孩子,现在我离婚了一边一个,但是之前我们在协议书上写的是判给我的,我让她奶奶带她到上幼儿园之前,但是我现在又找了一个异地的,他让我过去他那边跟他一起,我现在就是很纠结,我舍不得我的小孩,让她们两先让奶奶带着,我过去以后,等她上幼儿园再接她过去,但是这期间我又舍不得,觉得孩子长期没见到我会对我没有感情,我该怎么办?