Это, наверное, некое проявление родительского эгоизма. Лелея свои страхи за любимого внука, они оказывают ему "медвежью услугу".
Также вероятно, что они опасаются за твою судьбу, поэтому стремятся оградить тебя от негативного влияния (по их мнению). Доказать престарелым людям что-либо крайне сложно (в большинстве случаев), поэтому лучше придумать мазу, которая бы устроила всех. Ну, например, скажи дедам, что расстался с девушкой. Девушке скажи, чтобы она не обращала внимания на дурь. И будь счастлив. Тут есть один минус: нельзя будет появляться у тебя дома с ней. Другой вариант - пусть девушка докажет, что достойна тебя (в глазах дедов). Надо поговорить с ними и узнать, что конкретно в ней не устраивает, а потом на живом примере убедить, что того, что не нравится, в девушке нету.
А если девушка не глупая, то сама все поймет и не будет особо возникать. Так что можешь оставить все так, как есть. Просто не афишируй, куда ты уходишь (В: "Куда пошел?" О: "На улицу!"), не рассказывай о ней в семье.