Вы можете это сделать только по суду, определив порядок общения с ребенком. Но совсем запретить — вряд ли.
Статья 55 Семейного кодекса устанавливает:
Право ребенка на общение с родителями и другими родственниками.
1. Ребенок имеет право на общение с обоими родителями, дедушкой, бабушкой, братьями, сестрами и другими родственниками. Расторжение брака родителей, признание его недействительным или раздельное проживание родителей не влияют на права ребенка.
В случае раздельного проживания родителей ребенок имеет право на общение с каждым из них. Ребенок имеет право на общение со своими родителями также в случае их проживания в разных государствах.
2. Ребенок, находящийся в экстремальной ситуации (задержание, арест, заключение под стражу, нахождение в лечебном учреждении и другое), имеет право на общение со своими родителями и другими родственниками в порядке, установленном законом.

Не забывайте, что если вы считаете, что бабушка плохо влияет на ребенка, то вам это необходимо будет самостоятельно доказывать в суде. Простого желания будет мало.