Грунтовки бывают разными, по составу, по предназначению, так к примеру грунтовку "Бетонконтакт" просто бесполезно пробовать удалять водой, или раствором воды с моющим средством.
В составе такой грунтовки кварцевый песок и её главное предназначение улучшения адгезии за счёт шероховатого слоя.
Работает и по стеклу в том числе.
Очищается только механически, например деревянной лопаткой, или пластиковым шпателем (можно и лезвием, но работать надо аккуратно),
чтобы не поцарапает стекло, остатки смываются любым средством для чистки стёкол.
Лопатка и шпатель при очистки от грунтовки держим почти параллельно поверхности.
Если это акриловая грунтовка и она свежая, то можно удалить обычной водой, намочите губку в воде, увлажните загрязнения и минут через пять грунтовка разбухнет, смываем остатки загрязнения той же губкой промытой в воде.
Можно и такой же грунтовкой смыть грунтовку, то есть наносим грунтовку на грунтовку, чуть ждём, застарелый слой станет мягче и далее смываем остатки загрязнения водой.
На финише моем стекло полностью с использованием средств для чистки стёкол.
Есть грунтовки которые можно смыть при помощи растворителей, к примеру "классика" это Уайт-спирит.
Им же (Уайт Спиритом) удаляем возможно оставшиеся жирные пятна (следы) после грунтовки.
Вывод:
Определитесь с типом грунтовки и от этого отталкивайтесь при выборе технологии очистки и средств очистки, свежая грунтовка и простой водой смывается, ибо стекло не впитывающее основание грунтовка на поверхности.