是的，冬季新车需要换用适合冬季的玻璃水。因为普通的玻璃水在寒冷天气下可能会结冰，导致不能使用，甚至可能对车辆造成损害。而冬季玻璃水通常包含防冻成分，可以有效防止结冰，保持清晰的前挡风玻璃视野。因此，为了确保在冬季能够正常使用玻璃水并保持驾驶安全，建议更换适合冬季的玻璃水。