水痘引起的口腔溃疡在儿童中比较常见。首先，需要注意保持口腔清洁，避免感染。可以使用一些局部麻醉药物来缓解疼痛。对于4岁的孩子，需要在医生的指导下使用药物。

在使用任何药物之前，建议先去医院就诊，医生会根据孩子的具体情况开具合适的药物。同时，注意孩子的饮食，选择易于咀嚼和吞咽的食物，多喝水，保持充足的休息。