水痘是一种常见的病毒感染，在宝宝4个月大时出现发烧可能是水痘的症状之一。以下是一些建议，希望能帮到您：

1. 隔离：水痘传染性很强，为了避免传染给其他宝宝，建议隔离宝宝，直到水痘完全消退。

2. 保持凉爽：保持宝宝凉爽，避免过热。可以穿宽松的衣服，使用凉毛巾擦拭身体，以帮助降低体温。

3. 多喝水：宝宝发烧时，需要补充足够的水分。建议给宝宝喝足够的水，以保持身体水分平衡。

4. 退烧药物：如果宝宝体温过高，可以考虑使用退烧药物。但请咨询医生或药剂师的建议，以确保使用合适的药物。

5. 观察病情：密切观察宝宝的病情，包括体温、精神状态、食欲等。如果出现任何严重的症状，如高热、抽搐等，请立即就医。

6. 保持皮肤清洁：保持宝宝的皮肤清洁，可以帮助控制感染。使用温和的肥皂和水清洗宝宝的皮肤，并保持干燥。

7. 接种疫苗：水痘疫苗是预防水痘的有效方法。建议按照医生的建议，给宝宝接种水痘疫苗。

希望这些建议对您有所帮助。如果宝宝有任何其他症状或病情加重，请立即就医。