在这种情况下，37.5度的体温属于轻微发热。通常情况下，手足口疫苗接种后可能会出现一些副作用，包括发热。对于小儿手足口病的治疗，首先需要注意的是保持良好的卫生习惯，避免交叉感染。同时，适当的休息和饮食也非常重要。关于用药，如果体温超过38.3度，可以考虑使用退烧药。

对于6-11月龄、体重在5.5-8.0公斤的小儿，建议每次使用一滴管（1.25ml）的退烧药。每6-8小时可以重复使用，但24小时内不超过4次。请注意，使用前务必详细阅读说明书，排除过敏及用药禁忌后遵医嘱。如果在用药期间出现任何不适，应及时就诊。