这可能是多种情况引起的，包括但不限于男性乳腺癌或其他地方的肿瘤转移。为了确定具体原因，建议您尽快到大医院进行胸部彩超和肺部CT检查。

虽然不能排除乳房炎症的可能性，但鉴于社区医生的反馈，还是建议您先进行上述检查。请务必尽快安排检查，以便及早明确病因并采取相应的治疗措施。