根据提供的情况分析，乳房周围的褐色斑点，考虑是皮肤色素沉着。随着年龄的增长，内分泌失调，全身皮肤都有可能会长出褐色的斑点。

如果没有其他不舒服的情况，可不用担心。但如果伴有乳房的胀痛、乳头瘙痒、乳头溢液等，就需要排查一下是不是有乳腺方面的疾病，建议到医院乳腺专科检查一下，可以做乳腺彩超，钼靶检查或者磁共振检查。