一般情况下，女性腋窝下出现绿豆大小的坚硬肿块可能是由淋巴结炎、腋窝汗腺炎、乳腺增生等因素引起的。根据具体病因的不同，需要选择相应的治疗方法。以下是具体的分析：

1. 淋巴结炎：

腋窝下的淋巴结是身体重要的免疫器官，感染或炎症反应会导致硬块形成。在平时应保持腋窝区域的清洁和干燥，避免过度出汗。可以遵循医生的建议，在患处使用局部消炎药膏，例如莫匹罗星软膏、红霉素软膏等。

2. 腋窝汗腺炎：

腋窝汗腺炎是常见的皮肤疾病，也可能引起腋窝下的硬块。平时应使用温和的清洁剂清洗腋窝区域，避免使用过度刺激的化学品。可以在医生的指导下使用阿司匹林肠溶片、对乙酰氨基酚片等非甾体抗炎药进行治疗。

3. 乳腺增生：

乳腺组织也可能在腋窝下生长，乳腺组织增生会形成硬块。需要前往医院进行进一步的检查和治疗。可能需要进行乳腺超声、乳腺钼靶等检查，或者进行手术切除。

此外，脂肪瘤也可能在腋窝下形成硬块。建议及时就医，接受专业的诊断和治疗。