茎皮上长小水泡不痛不痒可以考虑使用炉甘石洗剂、阿昔洛韦、红霉素、曲安奈德等药物进行治疗。但是，由于该症状可能涉及多种疾病，建议及时就医以确定确切诊断并获得适当治疗。

1.炉甘石洗剂

炉甘石洗剂适用于急性瘙痒性皮肤病的治疗，如荨麻疹、痱子等。该药物具有收敛和保护皮肤的作用。使用时摇匀，注意不要让其接触到眼睛和其他黏膜。

2.阿昔洛韦

阿昔洛韦可用于带状疱疹感染引起的皮肤病变，包括小水泡。此药物为抗病毒药物，能够抑制病毒复制。肾功能减退者需慎用本品。

3.红霉素

红霉素可考虑用于细菌感染导致的小水泡。此药物属于大环内酯类抗生素，能有效抑制多种革兰阳性菌及某些革兰阴性菌。对青霉素过敏患者应慎用。

4.曲安奈德

曲安奈德可以减轻炎症反应，对于无痛不痒但有肿胀或发红的小水泡有一定效果。它是一种糖皮质激素，具有抗炎作用。长期大面积使用可能导致皮肤萎缩或其他副作用，因此应在医生指导下进行。

针对茎皮上的小水泡，建议避免搔抓以防感染，保持局部干燥清洁也很重要。此外，若出现疼痛或渗液等症状，则可能需要及时就医并调整用药方案。