婴儿扁桃体炎不一定会发热。

虽然大部分情况下，病原体入侵后，机体为抵抗外来病原体会启动免疫应答，此时会产生内源性致热源，作用于体温调节中枢，使体温调定点上移而出现发热的现象。但由于个体差异，如免疫状态不同、是否患有基础疾病等，都可能导致免疫应答的程度不同，进而影响是否出现发热症状。此外，如果病原体毒性较弱或者婴儿自身免疫力较强，则可能不会出现明显的临床表现，甚至无任何不适症状。

若伴随有咽部疼痛、吞咽困难等症状，且持续时间较长，则需考虑是否存在慢性扁桃体炎。这种情况多因急性扁桃体炎反复发作或未得到及时治疗导致，通常会引发局部黏膜充血水肿，但不一定伴有发热现象。

在关注发热的同时，也要注意观察患儿的精神状态和食欲变化，以确保其舒适与健康。必要时，可遵医嘱使用抗生素治疗，如阿莫西林克拉维酸钾干混悬剂、头孢克肟颗粒等药物控制感染。