通常情况下，小孩腋下体温37.5℃不正常。具体情况分析如下：
正常体温为36℃到37℃之间，因此小孩腋下体温37.5℃不正常，小孩存在低烧的情况，家长可以按照医嘱给小孩服用小儿豉翘清热颗粒、小儿柴桂退热颗粒、对乙酰氨基酚片等药物进行治疗。家长还可以通过用温水打湿毛巾后，擦拭小孩的额头、颈部、腋窝等部位，可以起到物理降温的作用。