小孩晚上体温37.4℃，考虑还是一个临界体温，这个时候要结合孩子的具体情况来看，如果孩子的睡眠良好，吃奶良好，不伴有咳嗽，流鼻涕，打喷嚏等症状的话，可以采取给孩子物理降温，配合多喝水来改善，并注意观察孩子体温变化。如果孩子伴有上述表现的话，多数考虑还是存在呼吸道的感染，这个时候就需要用清热解毒的药物配合治疗了。