宝宝发烧37,6度，现在应该怎么办？

刚刚量了宝宝的腋下体温，是37.6度。有点低烧。昨天晚上睡觉的时候宝宝是没穿衣服睡的，只穿了一个小肚围和纸尿裤，当时的室内温度是22度多，盖的是被子没有用睡袋。早晨8点半的时候，带他出去转了一小圈，不知道是不是着凉引起的。我现在应该怎么办呢？好像不用吃药吧，是不是光做物理降温就可以了？要把宝宝的衣物解开吗？是不是不能穿太厚、盖太多？