5个半月的婴儿半夜2点多发烧37，吃了小瑞芝。

根据宝宝的体温，此时是不建议用药的，因为体温还不是很高，是可以通过物理降温控制的。因为此时宝宝比较小，身体自我调节体温的能力比较弱，过早应用退热药后容易造成宝宝的体温下降比较明显。

及时复查宝宝的体温，如果反复的升高，可以考虑给予温水擦浴、额头冷敷等物理降温。在体温超过38.5时，可以考虑用药。