新生儿住保温箱的医疗费用是可以报销的，但前提是要为其办理新生儿医保卡。在办理了医保卡后，保温箱以及所有的治疗费用都将在医保的覆盖范围内。当新生儿达到一定的体重或生命体征平稳，从保温箱中转移出来后，相应的费用也可以得到报销。如果没有为新生儿办理医保卡，那么首先需要办理医保卡，然后才能进行报销。

以上内容仅供参考，具体情况请咨询当地医保部门。