生後2週間新生児の発熱について

20代/女性 - 2013/04/23

昨日の夜、赤ちゃんの身体が熱く感じて、熱を測ったら38度ありました。
室温は20度、短肌着と長肌着だったものを、長肌着だけにしたところ、37.5度くらいまで下がりました。
ところが、今朝も37.9度あり、掛け布団をやめてお腹にだけタオルをかけたらまた熱が下がって37.0から37.4度くらいになってきています。
そして、今日の夕方も、短肌着を足したら37.8度あるので、また長肌着一枚にしました。
長肌着一枚で、なんか寒そうなのですが、きせすぎによる発熱なのでしょうか。
それとも、体調不良によるものなのでしょうか。
便、尿は回数は普通ですが、今日は母乳をあまり飲みません。吸っても片方2,3分ほどですぐねてしまいます。昼間はいつもねているのですが、授乳の時は片方5分から10分飲んでる気がします
脱水が心配で、朝ミルクを足しました。
初めての育児なのでしんぱいです。単に服装の問題ならよいのですが、気候は特に変わってないのに今までと違い、熱が高めの状態が続いてる気がして。受診すべきですか？