ダウンは用意された方がいいと思います。
コパさんも回答されているように、気温差は2,3度でしょうけど、冬の時期の2,3度は、さすがに堪えます。
米沢はそろそろ雪の降る時期ですので、寒さ対策とともにクルマのすべり止め対策も考慮された方がいいでしょう。

福島と米沢では、気温差は2℃ぐらいでしょうか。
ただこれからの時期、西高東低の冬型の気圧配置なると、福島では晴れていても、米沢では雪になっていたりすることがあります。

ダウンを持って行かずに後悔するよりも、ダウンを持って行って後悔する方がまだいいかと思います。暑かったら脱げばいいので…。

今の時期は、ダウンジャケットを着るか微妙なところですよね。
福島と米沢の気温差は２～3度かと思いますが、最低気温は一桁台になるようですので、ダウンジャケットは必要かと思います。