В обоих словах пишется Ё: сгущёнка, тушёнка.

«Глагол любит букву ё и ненавидит букву о» – эта фраза позволяет запомнить, что в глагольных формах и образованных от них словах пишется буква ё, а не о: в глагольных окончаниях (лжёшь, стрижёт, печём, толчёте), в глаголах несовершенного вида на -ёвывать и отглагольных существительных на -ёвывание (размежёвывать, выкорчёвывать, перекочёвывать, затушёвывать; размежёвывание, выкорчёвывание, затушёвывание); в страдательных причастиях на -ёванный (размежёванный, раскорчёванный, затушёванный); в отглагольных существительных на -ёвка (ночёвка, корчёвка); в суффиксах страдательных причастий и отглагольных прилагательных -ённ- и -ён- и в словах, производных от таких причастий и прилагательных (напряжённый, прожжённый, пропечённый, размягчённый, отрешённый, упрощённый; гружёный, жжёный, печёный, учёный, тушёный, вощёный; напряжённость, отрешённость, упрощённость, учёность, напряжённо, отрешённо, упрощённо, жжёнка, тушёнка, сгущёнка).

Написание объясняется в информационно-поисковой системе «Орфографическое комментирование русского словаря». Там же можно прочитать уточненные правила.