A principal função de um refrigerador é "retirar" calor do ambiente (neste caso, o interior da geladeira) e "jogá-lo" para fora.
O fluxo de calor sempre se dá do corpo de maior temperatura para o de menor temperatura. Conclusão: o calor somente será "enviado" para o meio externo caso a temperatura ambiente seja menor do que a temperatura do gás/líquido que vai liberar essa energia.
Lembrando que por dentro da geladeira corre uma substância refrigerante (ora gás, ora líquido) que deve receber ou ceder o calor para que o equipamento funcione. Além disso, existe uma válvula chamada compressor, que comprime o gás, liquefazendo-o e liberando energia (calor) para fora. Logo quanto maior a temperatura ambiente, mais o compressor tem que trabalhar (consumindo mais energia) para permitir que a substância refrigerante tenha uma temperatura maior do que a do meio externo e, assim, o fluxo de calor ocorra da geladeira para o ambiente.
Quando colocamos roupas atrás da geladeira estamos dificultando a dissipação desse calor.