Não tem a ver com o nome da Igreja - desterro - mas a igreja recebeu os carmelitas que foram despejados da Igreja de Nossa Senhora do Carmo, que fica em frente ao Paço Imperial, quando a corte de D. João VI chegou ao Brasil em 1808: o príncipe regente gostou tanto daquela igreja que a transformou na Sé da corte, e os carmelitas foram embora em procissão para esta outra, que fica perto da Sala Cecília Meirelles. Levaram para ela a imagem de Nossa Senhora do Carmo que até hoje está no altar-mor e as de São Elias e São Eliseu, que ladeiam o altar-mor - o tamanho desproporcional de ambas em relação ao restante do retábulo é um indicativo de que elas não foram originalmente feitas para ficar ali. É uma igreja de decoração leve, alegre. Tanto pelo exterior com as torres recobertas de azulejos, (a do lado direito ficou por terminar, sem ter recebido sino), quanto pelo interior azul, com linhas douradas marcando as divisões dos altares laterais, do retábulo etc. O problema é a região em volta: a Lapa hoje exige atenção em qualquer hora do dia, pela insegurança. O negócio é não se distrair - a não ser dentro da igreja.