Em meados de 1840 Gemmy Fairley, um rapaz de 13 anos, é expulso do navio em que viajava e despejado no extremo norte da Austrália, onde é acolhido pelos aborígenes. Dezasseis anos mais tarde regressa ao mundo dos europeus, com a chegada dos primeiros colonos àquela área: homens e mulheres que tentam construir o seu lar num local estranho e inóspito, carregados de esperanças e receios.
Abrigado pelos McIvor, a família das crianças com quem estabeleceu o primeiro contacto, Gemmy parece ter garantido um lugar na comunidade, mas o medo e a desconfiança pairam no ar e existe uma grande ambiguidade no sentimento dos colonos, que oscila entre o fascínio e a repulsa. Recordando a Babilónia é o magnífico retrato de um continente e um fascinante relato sobre as dificuldades sentidas pelos colonos durante o seu primeiro contacto com o desconhecido.