Po wydanym w 2011 roku albumu Kiss Each Other Clean, który zadebiutował na drugiej pozycji listy Billboardu, Ghost On Ghost jest piątym studyjnym albumem mieszkającego w Austin Sama Beama.

Magazyn Rolling Stone tak opisywał Kiss Each Other Clean: Muzyka pop nie widziała czegoś takiego od czasów Cata Stevensa. Z kolei Pitchfork napisał: Przypomina to wspaniałe nagrania obdarzonych wyjątkowym głosem wokalistów-autorów piosenek z lat sześćdziesiątych i początku siedemdziesiątych. "Astral Weeks", "Goodbye Yellow Brick Road"... Beam uznał, że przyszedł jednak czas by odejść od tego co nazywał "niespokojnym napięciem", które cechowało wspomniany album, a także poprzedni The Shepherd's Dog. Tym razem, odnoszę wrażenie, że po drodze jaką podążałem na ostatnich płytach, wracam do siebie. Ghost On Ghost został nagrany w Nowym Jorku i wyprodukowany przez wieloletniego współpracownika Beama Briana Decka (Modest Mouse, Califone, Fruit Bats). Beam, aby zrealizować swoją wizję, zaprosił do współpracy wyjątkowych muzyków, wśród których znaleźli się: Rob Burger z Tin Hat Trio, Steve Bernstein, Tony Scherr, Kenny Wollesen i Briggan Krauss z Sex Mob, jazzowy perkusista Brian Blade, puzonista Curtis Fowlkes z Jazz Passengers, basista Tony Garnier (z zespołu Boba Dylana), wiolonczelistka Marika Hughes, Maxim Moston i Doug Wieselman z Antony And The Johnsons oraz Anja Wood. Burger pracował z Beamem przez rok z przerwami, tworząc aranżację instrumentów smyczkowych i dętych na Ghost On Ghost. Na okładkę Beam, który jest także artystą wizualnym, wybrał zdjęcie z serii Private Views znanej fotograf Barbary Crane.