Noch bevor der Zweite Weltkrieg ausbricht, verliebt sich der polnische Jude Leo Gursky (Derek Jacobi) in seine Nachbarin Alma (Gemma Arterton). Er verspricht ihr, sie ein Leben lang zum Lachen zu bringen und schreibt sogar ein Buch über seine "meistgeliebte Frau der Welt", das er die "Die Geschichte der Liebe" nennt. Doch dann muss Alma ins ferne Amerika fliehen und Leo zurücklassen. Seine große Liebe aber wird dieser nie vergessen. Jahrzehnte später stolpert ein junges Mädchen in New York über das Lieblingsbuch ihrer Eltern: Die 15-jährige Alma (Sophie Nélisse) wurde nach einer Figur aus eben jenem Roman benannt, den Leo vor mehr als einem halben Jahrhundert geschrieben hat. "Die Geschichte der Liebe" führt ihre Schicksale über Generationen hinweg zusammen.