Da Griffins første store kærlighed og ekskæreste, Theo, drukner ved en ulykke, falder Griffins verden sammen. Selvom Theo var taget af sted på college og blevet kæreste med Jackson, var Griffin ikke i tvivl om, at han på et tidspunkt ville komme tilbage til ham.

Oven i det hele er Jackson den eneste, der forstår Griffins hjertesorg. Men uanset hvor meget de taler sammen og åbner sig for hinanden, bliver Griffin mere og mere deprimeret. Han er ved at miste sig selv til sine tvangstanker og destruktive valg. Og de hemmeligheder, som han har gået og gemt på, er ved at flå ham i stykker.

Hvis Griffin skal have håb omm en fremtid, må han først konfrontere sin fortid.

Fortid er alt jeg har er en heftig fortælling om kærlighed, sorg, psykisk sygdom og de rystende konsekvenser, det kan have, hvis man ikke formår at gøre op med fortiden.