Sangens omkvæd gentager linjen "I don't want your leftovers", der udtrykker sangerens afvisning af resterne af det tidligere forhold og deres vilje til at skabe en ny og tilfredsstillende fremtid for sig selv.
Teksterne tegner også et billede af sangerens følelsesmæssige rejse, da de kommer overens med slutningen af forholdet. De beskriver, at de føler sig som et "spøgelse" i deres liv, der kæmper for at finde deres plads i verden uden deres tidligere partner.
På trods af smerten og usikkerheden antyder sangen en følelse af modstandskraft og håb. Sangerinden erkender, at de stadig kan være hjemsøgt af fortiden, men udtrykker deres vilje til at fortsætte fremad.
Samlet set er "Your Leftovers" en gribende sang om kærlighed, tab og søgen efter nye begyndelser. Det fanger de rå følelser og udfordringer, der følger med at komme videre fra et betydningsfuldt forhold.