- Sangens titel, "Sweet Jane," kunne være en reference til marihuana, da "Jane" er et slangudtryk for stoffet.
- Teksterne nævner det "grønne lys", som kunne repræsentere farven forbundet med marihuana.
- Teksterne beskriver også hovedpersonens "hovedspinning", hvilket kunne være en hentydning til virkningerne af marihuana.
Desuden var Reed kendt for sin åbne udforskning af stofbrug og andre kontroversielle emner i hans musik, som understøtter fortolkningen af "Sweet Jane" som værende om marihuana.
Det er dog vigtigt at bemærke, at Reeds tekster ofte er åbne for flere fortolkninger, og det er i sidste ende op til den enkelte lytter at bestemme, hvad sangen betyder for dem.