- 'It Ain't Me Babe' appare come l'ultima traccia sul lato 2 del quarto album in studio di Dylan, Un altro lato di Bob Dylan . Questo è stato il leggendario album che Dylan ha registrato in un'unica sessione in studio per tutta la notte, aiutato da 'un paio di bottiglie di Beaujolais'. L'ultima master take è stata nella lattina entro l'1:30 del mattino.
- Secondo la leggenda, la frase di apertura 'Go away from my window...' è un grido alla canzone del collega cantante folk John Jacob Niles 'Go 'Way From My Window' - Dylan ha citato Niles come una delle prime influenze.
Anche il ritornello 'no, no, no, it ain't me babe' è un richiamo ai Beatles 'lei ti ama, yeah, yeah, yeah', come si sente nella loro canzone 'She Loves You'. - Questa è stata una delle canzoni a cui Dylan ha dato un arrangiamento elettrico quando ha iniziato i concerti di chitarra elettrica nel 1965.
- L'ammiratore comune di lunga data Johnny Cash ha interpretato questa canzone con le benedizioni di Dylan per il suo album Speciale Fiori d'Arancio . Anche Joan Baez, Peter, Paul e Mary, Johnny Thunders e The Turtles lo hanno coperto, con la versione dei The Turtles che ha raggiunto l'ottavo posto nelle classifiche dei singoli statunitensi.
- I testi per Un altro lato di Bob Dylan erano una conseguenza del suo tentativo di pubblicare un libro di poesie in quel momento. Il libro non ha ancora preso, ma Dylan ha comunque beneficiato dell'esercizio mentale. Questo è stato anche un anno dopo l'assassinio di Kennedy: riesci a sentire un'intensa anima nei testi? Soprattutto con canzoni come 'Chimes of Freedom', lo studioso di Dylan Clinton Heylin avrebbe notato che Dylan era rinato come un poeta della strada.
