- 'It Ain't Me Babe' sa objavuje ako posledná skladba na Side 2 Dylanovho štvrtého štúdiového albumu, Iná stránka Boba Dylana . Toto bol legendárny album, ktorý Dylan nahral počas jedinej celonočnej štúdiovej relácie s pomocou „pár fliaš Beaujolais“. Posledný hlavný odber bol v plechovke o 1:30.
- Podľa legendy je úvodný riadok 'Go away from my window...' pokrik na pieseň 'Go 'Way From My Window' od kolegu folkového speváka Johna Jacoba Nilesa - Dylan citoval Nilesa ako raný vplyv.
Tiež refrén 'nie, nie, nie, to nie som ja, zlatko' je volanie späť k Beatles, 'ona ťa miluje, áno, áno, áno,' ako to bolo počuť v ich piesni ' She Loves You . - Toto bola jedna z piesní, ktoré dostal Dylan v elektrickom aranžmáne, keď v roku 1965 začal s koncertmi na elektrickej gitare.
- Dlhoročný spoločný obdivovateľ Johnny Cash zahrnul túto pieseň s Dylanovým požehnaním pre svoj album Pomarančový kvet špeciál . Zaoberali sa ňou aj Joan Baez, Peter, Paul and Mary, Johnny Thunders a The Turtles, pričom verzia The Turtles sa dostala na 8. miesto v americkej hitparáde singlov.
- Texty pre Iná stránka Boba Dylana boli výsledkom jeho vtedajšieho pokusu vydať knihu poézie. Kniha zatiaľ nezabrala, no Dylanovi sa z mentálneho cvičenia aj tak darilo. Bolo to aj rok po atentáte na Kennedyho – počujete v textoch intenzívnejšiu oduševnenosť? Najmä pri piesňach ako „Chimes of Freedom“ by učenec Dylana Clinton Heylin poznamenal, že Dylan sa znovuzrodil ako básnik cesty.