Хотя многие в Лондоне полагали, что песня ссылалась на торговца произведениями искусства Роберту Фрейзеру, на самом деле в ней говорилось о Роберте Фрейманне, управлявшим клиникой на востоке Манхэттена, 78й улице. Известный как Доктор Роберт или как Великий Белый Отец, Фрейманн славился тем, что давал пациентам, в основном богатым ньюйоркцам, инъекции витамина B-12, содержащие большие дозы амфетамина. Молва о его готовности "прописать лекарство" дошла и до Леннона с Маккартни во время их поездок в Америку.

"Джону и мне это показалось весьма интересным: воображаемый доктор, который лечит пациентов наркотиками. Песня была пародией на эту идею. Это просто насмешка. Насколько мне известно, никто из нас никогда не обращался к доктору за подобными вещами. Была такая мода, и до сих пор есть. Тебе вколют витамин, и ты почувствуешь себя лучше.

Джон Леннон назвал песню автобиографической:

"Doctor Robert" – еще одна моя песня. В основном о наркотиках и колесах. Она обо мне. Я всегда брал с собой все колеса в турне. По крайней мере, в начале. Позднее этим стали заниматься администраторы, а мы их просто держали в карманах, на случай необходимости".