Раевский познакомился с А. С. Пушкиным на Кавказе, куда попал для лечения и где служил в Кавказском корпусе. Они виделись на Северном Кавказе, в Крыму, в Каменке, в Киеве и в Одессе. Позднее повстречались в Москве. Но от прежних отношений в душе Пушкина остался горький осадок — и общение не возобновилось.
В своё время этот человек поразил воображение поэта. Он казался необычайным. Высокий, худой, в очках, с умным насмешливым взглядом небольших тёмных глаз, Александр Раевский держался загадочно, говорил парадоксами. Пушкин прочил ему необыкновенную будущность. Считается, что в пушкинском «Демоне» отражены черты Раевского. Но судьба распорядилась иначе. Блестящий ум Раевского, всё отрицая и осмеивая, ничего не мог созидать. Так много обещавший молодой человек сделался желчным и завистливым, как о том пишет известный его недруг Филипп Вигель:
Ещё зимой чутьём слышал я опасность для Пушкина, не позволял себе давать ему советов, но раз шутя сказал ему, что по африканскому происхождению его всё мне хочется сравнить его с Отелло, а Раевского с неверным другом Яго. Через несколько дней по приезде моём в Одессу встревоженный Пушкин вбежал ко мне сказать, что ему готовится величайшее неудовольствие. В это время несколько самых низших чиновников из канцелярии генерал-губернаторской, равно как и из присутственных мест, отряжено было для возможного ещё истребления ползающей по степи саранчи; в число их попал и Пушкин. Ничего не могло быть для него унизительнее…
А. Н. Раевский, 1820-е годы
По сведениям Вигеля, это Раевский предложил отправить поэта на борьбу с сельхозвредителями. Он играл чувствами поэта вместе с женой губернатора Воронцовой; молва подозревала их в любовной связи. Только позднее Пушкину открылось истинное лицо того, кого он считал своим другом.