Все почитатели блаженной Ксении, все получившие от нее какую-нибудь помощь, какую-нибудь ласку при ее жизни, старались молитвами своими отблагодарить ее по кончине за все то добро, какое было им оказано, старались не прерывать с ней духовного общения и по ее смерти. Вот  почему, наверное, можно думать, что с 1-го же дня погребения Блаженной, могила ее посещалась многими и многими лицами, приходившими помолиться об ее упокоении. И на молитвенную-то память о себе Блаженная из загробного мира откликалась делами милости.

Тогда и не знавшие Блаженную при жизни, стали прибегать к ее ходатайству, к ее помощи перед Богом. Служили панихиды по Блаженной. Достоверно известно, что в двадцатых годах прошлого столетия на могилку Ксении народ стекался толпами, веря, что на молитвенный зов Блаженная не замедлит откликнуться помощью. Каждый посетитель могилки Ксении непременно желал хоть что-нибудь иметь у себя с этой могилки, а так как взять с могилки, кроме землицы, было нечего, то брали именно землю, веря, что земля лучшее средство от болезней и горестей.

Ежегодно вся земля с могильной насыпи над гробом усопшей по горсточке разносилась посетителями; ежегодно приходилось делать новую насыпь и ежегодно насыпь снова разбиралась посетителями. Пришлось положить сверху могильной насыпи каменную плиту; но посетители разбили плиту на мелкие кусочки и разнесли по домам; положили новую плиту и с этой плитой случилось то же. Но, разбирая землю и ломая плиты, посетители клали на могилку свои посильные денежные пожертвования, которыми вначале пользовались нищие.

Затем могилку Ксении обнесли оградой, к которой прикрепили кружку для сбора пожертвований на сооружение над могилой часовни. И пожертвования не заставили долго ждать себя. На собранные таким образом деньги, при содействии некоторых почитателей рабы Божией Ксении, над ее могилой была сооружена небольшая, из цокольного камня, часовня с двумя окошечками по бокам, с дубовым иконостасом в восточной стороне и с железной дверью - с западной. Над дверью с наружной стороны сделали надпись: "Раба Божия Ксения." Могильную насыпь над самой могилкой также обделали цоколем, а сверху положили плиту со следующею, неизвестно кем составленною, надписью: "Во имя Отца и Сына и Святаго Духа.

На сем месте положено тело рабы Божией Ксении Григорьевны, жены придворного певчего, в ранге полковника, Андрея Федоровича. Осталась после мужа 26 лет, странствовала 45 лет, а всего жития 71 год; звалась именем Андрей Федорович. Кто меня знал, да помянет мою душу для спасения души своей. Аминь."

Блаженная Ксения погребена на Смоленском кладбище к югу от храма во имя Смоленской иконы Божией Матери. В 1902 году на могиле святой блаженной Ксении по проекту архитектора Славина была возведена каменная часовня, восточную стену которой в 1992 году украсила мозаичная икона святой подвижницы.

В 1987 году часовня была освящена нынешним Святейшим Патриархом Московским и всея Руси Алексием II. Сюда стремятся православные паломники со всех концов России и из других стран, чающие получить утешение в скорбях и помощь в благих начинаниях от молитвенницы о душах наших - святой блаженной Ксении.