Анна и ее мать объясняли столь скоропалительный развод психической болезнью мужа (мать Вырубовой характеризовала бывшего зятя как импотента и психопата с садистскими наклонностями). В свете же намекали на некую «особенную» близость, имевшую место между императрицей и ее молоденькой фрейлиной.
Впрочем, это Сергей Юльевич Витте в своих воспоминаниях писал, что «сама Аня Танеева некрасива, похожа на пузырь от сдобного теста», и говорил о ней как о «самой обыкновенной, глупой петербургской барышне, влюбившейся в императрицу и вечно смотрящей на нее влюбленными медовыми глазами со вздохами: „ах, ах!“ Сергей Марков, чья книга „Покинутая царская семья“ вышла в 1928 году в Вене, впервые увидел Вырубову в двенадцатилетнем возрасте и был просто пленен ею: „Внешне она была очень красивой женщиной, невысокого роста золотистой блондинкой с великолепным цветом лица и поразительно красивыми васильковыми синими глазами, сразу располагавшими к себе“».
На вкус и цвет, как говорится, товарищей нет. Однако об Анне Вырубовой сохранилось больше отрицательных, нежели положительных отзывов современников. Так, министр внутренних дел Протопопов был уверен, что Вырубова была «фонографом слов и внушений, всецело Распутину преданная, послушная и покорная».
Его коллега, министр А. Н. Хвостов считал, что «Вырубова – несчастная женщина, истеричка, недалекая, которая попала под гипнотическое влияние Распутина».
Учитель французского языка царских детей швейцарец Пьер Жильяр высказался довольно резко: «Ее Величество любила окружать себя людьми, которые бы всецело отдавали ей самих себя, которые бы всецело отдавались ей и почти отказывались от своего „я“. Она считала таких людей преданными ей. На этой почве и существовала Вырубова. Вырубова была неумная, очень ограниченная, добродушная, большая болтушка, сентиментальная и мистичная. Она была очень неразвитая и имела совершенно детские суждения. Она не имела никаких идей. Для нее существовали только одни личности. Она была совершенно неспособна понимать сущность вещей – идеи. Просто были для нее плохие и хорошие люди. Первые были враги, вторые – друзья. Она была до глупости доверчива, и к ней проникнуть в душу ничего не стоило. Она любила общество людей, которые были ниже ее, и среди таких людей она чувствовала себя хорошо. В некоторых отношениях она мне представлялась странной. Мне она казалась (я наблюдал такие явления у нее) женщиной, у которой почему-то недостаточно развито чувство женской стыдливости… С Распутиным она была очень близка».
Разумеется, при желании Александры Федоровны