Возможно, такое неудовольствие в адрес князя Державин высказал по личным мотивам. Современники Вяземского обвиняют его в том, что он не любил литераторов и гнал их со службы. «Когда им заниматься делами, когда у них рифмы на уме», – говорил он. Можно предположить и то, что князь возненавидел поэтов благодаря Державину, который обманул доверие своего покровителя и намекал на него в сатирических стихах по поводу барельефа нагой Истины в Сенате. Поэт уверяет, что князь нашёл вид её соблазнительным для Сената и приказал несколько её «прикрыть».
Однако высказывания других современников подтверждают обвинения Державина. Русский публицист, мемуарист С. А. Порошин приводит разговор с графом Н. И. Паниным, который «много удивлялся, как фортуна поставила князя Вяземского столь высоко»; при этом упоминалось о разных случаях, которые могут оправдать такое удивление.
После отставки в 1792 году по состоянию здоровья князя А. А. Вяземского императрица назначила генерал-прокурором и государственным казначеем графа А. Н. Самойлова. Он исполнял эти обязанности вплоть до её смерти. Однако и о нём современники в основном отзывались отрицательно, отмечали его излишнюю гордость и высокое тщеславие. Князь И. М. Долгоруков писал, что он «…глуп, спесив, груб, бестолков, дурён».
Вслед за отставкой А. А. Вяземского в 1793 году от ведения финансовых дел был удалён и А. И. Васильев. Ему поручили руководить Медицинской коллегией. Возможно, такое решение было обосновано его связью с масонами, которым императрица не доверяла, а возможно, свою роль сыграло увольнение со службы покровителя.
В 1796 году после восшествия на престол Павла I Алексей Иванович был назначен государственным казначеем России. Он занимался поступлением и распределением налогов, работал над проектом по перечеканке медной монеты для увеличения курса ассигнаций, а также определял расходы на содержание армии. Кроме того, ему было поручено возглавить комитет по проверке финансов Польши. Фактически при Павле I Васильев сосредоточил в своих руках набор функций, присущий министру финансов. При Павле I Васильев был награждён орденом Андрея Первозванного,