Тщеславие и вызывающее высокомерие молодого писателя оттолкнули от него литераторов. Началась беспощадная травля, посыпались насмешки и эпиграммы. Такие «развенчания» знаменитостей были вполне в нравах тогдашних журнальных кругов. Авдотья Панаева пишет: «С появлением молодых литераторов в кружке, беда была попасть им на зубок, а Достоевский, как нарочно, давал к этому повод своею раздражительностью и высокомерным тоном, что он несравненно выше их по своему таланту. И пошли перемывать ему косточки, раздражать его самолюбие уколами в разговорах. Особенно на это был мастер Тургенев, он нарочно втягивал в спор Достоевского и доводил его до высшей степени раздражения. Тот лез на стену и защищал с азартом иногда нелепые взгляды на вещи, которые сболтнул в горячности, а Тургенев их подхватывал и потешался. У Достоевского явилась страшная подозрительность. Он заподозрил всех в зависти к его таланту и почти в каждом слове, сказанном без всякого умысла, находил, что желают умалить его произведения, нанести ему обиду. Он уже приходил к нам с накипевшей злобой, придирался к словам, чтобы излить на завистников всю желчь, душившую его. Вместо того, чтобы снисходительно смотреть на больного, нервного человека, его еще сильнее раздражали насмешками». Картину травли «больного человека» дорисовывает Григорович: «Неожиданность перехода от поклонения и возвышения автора „Бедных людей“ чуть ли не на степень гения к безнадежному отрицанию в нем литературного дарования могла сокрушить и не такого впечатлительного и самолюбивого человека, каким был Достоевский. Он стал избегать лиц из кружка Белинского, замкнулся весь в себе еще больше прежнего и сделался раздражительным до последней степени. При встрече с Тургеневым Достоевский, к сожалению, не мог сдержаться и дал полную волю накипевшему в нем негодованию, сказав, что никто из них ему не страшен, что дай только время, он всех их в грязь затопчет… После сцены с Тургеневым произошел окончательный разрыв между кружком Белинского и Достоевским. Он больше в него не заглядывал. На него посыпались остроты, едкие эпиграммы, его обвиняли в чудовищном самолюбии, в зависти к Гоголю».
Тургенев распространил слух о том, что Достоевский требовал напечатать «Бедные люди» с золотой каймой. Эту нелепую сплетню повторяют в своих воспоминаниях Григорович, Панаев и Анненков. В 1888 г. Леонтьев передает, что Тургенев рассказывал ему эту историю в то время, как Достоевский был на каторге. «Таким молодым людям, как вы, – говорил он, – из личного достоинства не надо при первых успехах давать волю своему самолюбию. Вот как, например, случилось с этим несчастным Достоевским. Когда отдавал свою повесть