Здесь Хабаров занялся хлебопашеством и нажил достаточное состояние. Однако по всей Сибири гремела слава о реке Лене, о богатых пушных промыслах на ней, и Хабарова потянуло на новые места. А что? Он еще был достаточно молод, при нем силушка могучая, а уж интересу до всего нового ему было не занимать. Человек, говорил он, вообще такое существо, которое должно мечтать. Ибо только мечта делает человека человеком. Без нее – пресно, скучно, тоскливо.
Но мечтать тоже, оказывается, надо уметь. Ведь иные люди желание мечтать ощущают, но саму мечту «нащупать» не могут и становятся похожи на мужика, которого спросили, чего б он сделал, если бы вдруг стал царем. Мужик почесал бороду и ответил честно: «Сто рублей бы спер и убег».
Подал Хабаров челобитную и вскоре получил проезжую грамоту.
Все лето провел Хабаров в пути. Плыл по Ангаре, по притоку ее Илиму. Небольшой отряд Хабарова обосновался сначала в Усть-Кутском остроге, откуда ходили по Лене к Якутску. Хабаров и здесь основал соляные варницы, которые в 1639 году начали снабжать солью не только близлежащие остроги, но и Якутск. Однако он не остановился на этом. Стал заниматься одновременно еще и хлебопашеством и очень выгодным пушным промыслом, а покрученики его извозом через Ленский волок – от Илимска до Усть-Кутского острога.
Вскоре Хабаров стал одним из самых знатных хлеботорговцев в Якутском уезде. Первые якутские воеводы Головин и Глебов забрали у него в государеву казну безвозмездно целых три тысячи пудов хлеба, а после отписали в нее без всякого вознаграждения и его соляной завод. Отобрали у Хабарова и земли. Горько было на душе Ерофея Павловича, но что делать? Власть она есть власть. Недаром же в народе говорят: власть – наесться всласть.
Пришлось Ерофею поселиться на устье реки Киренги, где он в 1641 году основал селение, впоследствии названное Хабаровкой. Там он тоже развернулся – на новых землях завел обширное хозяйство. Но и тут его не оставил в покое якутский воевода. В 1643 году он снова отобрал у Ерофея Павловича все его владения, а самого за отказ снабжать якутскую казну деньгами посадил в тюрьму. Из тюрьмы Хабаров вышел только в конце 1645 года. Вернулся в Усть-Киренгу и принялся восстанавливать свое разрушенное хозяйство.
А мысль его уже была о другом. Он наслышан был о богатых землях за реками Витимом и Олекмой, о чем в красках рассказывали ходившие туда с отрядами казаков и промышленных людей енисейский казацкий атаман Максим Перфильев и якутский письменный голова Еналей Бахтеяров.
А когда Ерофей послушал Пояркова, и вовсе загорелся мечтою идти на Амур. Ведь, по словам Василия Даниловича, выходило так, что на тех малонаселенных землях всего вдоволь, и земли эти никому не принадлежат. Ерофей