Никакого столкновения с даурами здесь тоже не происходило. Однако, упоминая об этом эпизоде в отписке в Москву, Францбеков снова бахвалился военными подвигами, утверждая, что при преследовании дауров произошёл бой, в котором «много даурских людей побито». Документы более надёжные, чем отписка Францбекова, опровергают факт столкновения русского отряда с даурами.
Наступила зима 1650—1651 года. Хабаров разместил свой отряд в Албазинском городке, построенном по тому же образцу, как и Лавкаев городок. За его стенами находились жилые юрты и хлебные склады с большими запасами. В Албазине отряд провёл семь месяцев. Постепенно, терпеливо Хабаров налаживал отношения с даурскими князьками, убеждая их принимать российское подданство и платить ясак. Для его сбора Ерофей Павлович высылал в даурские поселения небольшие группы сборщиков. Не забывал он при этом задабривать князцов и старост поселений подарками, всячески подчёркивая свою заинтересованность в установлении добрых, дружественных отношений с ними. При каждом удобном случае Хабаров и его ближайшие помощники напоминали даурам, особенно их князцам, что русские могут быть единственной для даурского народа реальной защитой от набегов воинственных южных соседей.
Зимой 1651 года по велению Хабарова группа его сподвижников направилась на запад. В составе группы были служилый человек Третьяк Чечигин, есаул Василий Поляков, толмач Константин Иванов и с ними десять промышленных людей. Группа достигла того места, где сливаются воедино Шилка и Аргунь, образуя Амур, а потом, поднявшись вверх по льду Шилки, побывала в местах расселения дауров и тунгусов, которых удалось убедить принять российское подданство и дать в аманаты своих людей. При их посредничестве была сделана попытка склонить к принятию русского подданства даурского князца Дасаула и тунгусского — Гантимура.
Направлял Хабаров своих людей и в улусы Лавкая, Албаза и Шилгинея. Непростые отношения с этими князьками постепенно наладились. От них поступали аманаты.
Главным занятием отряда в зимнюю пору был соболиный промысел. Рядовые промысловики из отряда Хабарова надеялись, что за верную службу их рано или поздно поверстают в казаки, и они станут не просто вольными охочими людьми, а служилыми казаками на государевом жалованье, что значительно улучшит их материальное положение.
Зимой Ерофей Павлович также был занят строительством Тугирского острожка, который мог послужить промежуточной базой на пути из Якутска на Амур. Хабаров привлёк в качестве строителей два десятка промышленников. Место для острожка было выбрано на реке Тугирь, притоке Олёкмы. До Тугирского острожка можно было плыть на речных дощаниках. Здесь дощаники оставляли, так как для дальнейшего пути на Амур они становились слишком громоздкими. В летнюю пору в острожке пересаживались на лодки и в них продолжали путь по верхней Тугири, перетаскивали лодки вручную через перевал и, спустившись с него, попадали в бассейн Амура. Если на Тугири путников заставала зима, то дальнейший путь они преодолевали на лыжах.
— Хорошо бы заселить берега Тугири пашенными крестьянами. Для начала направить бы сюда десятка два семей, — делился Хабаров со своими близкими.
Иногда он принимался подсчитывать, сколько он остался должен Францбекову. Долг был всё ещё велик, даже возрастал. В счёт его погашения Ерофей Павлович отправил в Якутск свою долю соболя, добытого на промысле. После долгих и мучительных размышлений, он всё же решился распродать участникам экспедиции снаряжение, инструмент и другое имущество по завышенной цене. Он готовил себя к болезненной и недружелюбной реакции со стороны промысловиков и казаков, долго собирался сообщить о своём решении отряду и в конце концов, собрав сход, объявил:
— Други мои, наверное, я вас не порадую. Вынужден сказать... Дело вынуждает...
— Чего уж там... Не томи, говори, Ерофей, — перебил есаул Поляков.
— Дорого нам обходится снаряжение, вооружение. Я весь в долгах. Не знаю, как и выпутаться из долговой кабалы. А ведь этим снаряжением, вооружением пользуется каждый из нас. Почему только на мои плечи взвалили сие тяжкое бремя? Давайте обсудим вместе, как нам всем найти из этого выход...
— Что предлагаешь, Ерофей? — спросил Третьяк Чечигин.
— А вот что... — Хабаров замолчал на мгновение и после проговорил: — делаю, други, это вынужденно. Хочу распродать вам отрядное имущество, оружие, плотницкий инструмент, косы, серпы, ещё кое-что. Пусть теперь всё сие принадлежит не отряду, а каждому из вас.
— Дорого ли возьмёшь, скажем, за серп или пищалину?
— Цены не я устанавливаю. Воевода.
— Каковы цены? Назови.
Хабаров замялся — цены на все предметы, подлежащие торгу, воевода устанавливал завышенные. Когда огласил цены, среди людей невольно раздался ропот, отражавший изумление и недовольство. Кое-кто, не скрывая своей неприязни к воеводе, ругал Францбекова матерными словами.
— Ему набивать карманы, а нам гнуть на него спину! — выкрикнул Чечигин.