А сам Ермолин, дождавшись прибытия оставленных на Тун-гирском волоке казаков, отправился также вниз по реке и в конце концов соединился с Хабаровым. Но своих разведчиков в отряде Хабарова он не встретил. Правда, Хабаров о разведчиках слышал от взятых языков, а неподалеку от устья Сунгари было найдено казаками Хабарова письмо разведчиков. Ермолин хотел отправиться на поиски пропавших разведчиков, но Хабаров его не отпустил.

Как впоследствии выяснилось, Нагиба с товарищами на своем пути вниз по Амуру несколько раз причаливали к берегу и оставляли на видных местах письма Хабарову. В устье Сунгари, где они также оставили письмо, как раз и находился Хабаров, но разведчики с ним разминулись.

На седьмой день пути отряд Нагибы был атакован флотилией стругов дючеров. Казаки прорвались, но на берегу их сторожил большой конный отряд. И в течение нескольких дней казацкие струги подвергались неоднократным нападениям днем и ночью. На одиннадцатый день казакам стало ясно, что возвратиться вверх по течению к основному отряду им будет чрезвычайно трудно. Боеприпасы кончались, а без них воевать с многочисленным войском дючеров было невозможно.

Было принято решение идти вниз в Гиляцкую землю. Когда струги Нагибы доплыли до нее, то и там их встретила враждебная флотилия гиляков. Бой закончился в пользу казаков, но гиляки перегородили реку и выше и ниже по течению выставили сторожевые посты.

Две недели продолжалась такая осада. Оголодавшие казаки наконец пошли на прорыв. Но в первом же становище, где казаки рассчитывали поживиться продуктами, их встретила гиляцкая засада. Бой длился с половины дня до вечера. Потеряв более 30 человек убитыми, гиляки отступили.