Обнаружение недобитого противника внутри здания сильно озадачило Неустроева. Он послал в бункер большую группу солдат во главе с офицером, которые уже продвигались вперед весьма профессионально. После короткой перестрелки уцелевшие немцы решили сдаться. От захваченных пленных стало известно, что под Рейхстагом размещаются обширные помещения, связанные между собой многочисленными тоннелями и переходами, в которых укрывается более 1000 человек, в основном офицеров и солдат войск СС и личной охраны фюрера.
В это время на Королевской площади снова забушевал огненный смерч. Ценой больших потерь фашистам удалось подойти к зданию «Кроль-оперы», в котором еще сопротивлялась часть немецкого гарнизона. Но соединиться противнику не дали. Он основной массой сил развернулся к западному фасаду Рейхстага и открыл ураганный огонь по его парадному подъезду. В это же время и гитлеровцы, находившиеся в подвалах здания, стремясь вырваться из подземелья, также пошли на прорыв.
Атаки были большой силы и велись на пределе отчаяния. В нескольких местах через образованные бреши на первом этаже солдаты и офицеры противника вырвались наружу. От взрывов гранат в здании возникли пожары. Казалось, что не только сражаться, но и находиться в его помещениях стало невозможно: на людях тлела одежда, обгорали волосы, от дыма нечем было дышать…
Батальон Неустроева снова оказался в тяжелейшем положении. Враг наседал одновременно с нескольких сторон, связь с полком была прервана. Когда ее удалось восстановить, Зинченко предложил Неустроеву на время покинуть Рейхстаг, переждать, пока там все выгорит, и лишь затем вернуться обратно. Но сделать это уже было невозможно, поскольку часть рот была отсечена огнем. К тому же и парадный подъезд также находился под жесточайшим обстрелом. Батальон оказался в огненном мешке.
Неустроев решил не покидать здание, и продолжать драться в горящем Рейхстаге. Вновь завязался ожесточенный бой, который продолжался весь день и часть ночи. На лестницах и в помещениях главного здания Рейхстага борьба неоднократно переходила в многочисленные рукопашные схватки.
Безусловно, обстановка в центре Берлина постоянно интересовала Г.К. Жукова. К тому времени он также знал, что в отношении знамени над этим зданием его, мягко говоря, ввели в заблуждение. Поэтому в своем боевом донесении № 00514 Верховному Главнокомандующему, отправленном в 21.30 1 мая 1945 года он вообще не касается вопроса захвата Рейхстага и водружения над ним Знамени Победы. Григорий Константинович лишь констатирует, что «особенно упорное сопротивление противник оказывает в районе Рейхстага».
В Рейхстаге же к этому времени инициатива почти полностью перешла к немцам. Был даже момент, когда у Неустроева под контролем оставались только часть центрального зала и вестибюль. Но в этот трудный момент выручил капитан Ярунов. В ночь на 2 мая, собрав в свою роту человек сто, он сумел провести отряд по правому крылу через завесу огня за спину противника и внезапно ударил по врагу с тыла.
2 мая немецкий гарнизон Берлина во главе с его комендантом генералом Вейдлингом капитулировал. К тому времени, в 3–4 часа 1 мая, в период относительного временного затишья, по приказу командира 79-го стрелкового корпуса Переверткина под руководством полковника Зинченко Знамя Победы было перенесено с восточной стороны крыши Рейхстага, где его не видно было с Королевской площади, и установлено на его куполе.
Из кадров фронтовой кинохроники многие помнят, как группа солдат взбегает по ступеням Рейхстага, а затем двое из них закрепляют трепещущее знамя на его фронтоне. Но эти кадры постановочные, так как они были отсняты фронтовыми операторами 2 мая 1945 года, когда все бои уже отгремели. Тем не менее этот эпизод стал символом Победы всего советского народа в Великой Отечественной войне.
В мае 1946 года был опубликован Указ Президиума Верховного Совета СССР «О присвоении звания Героя Советского Союза офицерскому и сержантскому составу вооруженных сил СССР, водрузившему Знамя Победы над рейхстагом». Награждены были пятеро: капитан Василий Давыдов, сержант Михаил Егоров, младший сержант Мелитон Кантария, капитан Степан Неустроев и старший лейтенант Константин Самсонов. Имени А.П. Береста в этом списке не было, по ходатайству командира корпуса он был награжден только орденом Красного Знамени.
После взятия Берлина Знамя Победы было привезено в Москву, но в первом Параде Победы оно не участвовало, хотя первоначально именно это знамя должно было открывать марш победителей. Но во время генеральной репетиции на Красной площади комбат Неустроев (пять раз раненный, с дважды перебитыми ногами) сбился с шага перед самой трибуной Мавзолея, и на этом основании Г.К. Жуков лично отменил вынос Знамени Победы. Не было на этом параде и А.П. Береста.