Ценя гражданское мужество Панина, один из его современников в своих записках вспоминал такой случай. В конце 1772 года, когда скончался славный русский фельдмаршал Петр Семенович Салтыков, московское начальство, зная, что покойный был в опале у царедворцев, не дало никаких распоряжений для его похорон. Это кощунство потрясло Петра Ивановича. Желая отдать последнюю почесть заслуженному и авторитетному полководцу, он, хотя и был в отставке, надел свой генеральский мундир в Андреевской и Георгиевской лентах и немедленно отправился в дом Салтыковых. Подойдя к гробу фельдмаршала, он обнажил шпагу и сказал: «До тех пор буду стоять здесь на часах, пока не пришлют почетного караула для смены».
Эта «выходка» стала известна императрице и московскому губернатору. Для того, чтобы прилично похоронить старого военачальника, вскоре была выделена воинская команда, сменившая генерала Панина на траурной вахте.
«Опальное положение перед лицом императрицы Екатерины и ее двора перешло в историю, а затем, будучи страдательным типом, Панин как историческая личность подвергся искажению… но, подточенный и надломленный интригующим злом, не сдавал окончательно ни при каких обстоятельствах». Это мнение П. Гейсмана и А. Дубровского, авторов небольшой дореволюционной брошюры о Панине, подтверждается всею сутью и содержанием жизни Петра Ивановича. Он был одним из тех мощных устоев, на которых зиждится сила России, духовные начала в русской армии.
Однако, как в дореволюционное время, он не был оценен по достоинству, так и после — в советское. При своих ярких способностях, ратных заслугах и высоком патриотизме он ни при жизни, ни после смерти не занял того места в русской истории, которого заслуживает.
Панина мы знаем плохо не по малости его заслуг перед Отечеством, а потому, пожалуй, что знать его не предусматривалось рескриптом о заслугах, табелью о рангах, составленной усердием сначала летописцев царствования Екатерины II и последующих самодержцев, затем идеологов сталинского времени, которые историю государства российского свели к биографии нескольких личностей.
Но вернемся в Симбирск.
Пребывая у Панина в Симбирске, Рычков писал Миллеру: «Находясь здесь, пользуюсь я милостями графа Петра Ивановича и радуюсь, что он во все проницает и узнавает существо всякого дела…»
Панин не отпускал Рычкова домой более полутора месяцев, используя знания и «долговременную и искусную практику» его в сношениях с башкирским и киргизским народами.
25 октября 1774 года он направил Рейнсдорпу ордер следующего содержания:
«…
Остается непонятным, почему Панин, рекомендуя найти «способного человека», не указал прямо на Рычкова. Возможно, он знал о натянутых взаимоотношениях между губернатором и ученым и не хотел их усугублять. Возможно, намеревался оставить Рычкова служить при себе. Известен лишь ход дальнейших событий, весьма печальных для Рычкова.