Ушаков, несомненно, вызывал у окружающих страх. Он не был ни страшен внешне, ни кровожаден, ни угрюм. Современники пишут о нем как о человеке светском, вежливом, обходительном. Люди боялись не Ушакова, а системы, которую он представлял, ощущали безжалостную мощь той машины, которая стояла за его спиной. «Он, Шетардий, – рапортовали члены комиссии по выдворению из России французского посланника в 1744 году, – сколь скоро генерала Ушакова увидел, то он в лице переменился. При чтении экстракта столь конфузен был, что ни слова во оправдание свое сказать или что-либо прекословить мог». Следя за карьерой Ушакова, нельзя не удивляться его поразительной «политической непотопляемости». На пресловутых крутых поворотах истории в послепетровское время люди легко теряли не только чины, должности, свободу, но и голову. В 1739 году вместе с Артемием Волынским Ушаков судил князей Долгоруких, а вскоре, в 1740 году, по воле Бирона, он пытал уже Волынского. Потом, в начале 1741 года, Ушаков допрашивал уже самого Бирона, свергнутого Минихом, еще через несколько месяцев, в 1742 году, «непотопляемый» Ушаков уличал во лжи на допросах уже Миниха и других своих бывших товарищей, признанных новой императрицей Елизаветой врагами отечества. Вместе с любимцем императрицы Лестоком в 1743 году Ушаков пытал Ивана Лопухина, и, если бы Ушаков дожил до 1748 года (он умер в 1747 году), то, несомненно, он вел бы «роспрос» и самого Лестока, попавшего к этому времени в опалу.
Ушаков сумел стать человеком незаменимым, неприступным хранителем высших государственных тайн, стоящим как бы над людскими страстями и борьбой партий. Одновременно он обладал каким-то обаянием, мог найти общий язык с разными людьми. Он обращался за советом к тому, кто был «в силе», хотя, вероятно, сам лучше знал свое сыскное дело.
Тут нельзя не отметить, что между самодержцами (самодержицами) и руководителями политического сыска всегда возникала довольно тесная деловая и идейная связь, некое сообщничество. Из допросов и пыточных речей они узнавали страшные, неведомые как простым смертным, так и высокопоставленным особам тайны. Благодаря доносам, пыточным речам государь и его главный инквизитор ведали то, о чем думают и говорят в своем узком кругу люди, они знали, как подданные обделывали свои тайные делишки, как они грешили. Там, где иные видели кусочек подчас неприглядной картины в жизни отдельного человека или общества в целом, им открывалось грандиозное зрелище человечества, погрязшего в грехах. И все это – благодаря особому «секретному зрению» тайной полиции. Только между государем и главным инквизитором не было тайн и «непристойные слова» не облекались, как в манифестах и указах, в эвфемизмы. Они были похожи на соучастников не всегда чистого дела политики – ведь и сама политика не существует без тайн, полученных сыском с помощью пыток, изветов и донесений агентов. Иначе невозможно объяснить, как смог Ушаков, этот верный сыскной пес императрицы Анны, сохранить при ее антиподе – императрице Елизавете – такое влияние и пользоваться так же, как при Анне, правом личного доклада у государыни, совсем не расположенной заниматься какими-либо делами вообще. Исполнительный, спокойный, толковый, Ушаков не был таким страшным палачом-монстром, как князь Ромодановский, он всегда оставался службистом, знающим свое место. Ушаков не рвался на политический олимп, не интриговал, он умел быть для всех правителей, начиная с Петра I и кончая Елизаветой Петровной, незаменимымв своем грязном, но столь важном для самодержавия деле. В этом-то и состояла причина его политической «непотопляемости».
Ведомство Андрея Ушакова было страшным местом. Некоторые из хранящихся в архивах бумаг Тайной канцелярии покрыты копотью и залиты воском со свечей, которые стояли в пыточных палатах, и имеют подозрительные ржавые пятна, которые очень напоминают следы крови. Чтение таких дел, особенно в большом количестве, оставляет тяжелое впечатление: страх дыбы и раскаленных клещей отверзал любые уста, и под пыткой люди теряли честь, совесть, вообще – человеческий облик. Анна не испытывала отвращения к обнажению человеческих несчастий и пороков, ей, наоборот, было интересно узнавать всю подноготную, все грязные и позорные тайны своих подданных.