«Второй разряд каторги, в котором я находился, – говорит он, – состоявший из крепостных арестантов под военным начальством, был несравненно тяжелее остальных двух разрядов, т. е. третьего заводского и первого в рудниках. Тяжелее он был не только для дворян, но и для всех арестантов, именно потому, что начальство и устройство этого разряда – все военное, очень похожее на арестантские роты в России. Военное начальство строже, порядки теснее: всегда в цепях, всегда под конвоем, всегда под замком; а этого нет в такой силе в первых двух разрядах».
Но благодаря небольшим имевшимся в запасе деньгам это тяжелое положение хоть немного да облегчалось: арестант мог иметь чай со своим особым чайником и кое-какую дополнительную еду, хотя и острожная пища была, по его словам, сносна; хлеб даже славился в городе, зато щи изобиловали тараканами, на что арестанты, впрочем, не обращали ни малейшего внимания. «Помню ясно, – говорится в „Записках“, – что с первого шагу в этой жизни меня поразило то, что я как будто и не нашел в ней ничего особенно поражающего, необыкновенного или, лучше сказать, неожиданного. Мне показалось даже, что в остроге гораздо легче жить, чем я воображал дорогой. Самая работа показалась мне вовсе не так тяжелой, каторжной, и только довольно спустя догадался, что тягость и каторжность этой работы не столько в трудности и беспрерывности ее, сколько в том, что она принужденная, обязательная, из-под палки». Работал он, однако, с усердием, «радостно», чтобы укрепить свое здоровье, и особенно любил сгребать снег и толочь алебастр.