В 1488 году боярин Андрея Большого, Образец, заявил своему князю, бывшему тогда в Москве, что старший брат хочет его схватить. Андрей помышлял, было, уже тайно бежать из Москвы, но потом передумал, решив вначале послать к могущественному тогда вельможе, князю Ивану Юрьевичу Патрикееву, своего доверенного человека, дабы тот изведал - за что хочет схватить его старший брат. Но Патрикеев отказался от опасного поручения. Тогда Андрей сам пошел к великому князю, и всё рассказал ему.
Иван «поклялся ему небом и землею и богом сильным», что у него и в мыслях не бывало ничего подобного. Начали искать, откуда пошел слух; оказалось, что великокняжеский сын боярский, Мунт Татищев, в шутку сказал об этом Образцу, а тот поверил и поведал князю Андрею, желая выслужиться, так как прежде князь держал его в немилости.
Иван приказал дать Татищеву торговую казнь, повелел даже отрезать ему язык, но митрополит упросил не делать этого.
В 1491 году Иван Третий, изведав, что на его союзника, Менгли-Гирея, идут татары с востока, выслал к нему свои полки на помощь; велел и братьям отправить также своих воевод, на что имел полное право по договорным грамотам.
Борис послал свои полки вместе с великокняжескими, но Андрей Углицкий отказался помогать Менгли-Гирею. Это случилось в мае, а в сентябре Андрей Большой приехал из Углича в Москву и был принят (на его удивление) весьма почетно и ласково старшим братом. На другой день к нему явился посыльный от Ивана Третьего, кой пригласил на обед к великому князю. Андрей Большой немедленно собрался, чтобы ударить челом за оказанную честь.
Иван принял его в комнате, называвшейся
К Андрею Углицкому вошел князь Семен Ряполовский и молвил:
- Пойман ты, князь Андрей Васильевич, Богом да государем великим князем Иваном Васильевичем всея Руси, братом твоим старшим.
- Видит Бог, что берет меня брат неповинно, - отвечал Андрей Углицкий.
С первого часа дня до вечерни сидел князь во дворце. Потом его отвели на казенный двор и приставили стражу. В то же время Иван Третий послал в Углич своих дружинников, кои схватили Андреевых сыновей, Ивана и Дмитрия, заковали в железа и отвезли в Переяславль.