Первым название Ханьлинь получил созданный Ли Шиминем парк, который располагался у северных ворот дворца. Внутри него стояли три строения, где могли собираться видные личности, созванные императором. Под прикрытием безопасного занятия, «обсуждения древних текстов», Ли Шиминь основал здесь «академию литературных исследований»
Тщательное использование дипломатии позволяет придать этому «параллельному» органу новые черты. Официальные документы, составленные особым слогом, как и во всех обществах, в основании которых лежат неопровержимые письменные свидетельства, усложняются, а их число увеличивается. Это является знаком того, что они поставлены под контроль «чиновников, в чьи обязанности входит редактирование государственных указов»
Когда закончилось беспокойное правление императрицы У-хоу, император Сюань-цзун посчитал, что необходимо оздоровить удушающую атмосферу интриг и тайн, которая царила во дворце. Для этого он набрал новых людей, сведущих в искусстве, философии, науках и религии, которые вошли в состав «академии литературных исследований» под титулом «чиновников, ожидающих указов в Ханьлине»
Некоторое время спустя самые уникальные, самые выдающиеся из этих людей получили новое название «чиновники, состоящие в распоряжении императора в Ханьлине». Ханьлинь, который, как и раньше, стал играть роль тайного совета при правителе, в это время состоял в основном из буддийских монахов, которых поддерживала значительная группа евнухов, и из даосских священников
Академия Ханьлинь, как и все секретные советы, которые пользовались большим вниманием со стороны императора, очень быстро приобрела дурную репутацию: «В конце правления Сюань-цзуна (712–756) была основана [академия] Ханьлинь. Чжан Цзи, благодаря своим родственным связям с императорской семьей, пользовался особой благосклонностью. Те, кто критиковал эту эпоху, считали, что это не подобающе. Тем не менее его деятельность ограничивалась тем, что он пел в хоре (с императором) литературные отрывки и отправлял свои комментарии, отвечая на обращения к императору и на доклады… Когда Су-цзун [сын Сюань-цзуна] находился в Лину и в Фэнсиани [чтобы организовать сопротивление Ань Лушаню], дела часто решались непродуманно… В Ханьлине начали заниматься официальными письмами (
Интриги быстро развивались. Буддисты, которые стали преобладать в Ханьлине, использовали беспорядки, вызванные мятежом Ань Лушаня (755), чтобы попытаться выдвинуть на первый план свою концепцию управления государством. Они восхваляли идеи, согласно которым страной должны были руководить специалисты, сведущие в таких науках, как гадание, геомантия и медицина. Только они должны были обладать достаточным влиянием, для того чтобы делать выбор, определяющий развитие страны. На конфуцианских ученых, по их мнению, как на неспециалистов, должны быть возложены обязанности по исполнению текущих дел. Следовало значительно сократить число чиновников, воспитанных на произведениях древних классиков, и снизить влияние административного аппарата, усиливающееся могущество которого ослабляло энергию государства.