Петр Арсеньевич начал свое дело не на пустом месте. Как минимум с 1818 г. его отец и 4 его брата начали их семейный винно-водочный промысел. Тогда его отец и родные дяди – 5 братьев – были главным образом управляющими в ренсковых погребах (где продавали виноградные вина) у московских купцов. Выкупившиеся (на вырученные от виноторговли средства) из крепостной зависимости в 1830–1850-е гг. все 5 братьев получили разрешение носить фамилию Смирновы (за свой мирный характер). 7-летний Петя начал работать «мальчиком» в ренсковом погребе в Москве у его дяди Ивана Алексеевича Смирнова. Здесь начинали работать «мальчиками» и его двоюродные братья – будущие партнеры по винно-водочному производству, торговле. В 1857 г. Арсений, а также его жена и двое сыновей (в том числе Петр) смогли выкупиться из крепостной зависимости. Так только в 26 лет П.А. Смирнов стал свободным человеком. 5 братьев Смирновых год от года увеличивали свое состояние. Они были собственниками в Угличе гостиниц, постоялых дворов, трактиров, пиво– и медоваренного завода, в Москве – ренсковых погребов, амбаров, небольшого водочного завода на Берсеневской набережной. Лидером из 5 братьев в фамильном смирновском винно-водочном производстве был Иван Алексеевич (самый энергичный и состоятельный из них). В 67 лет он умер, его сыновья не смогли успешно возглавить начатое Смирновыми дело. Новым лидером в фамильном винно-водочном производстве стал 42-летний Петр Арсеньевич Смирнов. П.А. Смирнов вскоре уже владел в Москве несколькими ренсковыми погребами, водочным заводом, домом на Пятницкой у Чугунного моста (куда он перевел свой первый водочный завод с ренсковым погребом), год от года список его недвижимого имущества увеличивался. Это был этап, когда второе поколение двоюродных и родных братьев Смирновых объединились для ведения их фамильного винно-водочного дела.
В 1871 г. фирма купца 1-й гильдии П.А. Смирнова уже входила в число 30 московских предприятий, продукция которых успешно продавалась в разных частях Российской империи. В 1873 г. на Международной выставке в Вене продукция его завода получила первую награду – «Почетный диплом», затем были многие медали, дипломы, иные знаки высокой оценки произведенной его фирмой продукции (они были получены в Париже, Стокгольме, Филадельфии и многих других городах).