Петр Андреевич известен активной деятельностью при Петре Первом: сам лично привез по приказу царя его сына из Италии, где тот скрывался от гнева отца. После смерти Петра Первого Петр Андреевич впал в немилость и в 82 года был сослан в Соловецкий монастырь, где и умер в 1729 году. Его сын Иван Петрович имел 10 детей: Федора, Петра, Илью, Ивана, Андрея, Василия, Анну, Александру, Марию, Елизавету. Земли Андрея Ивановича были разделены между детьми, сын Иван Андреевич получил земли в Костромском крае.
До 1783 года Иван Андреевич служил в лейб-гвардии Семеновского полка, а выйдя в отставку поселился на земле в Костромском крае. Ему принадлежала деревня Зиновка и 40 душ крестьян. Взяв в жены Анну Федоровну Майкову (1761-1834), происходившую из известного рода Нила Сорского, Иван Андреевич поселился в имении (приданом) жены в селе Никольском. Граф Иван Андреевич Толстой был человеком хорошо известным в уезде, неслучайно помещики избрали его предводителем кологривского дворянства.
В семье Толстых родилось 7 детей: 3 сына и 4 дочери.
Сын Януарий (1792-1835) был женат на Екатерине Дмитриевне Ляпуновой, имел дочь Веру (1825) и сына Дмитрия (1827) от этого брака. Выйдя в отставку в чине майора вернулся в родовую усадьбу родителей в село Никольское и женился на горничной Матрене Самойловне. Кологривские дворяне никак не могли признать этот брак и неоднократно писали жалобы в Синод с просьбой признать его незаконным, они назвали священника, обвенчавшего Януария, сумасшедшим. От второго брака родились три дочери — Анастасия, Вера и Надежда. Дочь Вера вышла замуж за Илью Соколова. Их сын Александр Ильич Соколов (1902-1991) известный и уважаемый в районе человек, директор Никольской средней школы. После смерти Януария Ивановича Матрене Самойловне и ее детям в наследство ничего не досталось, хотя и было составлено и заверено церковью следующее завещание:
“Во имя Отца и Сына и Святого Духа, я, граф Никольского поместья Януарий Иванович Толстой, находясь в здравом уме и доброй памяти, завещаю все Матрене Самойловне, заверяя подписью и печатью.
Януарий Толстой.
Священник Орлов”