* Первая жена — ''Анисья Прокофьевна Гуляева'' (1715—1751); в этом браке родились сыновья [[Рычков, Андрей Петрович|Андрей]] (1740—1774), [[Рычков, Николай Петрович|Николай]] (1746—1798), Иван (1745 — после 1790) и дочь Мария (1743—1752). Первенец его, будучи комендантом [[Симбирск]]а, погиб в чине полковника, защищая город от пугачёвцев.
* Вторая жена — ''Елена Денисьевна [[Чириковы|Чирикова]]'' (1733—после1733 — после 1768) — увлекалась пуховязальным промыслом и распространяла его среди жительниц [[Оренбург]]а. Можно сказать, что благодаря супругам Рычковым появились знаменитые впоследствии на всю Россию [[Оренбургский пуховый платок|оренбургские пуховые платки]]<ref>См. статью «Оренбургская губерния» в [[Большая Российская энциклопедия|Большой Российской энциклопедии]].</ref>. Она родила мужу следующих детей: Василий (февраль 1753), Пётр (декабрь 1753), Мария (1754), Александра (1756), Ферапонт (1757), Наталья (1758), Елизавета (1759), Анна (1761), Ксенофонт (1762), Аграфена (1766), Катерина, Прасковья. Дочь Александра, в замужестве Зубова, была мачехой матери [[Аксаков, Сергей Тимофеевич|С. Т. Аксакова]], который упоминает о ней в «[[Семейная хроника (Аксаков)|Семейной хронике]]»<ref>В главе «Женитьба молодого Багрова». Фамилия Зубовых изменена в книге на Зубиных.</ref>.
