С 1832 семья ежегодно проводила лето в купленном отцом селе Даровое (Тульской губернии). Встречи и разговоры с мужиками навсегда отложились в памяти Достоевского и служили в дальнейшем творческим материалом. Примером служит рассказ «Мужик Марей» из «Дневника писателя» за 1876.
В 1832 Достоевский и его старший брат Михаил начали заниматься с приходившими в дом учителями. С 1833 обучались в пансионе Н. И. Драшусова (Сушара), затем в пансионе Л. И. Чермака, в котором преподавали астроном Д. М. Перевощиков, палеолог А. М. Кубарев. Учитель русского языка Н. И. Билевич сыграл определенную роль в духовном развитии Достоевского.
Воспоминания о пансионе послужили материалом для многих произведений писателя. Атмосфера учебных заведений и оторванность от семьи вызывали у Достоевского болезненную реакцию. Например, это отразилось в автобиографических чертах героя романа «Подросток», переживающего глубокие нравственные потрясения в «пансионе Тушара». Вместе с тем годы учебы отмечены пробудившейся страстью к чтению.
В 1837 умерла мать писателя, и вскоре отец отвез Достоевского с братом Михаилом в Петербург для продолжения образования. Больше писатель не встретился с отцом, скончавшимся в 1839 (по официальным сведениям, умер от апоплексического удара, по семейным преданиям, был убит крепостными). Отношение Достоевского к отцу, человеку мнительному и болезненно подозрительному, было двойственным.
Тяжело пережив смерть матери, совпавшую с известием о смерти А.С. Пушкина (которую он воспринял как личную потерю), Достоевский в мае 1837 едет с братом Михаилом в Петербург и поступает в приготовительный пансион К. Ф. Костомарова. Тогда же состоялось его знакомство с И. Н. Шидловским, чья религиозно-романтическая настроенность увлекла Достоевского.