Родился в небольшом литовском городке Кибартай. Почти нет сведений о детстве художника. Он никогда не вспоминал о своем прошлом, а незадолго до смерти уничтожил свой архив, письма родных и близких. В его бумагах нашли пачку писем, на которых рукой Левитана было написано: "Сжечь, не читая". Воля умершего была исполнена. Но воспоминания людей, близко, знавших Левитана, дают возможность восстановить основные факты биографии художника.
Отец Левитана был мелким служащим. Поселившись с семьей в Москве, он стремился дать сыновьям хорошее образование...