Луи Витон е роден през 1821 година в изключително бедно семейство в малко селце (Анчай) в района Жура в източна Франция. Баща му е дърводелец и прави столове, а майка му шапки. Луи помага за изхранването на семейството от невръстно дете. Когато е на 10 години, майка му умира, а след две години и баща му. Витон е осиновен, но напуска дома си в Анчай през пролетта на 1835 година, на 13 годишна възраст, за да измине пеша 500 км до Париж в търсене на по-хубав живот. Пътят му отнема две години, през които спира и работи каквото намери, за да преживява – почиства обувки, работи на полето, продава цветя.
На 15 години пристига в Париж.
