Przyszedł na świat w rodzinie, w której muzyka była na porządku dziennym. Ojciec Mikołaj, urodzony we Francji, osiadł w Polsce na stałe już w wieku 16 lat i spędził tu resztę swojego życia. Początkowo był guwernerem, a po przenosinach z Żelazowej Woli do Warszawy wykładowcą języka i literatury francuskiej w kilku warszawskich szkołach, prowadząc w końcu elitarny internat dla synów z najwybitniejszych polskich rodów arystokratycznych. Matka, Justyna z Krzyżanowskich, uwielbiała grać na fortepianie. Fryderyk miał trzy siostry (Ludwika, Izabella i Emilia). Jego pierwszym, domowym nauczycielem w Warszawie był Czech, Wojciech Żywny. To on odkrył niezwykły talent swego młodego ucznia.
