Pierwsze piłkarskie kroki Filip Karbowy stawiał w szkółce Olo Władysławów. Jako nastolatek trafił do Legii Warszawa. Grał w młodzieżowych drużynach