Het gezin vertrok dus in allerijl en ging in ballingschap, over een aanzienlijke afstand van naar schatting 400 tot 500 kilometer. Afhankelijk van de uiteindelijke bestemming zou de reis naar Egypte bij een normaal tempo één tot twee maanden hebben gekost. Ze gebruikten hoogstwaarschijnlijk de wagen waarmee ze ook vanuit Nazaret waren gekomen.
De traditionele voorstelling van Maria op een ezel lijkt weinig aannemelijk, ook al was zij van de bevalling hersteld. Het gebruik van een eenvoudige wagen, gemaakt door de timmerman Jozef, is een redelijker veronderstelling.
De geschenken van de wijzen bleken waardevol: zij verschaften de financiële middelen voor de reis en het verblijf in Egypte.
De hadden een geavanceerd wegennet aangelegd, de ware snelwegen van de oudheid, dat reizen gemakkelijker en veiliger maakte, zelfs tot aan Alexandrië in Egypte.
Feitelijke details over dit verblijf in Egypte ontbreken echter: noch de precieze plaats, noch de verschillende locaties waar het gezin mogelijk heeft gewoond, noch de exacte verblijfsduur is met zekerheid bekend.
Hedendaagse berichten over verblijven van wisselende duur in verschillende Egyptische steden berusten eerder op speculatie en op commerciële aantrekkingskracht om toeristen te lokken.
De dood van koning Herodes, de regeling van zijn opvolging en het ontstaan van een stabiel politiek klimaat bepaalden het geschikte moment om deze ballingschap te beëindigen.
's Nachts reizen was ongebruikelijk en riskant vanwege rovers, maar de urgentie van de situatie bracht het gezin ertoe dit gevaar te trotseren.
Jozef nam de waarschuwing van de engel zeer ernstig. Waarschijnlijk wist hij van de voorzorgsmaatregelen van de wijzen, die hun route hadden gewijzigd om niet opnieuw door Jeruzalem te hoeven gaan. De droom die het naderende gevaar aankondigde, kwam voor Jozef en Maria dus vermoedelijk niet geheel onverwacht.