A. A.a. Le 5 juillet 2023, à la suite des révélations faites par B.H.________, née en 2009, à une éducatrice du centre d'intégration socio-culturel de U.________, le Ministère public de l'arrondissement du Nord vaudois (ci-après: le Ministère public) a ouvert une instruction pénale contre A.________, ressortissant syrien né en 1933 bénéficiant d'une autorisation de séjour annuelle (permis B), pour actes d'ordre sexuel avec des enfants, contrainte sexuelle et viol.