Η περιοχή που καλύπτει το ανάκτορο Γιλντίζ ήταν δασικός κυνηγότοπος, που είχε περιέλθει στο θησαυροφυλάκιο της Αυτοκρατορίας επί Σουλτάνου Σουλεϊμάν Α' του Μεγαλοπρεπούς και ξεκίνησε να διαμορφώνεται από την εποχή του Μαχμούτ Β', ο οποίος ανήγειρε κυνηγητικό περίπτερο, το Γιλντίζ Κιόσκ. Τους κήπους του ανακτόρου επιμελήθηκαν Γερμανοί, Ιταλοί και Γάλλοι ειδικοί, ενώ τα αρχιτεκτονικά σχέδια ανήκαν στους ελληνικής καταγωγής τότε Ρωμιούς τους αρχιτέκτονες Βασιλάκη Μπέη (Ιωαννίδη), τον Νικολάκη Τζελέπη Εφένδη, τον Αρμένη Σαρκίς Μπαλιάν, τον Ιταλό αρχιτέκτονα Ραϊμόντο ντ' Αρόνκο, καθώς και τον Γάλλο στρατηγό Μπερλιέ ως αρχιμηχανικο της οχύρωσης του χώρου.