Το κτήριο βρίσκεται στην θέση Βουρβουρές στην Ασή Γωνιά. Πρόκειται για την οικία του συνταγματάρχη Ανδρέα Παπαδάκη. Το κτήριο αποτελεί κατασκευή του 20ου αι. Είναι οικοδομημένο σε σχήμα «Γ», αποτελούμενο από δύο πτέρυγες που φέρουν όροφο. Η τοιχοποία είναι αμελής με αδρούς λίθους και τσιμεντοκονίαμα και με επίχρισμα από το ίδιο υλικό. Λαξευμένοι λίθοι χρησιμοποιήθηκαν ως υπέρθυρα ενώ ως γωνιόλιθοι χρησιμοποιήθηκαν αδρά λαξευμένοι λίθοι μεσαίου μεγέθους. Τα ανοίγματα του κτηρίου είναι τετράγωνου σχήματος. Στο εσωτερικό σώζονται οι θυρίδες των δοκών του ξύλινου δαπέδου του ορόφου.

Το 1941 ιδρύθηκε η «Ανωτάτη Επιτροπή Αγώνος Κρήτης» (ΑΕΑΚ) με ιδρυτικό μέλος τον ιδιοκτήτη του σπιτιού Ανδρέα Παπαδάκη. Η οικία του λειτούργησε ως στρατηγείο για τον αγώνα της οργάνωσης εναντίον των Γερμανών.

Η διοικούσα επιτροπή της οργάνωσης συναπαρτιζόταν από τον αντισυνταγματάρχη Ανδρέα Παπαδάκη, από τον γιατρό Ιωάννη Παϊζη, τον δικαστικό Αριστομένη Καρακουλάκη, τον Ανδρέα Πολέντα και τον δικηγόρο Ιωάννη Ιωαννίδη. Οι δύο τελευταίοι εκτελέστηκαν.
Σύμφωνα με την « Έκθεση δράσης ΕΟΑ Ανώτατη Επιτροπή Αγώνος Κρήτης» της 17ης Φεβρουαρίου 1949, που απέστειλαν οι Αριστομένης Καρακουλάκης και ο Ιωάννης Παϊζης προκειμένου να αναγνωριστεί η οργάνωση ως εθνική:
«Εκ τούτων ο Ανδρέας Παπαδάκης κατώκει μετά της οικογενείας του τότε εις την τοποθεσίαν Βουρβουρέ της επαρχίας Αποκορώνου, επί των αντερεισμάτων των Λευκών Ορέων, έχων εκεί μικρόν αγρόκτημα μετά μικράς οικίας. Η τοποθεσία αυτή, απομεμονωμένη και εις κατάλληλον σημείον, μεγάλως συνέτεινε εις την επικοινωνίαν μετά του Στρατηγείου Μέσης Ανατολής και εβοήθησε την εγκατάστασιν εκεί της Διοικήσεως της Οργανώσεως, ήτις είχε παρ’ αυτή και τους αντιπροσώπους του Στρατηγείου Μέσης Ανατολής μετά του ασυρμάτου και λοιπού προσωπικού εξ Άγγλων και Ελλήνων την Εθνικότητα αλλ’ Άγγλων υπηκόων».

Η οργάνωση πράγματι αναγνωρίστηκε για την συμμετοχή της στον αγώνα εναντίον των Γερμανών. Όπως επιβεβαιώνουν τα σωζόμενα αρχεία τα μέλη της επιτροπής συνεργάζονταν με το Στρατηγείο της Στρατιάς της Μέσης Ανατολής και με τους εκπροσώπους της Μεγάλης Βρετανίας που δρούσαν στο νησί.