בניין המוזאון נבנה כבית המושל העות'מני בשנת 1906, זאת כחלק מקבוצת מבני שלטון הכוללים את מבנה ה"סראייה" (בית השלטון המרכזי) הממוקם כיום בשטח של בסיס צבאי, והמסגד הגדול שכיום הוא מוזאון לתרבות האסלאם ועמי המזרח.
המבנים הללו רוכזו לאורך רחוב הכניסה הראשי מכיוון עזה המוביל למרכז העיר. מבנה בית המושל, הקרוי בערבית "ק'ונאק",
הוא טיפוסי לתקופה העות'מאנית בכל רחבי האימפריה. זו וילה מפוארת של משפחה אמידה, בדרך כלל משפחתו של המושל או של אישיות חשובה אחרת, שבה נערכים לעתים מפגשים רשמיים וקבלות פנים.
סיור שבת מתאים לכל המשפחה !