Усадьба в стиле барокко имеет богатую историю. Она меняла владельцев, была школой и ставкой Верховного главнокомандующего. А теперь возродилась в виде музея.
Построена она была в 1770-х годах Марцелием Станиславом Кость Урсын Немцевичем. Это был старинный род, который известен в Великом Княжестве Литовском еще с XVI века. Его представители занимали важные должности и в ВКЛ, и в Речи Посполитой, и в Российской империи.
Среди представителей рода — губернатор Гродно Станислав Урсын Немцевич, маршалок (председатель сеймов в Речи Посполитой) Ян Урсын Немцевич, а также Юлиан Урсын Немцевич, самый известный представитель рода. Кстати, Ян Урсын Немцевич-младший был первым президентом Бреста в начале XIX века (эта должность существовала на землях бывшей Речи Посполитой, соответствовала теперешнему мэру).
С усадьбой связано много интересных исторических событий. В разное время гостями семьи Немцевичей становились автор романов о Джеймсе Бонде Ян Флеминг, князья Чарторыйские и Шуйские. Вместе с Юлианом Немцевичем бывал здесь и Тадеуш Костюшко.
По приглашению Яна Титуса Урсын Немцевича, предводителя дворянства Гродненской губернии, во время военных маневров в 1886 году здесь гостевал российский император Александр III. Бывал в усадьбе и знаменитый композитор и художник Наполеон Орда, который в конце XIX века написал картину с ее изображением.
Во время Первой мировой войны усадьба почти на два года стала ставкой принца Баварского Леопольда, командующего Восточным германским фронтом. Здесь 15 декабря 1917 года было подписано военное перемирие. А через два дня тут состоялось первое организационное заседание по проведению переговоров о заключении мира между Россией и Германией (был подписан 3 марта 1918 года в Брестской крепости, в Белом дворце).
Немцевичи владели усадьбой до 1939 года. После того как Западная Беларусь стала частью БССР, Немцевичи выехали из страны. Сейчас их потомки живут в Польше, Канаде и во Франции. К сожалению, через некоторое время этот род угаснет — сегодня в живых остался только один мужчина, носящий такую фамилию. Ему 80 лет, и детей у него нет.
Однако представители рода поддерживают связи с музеем. В 2002 году они приехали в Брест на научную конференцию, посвященную Юлиану Урсын Немцевичу.
Дворцу Немцевичей одновременно и повезло, и не повезло. Его внешний вид практически без изменений дошел до наших дней — в советское время там находилась школа. Но, к сожалению, имущество самих Немцевичей не сохранилось. В 1915 году его вывезли в Калугу (во время всеобщей эвакуации во время Первой мировой), где оно бесследно пропало. В 1939 году окончательно «добили» усадьбу красноармейцы, которые охотно растащили все ценности. Они же разграбили костел-усыпальницу, которая стояла через дорогу от усадьбы.