Pluņģes muižu sāka būvēt 1873. gadā, kad īpašumu iegādājās Mīkols Oginskis. Muižas ēku neorenesanses stilā projektēja vācietis Karls Lorencs. Jau būvniecības sākumā saskaņā ar M. Oginska vēlēšanos pamatos tika iemūrēta pudele ar ziņu nākošajām paaudzēm. Tajā ierakstīti būvniecības vadītāju uzvārdi, Oginsku dzimtas koks un stingrs Oginska rīkojums atrastos dokumentus atstāt tur, kur tie bijuši. 1879. gadā muižā sarīkotajās svinībās Pluņģes muižas ēka iesvētīta. Muižas iekšpusē izvietotas greznas mēbeles. Lielajā muižas zālē bija ierīkots balts marmora balkons. Tajā spēlēja orķestris. Zāles griestus rotāja četri gadalaikus attēlojoši  metāla amori.  Pirmajā stāvā labajā pusē ierīkoti muižas saimnieka, kreisajā pusē – kundzes apartamenti. Otrajā stāvā bija viesu istabas, bibliotēka un lasītava.