De bouwgeschiedenis van het kasteel gaat terug tot het jaar 1250. Delen van het huis dateren uit de 14e, 15e en 17e eeuw. In de beginfase van de Tachtigjarige Oorlog had Huis Bergh veel te lijden van oorlogsgeweld. In 1735 brandde het geheel uit. Tijdens de Hollandse Zending tussen de jaren 1799 en 1842 was er een seminarie in Huis Bergh gevestigd. Het kasteel en alle bijbehorende bezittingen kwamen in 1912 in eigendom van Jan Herman van Heek (1873-1957), een industrieel uit Enschede. In 1939 werd een groot deel van het huis voor de tweede keer door brand verwoest; dankzij de hulp van de plaatselijke bevolking kon echter veel van de inventaris worden gered. Nog in hetzelfde jaar begon de wederopbouw die reeds in de herfst van 1941 kon worden voltooid.
In de kasteeltuin en in de ontvangsthal worden regelmatig concerten gegeven.
De Boetselaersborg, een kasteeltje nabij Huis Bergh, behoort tot de bezittingen van het kasteel.
Juist ten westen van Huis Bergh ligt het parkbos de Plantage.
Adres: Hof van Bergh 8, 7041 ‘s-Heerenberg
