Huis Sevenaer moet niet worden verward met het verdwenen kasteel Sevenaer dat aan de westzijde van Zevenaar stond. Huis Sevenaer werd aanvankelijk Smollinghuse genoemd. Pas na het verdwijnen van kasteel Sevenaer ging de naam over naar Smollinghuse. Derick Smullinck Derixsoon is mogelijk stichter van dit kasteel dat zijn oorsprong vindt ergens in de 14e eeuw.
Omstreeks 1785 is het gebouw kennelijk zwaar vervallen want in dit jaar ondergaat het huis een drastische verbouwing en werd tevens gemoderniseerd, waarbij veel van de oude uitstraling verloren ging. Het dak van het 15e eeuwse hoofdgebouw is tegenwoordig lager en de traptoren is vlak afgedekt. De achtertoren is verdwenen. Architect Eduard Cuypers deelde aan het begin van de 20e eeuw het huis in twee aparte woondelen. Het huis en landgoed zijn niet toegankelijk voor het publiek.