Het Spijker is een rechthoekig bouwwerk met een hoog 14e-eeuws oostelijk deel en daarnaast een lager westelijk deel uit de 17e en 18e eeuw. In het uiterste westen daarvan vindt men een betraliede nis uit de 19e eeuw, met daarboven een beschilderde gedenkplaat. Het oostelijk deel is naar het westen toe met een trapgevel afgesloten. Dit bevat een mogelijk 14e-eeuwse kelder, die met een bakstenen tongewelf is overkluisd. Een spiltrap in het uiterste oosten voert langs een drietal boven elkaar gelegen cellen. De 16e of 17e-eeuwse voordeuren dragen de namen van de heiligen Petrus, Maria en Johannes.
Het huis, het 16e-eeuwse bruggenhoofd van de Kerkbrug en de 19e-eeuwse brug zijn sinds 2005 beschermd als rijksmonument mede omdat zij deel uitmaken van de historische buitenplaats Brakel, een rijksmonumentcomplex.
Recent zijn twee kruisvensters met 17e eeuwse gebrandschilderde glas-in-lood-ramen teruggeplaatst nadat deze een eeuw geleden werden verkocht. De ramen werden in 1672 gered uit het nabijgelegen Kasteel Brakel dat in september 1672 werd opgeblazen door de Fransen.