L’attuale aspetto del castello si deve ad alcuni rimaneggiamenti del Settecento che hanno apportato diverse aggiunte (rimangono solamente il muro merlato e i camminamenti di ronda). Anche al suo interno è possibile notare i cambiamenti da stile tardo gotico a tardo barocco: testimonianza di ciò è l’ampio ballatoio che contorna un vasto salone centrale.
Castel Firmian è adibito ad abitazione privata e pertanto non è visitabile.