Il castello fu frequentato da personaggi illustri. Nel 1409 vi soggiornò Papa Gregorio XII, di ritorno dal concilio di Cividale. Vi nacque il conte Erasmo da Valvasone, rilevante poeta cinquecentesco. Vi dimorarono Papa Pio VI nel 1782, mentre era diretto a Vienna, e Napoleone, che per tre giorni qui abitò, stabilendo il comando francese, prima della battaglia del Tagliamento, il 16 marzo 1797. 

Nel 1884 venne demolita parte del mastio quattrocentesco, perché ritenuto pericolante. Ha inoltre subito danni nel terremoto del 1976. Negli ultimi anni è stato oggetto di una serie di restauri.

Quella che oggi vediamo e la sua struttura tardo cinquecentesca che, come per molti altri castelli, ha ingentilito le forme, venute meno le esigenze militari e avviato ad un utilizzo di mera  residenza di campagna. La facciata riporta elementi in pietra scolpita nel portale, le finestre e un poggiolo di gusto rinascimentale. Sulla sinistra un piccolo porticato ad archi ribassati, di epoca tardo settecentesca.

Il castello di Valvasone conserva al suo interno diversi elementi artistici. Nel vecchio atrio, si trovano gli interessanti resti di un ciclo di affreschi detto “di Matilda”, affiancati da medaglioni, databili nella prima metà del Quattrocento. Il salone è decorato con un fregio cinquecentesco.

 Abbastanza singolare è il teatrino di gusto settecentesco, realizzato nei primi anni dell’Ottocento, posto al piano terra, con file di palchetti in legno scolpito, con posto centrale per la famiglia. Rimane ben conservata anche la tribuna per l’orchestra, i cui pannelli sono dipinti a tempera. Purtroppo il palcoscenico e le quinte furono venduti dai famigliari ad antiquari, negli anni Trenta del Novecento. Nel Marzo del 2006, durante un restauro, in un locale vicino al teatrino, sono stati riportati alla luce degli affreschi databili alla fine del Trecento.