Nel 1420 il paese passò sotto il dominio della Serenissima, senza combattimenti. Una delegazione di fagagnesi, infatti, in rappresentanza del consiglio dei dodici, quattro nobili e otto popolari, che ormai reggeva la Comunità, si presentò spontaneamente al comandante veneto impegnato nell’assalto di Udine e giurò fedeltà. Evitò così ogni spargimento di sangue al borgo formato da cinque piccoli villaggi (Paludo, Sacavan, Sospia, Portafrea, Riolo), un gruppetto di casali in aperta campagna intorno al mulino Lini e le case della cortina di San Giacomo poste subito sotto il castello, sempre meno importante. Di esso oggi rimangono la vecchia torre trasformata in campanile, i resti del poderoso bastione semicircolare con tre feritoie, alcune case trasformate in trattoria, il torrione centrale e la trecentesca chiesa di San Michele. 

Con molte pietre del maniero ormai in rovina, fra il 1490 e il 1505 fu costruito il Palazzo della Comunità con la loggia aperta per le funzioni pubbliche e il salone del Consiglio al primo piano con quattro monofore e una trifora sovrastata dal leone di San Marco, emblema della Serenissima.

Il castello di Villalta, invece, resiste al tempo anche se con una storia molto travagliata. Costruito almeno fra il X e il XII secolo, ebbe il suo splendore nel corso del ’200 e fu distrutto una prima volta nel 1310 dal conte di Gorizia. Ripristinato, fu nuovamente demolito nel 1353 dal patriarca Nicolò di Lussemburgo e poi di nuovo nel 1385 nel corso della guerra per la nomina a patriarca di Filippo d’Alençon. 

Nel 1511, l’ultimo anno orribile: l’incendio nel corso della rivolta del Giovedì Grasso, quando i popolani della zona assaltarono e saccheggiarono ben venti castelli, e un mese dopo un terremoto. Infine, la ricostruzione con le linee attuali, alcuni secoli di calma e poi una serie di storie fosche e truci che accompagnarono il castello fino al ’900. 

Di Fagagna non si possono poi dimenticare i numerosi luoghi di culto fra i quali la medievale chiesa della Madonna della Tavella immersa nella campagna di Madrisio e la piccola chiesa di San Leonardo del ’300 nel borgo Riolo. Dalla storia più recente, emerge la figura di Fabio Asquini, intraprendente spirito illuministico. Avviò una fiorente attività vinicola nel 1753 portando il suo Picolit in mezza Europa fino al 1811. Verso il 1760 si interessò al nuovo combustibile, la torba, di cui erano ricche le sue terre per estrarlo sistematicamente. Nel 1779 fondò la Nuova Olanda che produsse laterizi fino a metà ’800. Intraprese anche una produzione di maioliche e stufe ma con poca fortuna, introdusse per primo la coltivazione della patata in Friuli e promosse la sericoltura attraverso l’innesto di gelsi e l’allevamento dei bachi da seta. 

A fine ’800, la contessa Cora Slocomb di Brazzà aprì una scuola di merletti, attiva fino agli anni Sessanta, per dare sostentamento alle figlie dei contadini e degli operai. Lavorarono persino per la regina Margherita. 

Imperdibile infine Cjase Cocèl, il museo della vita contadina. È un’antica abitazione rurale risalente in alcune sue parti al ’600 dove sono stati ricostruiti aia, stalla, granaio, casa, mulino, fucina, podere, osteria e latteria, tanto rinomata a Fagagna per i suoi formaggi. Tutto è vivo e funzionate, allietato dagli animali che si muovono placidi, da artigiani che svolgono mestieri ormai superati e fragranti odori di un tempo che fu.