mmm dato il tipo di tecnologia (full ottica-ftth) penso che la fibra o va o non va, il discorso di disturbi come per il doppino in rame dovrebbe venir meno in questo caso.
Probabilmente i problemi sono: sulla rete interna, sulla comunicazione con l'armadio, sulla saturazione complessiva della rete in zona/riserve di banda per alcuni servizi essenziali (ma con la gigabit mi pare strano) e anche sul tipo di servizio usato per lo speed test.
Di solito io provo qui:
https://www.mio-ip.it/test-velocita-connessione/