Premesso che mi aspettavo una rispsota da @gregorst ed avevo lasciato lo spazio a lui.
Marco96 è molto interessante: sembra che non ci sia nessun fenomeno di saturazione (in quanto best=avg) ed il worst è circa 2*best ed i ping sono in linea con quello che mi aspetto.
Quindi sarebbe da escludere qualsiasi problema nei link condivisi tra più utenti e quindi molto probabilmente il problema sta nella tua porta nel dslam, ed è per questo che non si risolve neanche cambiando operatore.
Hai per caso soldi da investire in un keenetic Hero dsl? (se c'è ancora lo sconto son 60€) così magari c'è qualche dato sulla portante?