La red celular de por sí ya tiene más latencia por ser otro tipo de tecnología, y a la vez ser inalámbrica, no verás menos de 20 ms de latencia en una red móvil ni a las 4 AM.
La red GPON es completa por fibra, eso es por arquitectura, el único punto donde podría tener cobre es entre los router...