Dann würde ich erstmal darauf tippen, dass die 25 Mbit/ s einfach nicht für alle zusammen ausreichen.
Allein ein 4K Video kann die Bandbreite theoretisch schon voll auslasten.
Was habt ihr denn für einen Router? Viele Router erlauben es, einzelne Geräte zu priorisieren.
Sollte das Problem wirklich an den vielen Nutzern liegen, kann ein größerer Tarif natürlich helfen. Ohne Priorisierung (QoS) kann, je nachdem wie deine Familie das Internet nutzt, aber auch der gelegentlich so ausgelastet sein, dass bei dir nicht mehr viel ankommt und dein Ping in die Höhe geht.
Natürlich kann auch immer noch der Anbieter Probleme machen. So wie du die Situation aber beschreibst, hättest du die Probleme auch bei einer guten und stabilen Leitung.
Um wirklich sagen zu können, dass deine aktuelle Leistung nicht stabil ist, müsstest du ein einzelnes Gerät per LAN-Kabel an den Router anschließen und dann mehrmals und zu verschiedenen Zeiten testen. Während der Tests sollten keine weiteren Geräte mit dem Internet verbunden sein, z. B. auch keine Smartphones über W-LAN.