ネットワーク初心者です。もし質問内容がスレ違いでしたらすみません

回線速度の低下に関する質問です。現在、ルータから有線LAN(1Fから2Fへ)を引っ張ってPCを使っているのですが、回線が遅くなることがあります。具体的には平日は夜6時くらいからで、日曜などは一日中遅いです。Fats.comという回線計測サイトを使用してみると、平日の昼間などは60~100Mbpsほど出るのですが前述の該当時間になると一桁台まで落ちてしまいます。
時間帯からいって近隣住民と干渉してしまっているのかなと推測したのですが、素人ゆえ確信が持てず質問しました。ネットワークはフレッツ光ネクストでプロバイダはソフトバンクbbtec.netです。現環境ではIPv4のPPPoEというらしくて、これをIPv6のIPoEサービスに移行させるといいと聞いたのですが、正しいでしょうか？
家族がWi-Fiを利用してスマホを使ったり、もう一台のPCにLANを引いたりしていますがこれに干渉していたりしたらどうしようと思い、なかなか行動に移せません。確かめる方法等あれば教えていただけると幸いです。

ルータの再起動やLANケーブルの差し直しなどの原始的な解決策は試してみました。素人質問ですが、よろしくお願いします