探検

seleniumでスクレイピング猛者募集中

1ややや
垢版 |
2022/08/27(土) 12:33:38.75ID:IQqR6XHY
https://tokensniffer.com/

↑のサイトをスクレイピングしようとしてるのですが開けません！

https://i.imgur.com/ETUNZAA.jpg

画像のようにグルグルで止まってしまいます！
誰か助けてください。
2022/08/27(土) 13:13:14.39ID:z31K+Zx9
しね
2022/08/27(土) 13:48:01.16ID:8dqx15r4
目的を明確にしないと
4デフォルトの名無しさん
垢版 |
2022/08/27(土) 14:28:33.64ID:kSqAjulD
.NET MAUIのWebViewで開けたからそれ使え
5ややや
垢版 |
2022/08/27(土) 15:18:25.07ID:IQqR6XHY
4.Pythonでできる方法は有りませんか？
6デフォルトの名無しさん
垢版 |
2022/08/27(土) 17:14:23.84ID:kSqAjulD
すまんWebViewでやろうとしたらHTMLは取得できんかったわw
アクセスできたから行けるかと思ったw
7デフォルトの名無しさん
垢版 |
2022/08/27(土) 17:17:13.26ID:kSqAjulD
edgeで開くと一回その画面になるからW3Cで作られてるブラウザだと止まっちゃうとかなんじゃな？
W3Cじゃないブラウザでやってみれば？
IEとかwww
8デフォルトの名無しさん
垢版 |
2022/08/27(土) 17:18:06.68ID:kSqAjulD
クロニウムがダメなのかもしれないからファイアフォックスとかで試してみるとか
9ややや
垢版 |
2022/08/27(土) 17:41:06.88ID:IQqR6XHY
ありがとうございます😭
試してみます！
10デフォルトの名無しさん
垢版 |
2022/08/28(日) 01:27:29.01ID:nkxO7nQv
できた？
11ややや
垢版 |
2022/08/28(日) 19:45:38.88ID:HEwZv2dH
10.今違う方法で試して見てるのですが行き詰まってます
12ややや
垢版 |
2022/08/28(日) 19:45:57.21ID:HEwZv2dH
https://qiita.com/mimuro_syunya/items/2464cd2404b67ea5da56

上のサイトを参考にしてジュピターノートブックからサイトの最後の方にあるソースコードをコピペして最後の3行をGetメソッドで指定したURLに飛びませんでした。
最後の3行を変更せずにやっても出来ませんでした！

上記のサイトの実行コマンドをbotファイルにするくだりはやってます。

目立ったエラーなどは現在無いです。


ブラウザ立ち上げた後にそのまま処理を行うにはどうすれば良いでしょうか？
13ややや
垢版 |
2022/08/28(日) 20:28:53.62ID:HEwZv2dH
ファイアFOXで試してみます！
14デフォルトの名無しさん
垢版 |
2022/08/30(火) 21:43:52.35ID:1QqOIvnF
で？どう？
15デフォルトの名無しさん
垢版 |
2022/09/02(金) 09:06:27.77ID:mIdQFfIX
無理だったかw
2022/09/02(金) 19:12:33.48ID:Ih8em4V3
単発の質問スレを立てるのは禁止です！

速やかに、このスレの削除依頼を出してください
2022/12/03(土) 22:37:25.15ID:RGSC//K6
さらしハゲェェェッ!!ヽ( ^,_ゝ^)ﾉ
18デフォルトの名無しさん
垢版 |
2022/12/26(月) 18:02:41.16ID:Fz/u2pdl
Selenium実装できないとか
何も作れなさそうなレベル
一から学んだ方がここで聞くより早そうや
19デフォルトの名無しさん
垢版 |
2023/01/09(月) 01:37:56.68ID:/+jq5PA4
人間認証？待機？
チェックボックスか待機なら行けるが
画像を合わせる系の人間確認はバイパスできない
2023/02/24(金) 08:30:33.91ID:hJuV0P05
CATCHAが難しくなりすぎ。
画像がぼやけて、チェックした後次の画像が出るまで時間がかかるし、次の画像次の画像とやらされ、もう一度お試しくださいって出るし、
挙句の果て認証に失敗しましたとか言われる。
この辺何とかならんのかね。
2023/04/15(土) 15:44:12.01ID:1xxgmbRC
https://i.imgur.com/ZeHkzYz.jpg
2023/08/19(土) 10:09:44.58ID:3mfIwwgY
Selenium で ChromeDriver を使用すると
Windows のキーボードレイアウト「英語（US）」が勝手に追加されるのですが
これを阻止する方法はありますか？
2023/10/15(日) 14:44:30.81ID:dScnKmPt
キスしてくださいお願いします！
24デフォルトの名無しさん
垢版 |
2026/07/12(日) 09:43:16.75ID:N9+r0Xk2
google検索のスクレイピングしたいけど、gooogleやstartpageはcapcha回避の難易度が高すぎて手に余るという人にとって
yahoo japanは世界的に見ても魅力的でちょろいスクレイピング対象なんだな
ソフトバンクってエンジニアの質はマジで低いから、free proxyでも検索結果を簡単に取得できる
DATAforSEOのようなサービスがなければ、yahoo japanは世界中からアクセスされてとっくに終わってる
新着レスの表示
レスを投稿する

ニューススポーツなんでも実況