質問編集履歴
2
説明の追加
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -1,7 +1,10 @@
|
|
|
1
1
|
|
|
2
2
|
seleniumを使用して、digital ocean で作成した virtual machine のポートで、brightdataという会社のproxy rotation serverを経由して、Webページにアクセスしています。
|
|
3
|
-
しかし下記のエラーが出ます。アクセス先のページはyoutube にしても、facebookにしても同じエラーが出ます。
|
|
3
|
+
しかし下記のエラーが出ます。アクセス先のページはyoutube にしても、facebookにしても同じエラーが出ます。しかしproxyを通さないで、digitalocean のipでdriver getをすると、そのページを表示できます。(一番下のコード)
|
|
4
|
+
|
|
4
|
-
１時間ほどコードを走らせていたのですがその時はWebページへのアクセスができていました。そして今このような状態になりました。
|
|
5
|
+
１時間ほどproxy経由でコードを走らせていたのですがその時はWebページへのアクセスができていました。そして今このような状態になりました。
|
|
6
|
+
|
|
7
|
+
これは、プロキシの問題だと思うのですが、proxyへのアクセスが過多でブロックされるということがあるのでしょうか？
|
|
5
8
|
アドバイスいただけないでしょうか？
|
|
6
9
|
```error
|
|
7
10
|
File "/Users/****username***/opt/anaconda3/lib/python3.9/site-packages/urllib3/util/retry.py", line 592, in increment
|
|
@@ -116,4 +119,20 @@
|
|
|
116
119
|
print('driver quit')
|
|
117
120
|
|
|
118
121
|
|
|
122
|
+
```
|
|
123
|
+
|
|
124
|
+
```python
|
|
125
|
+
def get_chromedriver(port):
|
|
126
|
+
chrome_options = webdriver.ChromeOptions()
|
|
127
|
+
chrome_options.add_argument('--no-sandbox')
|
|
128
|
+
|
|
129
|
+
driver = webdriver.Remote(
|
|
130
|
+
command_executor='http://{}:4444/wd/hub'.format(port),
|
|
131
|
+
options=chrome_options)
|
|
132
|
+
driver.maximize_window()
|
|
133
|
+
return driver
|
|
134
|
+
|
|
135
|
+
driver=get_chromedriver('137.184.31.213')
|
|
136
|
+
time.sleep(10)
|
|
137
|
+
driver.get('https://www.cman.jp/network/support/go_access.cgi')
|
|
119
138
|
```
|
1
説明追加
title
CHANGED
|
File without changes
|
body
CHANGED
|
@@ -1,6 +1,7 @@
|
|
|
1
1
|
|
|
2
2
|
seleniumを使用して、digital ocean で作成した virtual machine のポートで、brightdataという会社のproxy rotation serverを経由して、Webページにアクセスしています。
|
|
3
3
|
しかし下記のエラーが出ます。アクセス先のページはyoutube にしても、facebookにしても同じエラーが出ます。
|
|
4
|
+
１時間ほどコードを走らせていたのですがその時はWebページへのアクセスができていました。そして今このような状態になりました。
|
|
4
5
|
アドバイスいただけないでしょうか？
|
|
5
6
|
```error
|
|
6
7
|
File "/Users/****username***/opt/anaconda3/lib/python3.9/site-packages/urllib3/util/retry.py", line 592, in increment
|