Proxy hay bị ngắt kết nối? Vì sao proxy 4G rớt mạng và cách xử lý
Trong bài này
- 01 Vì sao proxy hay bị ngắt kết nối?
- 02 Tìm quy luật bằng vòng lặp kiểm tra
- 03 Đổi IP làm đứt các kết nối đang mở
- 04 Địa chỉ IPv6 lỗi ngay lập tức
- 05 Kết nối nhàn rỗi và kết nối dùng lại
- 06 Đường 4G chập chờn vài phút
- 07 Code thử lại để chịu được lúc rớt mạng
- 08 Khi nào nên báo bộ phận hỗ trợ
- 09 Proxy 4G Singapore của 65Proxy
- 10 Câu hỏi thường gặp
Proxy đang chạy bỗng rớt kết nối thường do một trong bốn nguyên nhân: đổi IP làm đứt các kết nối đang mở, địa chỉ IPv6 mà đường 4G không tới được, kết nối nhàn rỗi đã bị đóng trong khi tool vẫn giữ, hoặc đường 4G chập chờn vài phút. Một vòng lặp kiểm tra 5 giây một lần cho bạn biết là nguyên nhân nào, và vài dòng code thử lại giúp script chịu được cả bốn.
Vì sao proxy hay bị ngắt kết nối?
Đối chiếu hiện tượng bạn thấy với nguyên nhân, rồi đọc phần tương ứng:
| Hiện tượng | Nguyên nhân thường gặp | Cách xử lý |
|---|---|---|
| Lỗi vài giây rồi chạy lại với IP mới | Đổi IP | Không đổi IP khi request đang chạy |
| Một website luôn lỗi ngay, website khác vẫn chạy | Địa chỉ IPv6 | Dùng socks5h:// hoặc ép IPv4 |
| Request đầu tiên sau khi nghỉ bị lỗi, request sau chạy | Kết nối nhàn rỗi | Thử lại một lần khi lỗi kết nối |
| Mọi thứ lỗi hoặc rất chậm vài phút rồi tự hồi | Đường 4G chập chờn | Thử lại giãn dần, rồi báo hỗ trợ |
| Lỗi ngay từ request đầu tiên, lần nào cũng lỗi | Sai thông tin hoặc gói hết hạn | Xem các lỗi proxy thường gặp |
Proxy 4G là một modem thật gắn SIM trên mạng di động, nên không bao giờ ổn định bằng máy chủ trong trung tâm dữ liệu. Đó là cái giá của một IP nhà mạng mà website đối xử như điện thoại. Tin tốt là mỗi lần rớt đều ngắn và xử lý được bằng code.
Tìm quy luật bằng vòng lặp kiểm tra
Trước khi sửa gì, hãy ghi lại proxy hoạt động thế nào trong vài phút. Vòng lặp dưới đây gọi một trang nhỏ 5 giây một lần, in giờ (UTC), mã thoát của curl, mã HTTP và thời gian phản hồi:
export PROXY="http://USER:PASS@HOST:PORT"
while true; do
out=$(curl -s -o /dev/null -x "$PROXY" -m 20 -w '%{http_code} %{time_total}s' https://api.ipify.org)
code=$?
echo "$(date -u +%H:%M:%S) exit=$code $out"
sleep 5
doneTrên Windows, cùng vòng lặp đó bằng PowerShell:
$env:PROXY = "http://USER:PASS@HOST:PORT"
while ($true) {
$out = curl.exe -s -o NUL -x $env:PROXY -m 20 -w "%{http_code} %{time_total}s" https://api.ipify.org
"{0} exit={1} {2}" -f (Get-Date).ToUniversalTime().ToString("HH:mm:ss"), $LASTEXITCODE, $out
Start-Sleep 5
}Để chạy 5 đến 10 phút, rồi đọc mã thoát:
exit=0kèm200: proxy chạy tốt. Nếu tool vẫn lỗi đúng lúc đó, vấn đề nằm ở cài đặt của tool.exit=7: không kết nối được. Chạy lệnh một lần với-vđể biết lỗi ở phía nào:Failed to connectnghĩa là curl không tới được proxy, cònCONNECT tunnel failed, response 502nghĩa là proxy không tới được website (bản curl cũ báo trường hợp này là exit 56).exit=28: request hết 20 giây mà chưa xong.exit=97: kết nối SOCKS5 thất bại khi bạn thử cổng SOCKS5, ví dụcannot complete SOCKS5 connection(bản curl cũ ghiCan't complete).
Vài lần lỗi liên tiếp rồi trở lại bình thường là dấu hiệu của đổi IP hoặc đường 4G chập chờn. Chỉ lỗi ở một website là dấu hiệu của IPv6. Thời gian phản hồi tăng dần là do dồn quá nhiều lưu lượng vào một đường, xem tốc độ proxy.
Đổi IP làm đứt các kết nối đang mở
Khi đổi IP, modem 4G ngắt khỏi mạng rồi kết nối lại để nhận IP mới. Việc này mất vài giây, và mọi kết nối đang mở lúc đó đều bị cắt: trang đang tải dở, file đang tải, WebSocket.
- Chỉ đổi IP khi không có gì đang chạy. Cho các request hiện tại chạy xong hoặc tạm dừng, đổi IP, đợi IP mới, rồi chạy tiếp.
- Nhớ đến các luồng chạy song song. Mọi luồng trên cùng một proxy dùng chung IP, nên một luồng đổi IP là cắt luôn các luồng khác.
- Đợi IP mới rồi mới gửi việc. Code đầy đủ "gọi link rồi kiểm tra đến khi IP đổi" có trong bài đổi IP proxy bằng API.
Mỗi proxy của 65Proxy đổi IP được tối đa một lần mỗi 5 phút, nên script đổi IP dày hơn sẽ bị từ chối chứ không nhận IP mới.
Địa chỉ IPv6 lỗi ngay lập tức
Đường 4G của 65Proxy chỉ có IPv4. Khi tool đưa cho proxy một địa chỉ IPv6, proxy không tới được và trả lời ngay trong chưa tới một giây:
- SOCKS5: "general failure" (reply 1), curl hiện là
cannot complete SOCKS5 connection to example.com. (1). - HTTP:
502 Bad Gatewaycho lệnhCONNECT.
Trường hợp này hay gặp nhất với socks5://, khi chính máy bạn phân giải tên miền và có thể chọn địa chỉ IPv6 của website (nhiều website có, ví dụ example.com). Cách sửa:
- Dùng
socks5h://để proxy tự phân giải tên miền và nhận địa chỉ nó tới được. Khác biệt được giải thích ở phần socks5 hay socks5h. - Ép IPv4 trong curl bằng
-4. - Đưa cho tool tên miền, đừng đưa địa chỉ IPv6 trần.
Nếu website chỉ có địa chỉ IPv6, proxy IPv4 không mở được nó. Hai phiên bản IP được so sánh trong bài proxy IPv4 và IPv6.
Kết nối nhàn rỗi và kết nối dùng lại
Phần lớn thư viện HTTP giữ kết nối mở để dùng lại cho nhanh. Trên mạng di động, một kết nối để không lâu có thể bị đóng giữa đường mà chương trình không biết. Request tiếp theo trên kết nối đó sẽ lỗi kiểu:
- Python:
ConnectionResetError,RemoteDisconnectedhoặcConnection aborted. - Node.js:
ECONNRESEThoặcsocket hang up. - Trình duyệt:
ERR_CONNECTION_RESETở lần bấm đầu tiên sau một lúc nghỉ.
Cách sửa rất đơn giản: thử lại một lần khi gặp lỗi kết nối, lần thử lại sẽ mở kết nối mới (code ở phần thử lại). Với kết nối dài như WebSocket, gửi một gói ping nhỏ mỗi 20 đến 30 giây và tự kết nối lại khi socket bị đóng.
Đường 4G chập chờn vài phút
Thỉnh thoảng một đường 4G rớt vài phút, ví dụ khi modem mất sóng hoặc khởi động lại. Trong vòng lặp kiểm tra, nó trông như sau:
- Vài phút lỗi liên tiếp:
exit=7(không kết nối được) vàexit=28(hết thời gian chờ). - Phản hồi chậm vài giây ở những request vẫn đi qua được.
- Tự hồi lại, thời gian phản hồi trở về bình thường.
Lỗi kiểu này thuộc về đường truyền, không phải do cài đặt của bạn, nên sửa cài đặt trong lúc đó không giúp gì. Điều nên làm:
- Thử lại với khoảng nghỉ tăng dần (backoff), như code bên dưới, thay vì gọi dồn dập vào proxy.
- Tạm dừng công việc khi thử lại vẫn lỗi quá vài phút, thay vì đánh dấu mọi tác vụ là thất bại.
- Lưu tiến độ liên tục, để một lần rớt chỉ tốn vài phút chứ không mất cả lượt chạy.
- Chia việc quan trọng cho hai proxy trở lên, để một đường rớt không làm dừng tất cả. Cần bao nhiêu proxy thì xem cần bao nhiêu proxy.
Code thử lại để chịu được lúc rớt mạng
Ví dụ Python (requests) này thử lại khi gặp lỗi kết nối, hết thời gian chờ và mã 502/503/504, nghỉ 5, 10, 20 rồi 40 giây giữa các lần. Nó xử lý được kết nối nhàn rỗi, đổi IP và các lần rớt ngắn, và dừng với thông báo rõ ràng khi đường truyền vẫn không lên:
import os
import time
import requests
PROXY = os.environ["PROXY"] # http://USER:PASS@HOST:PORT
session = requests.Session()
session.proxies = {"http": PROXY, "https": PROXY}
def get(url, tries=5):
for attempt in range(1, tries + 1):
try:
resp = session.get(url, timeout=(10, 30))
if resp.status_code not in (502, 503, 504):
return resp
print("attempt", attempt, "got", resp.status_code)
except (requests.ConnectionError, requests.Timeout) as err:
print("attempt", attempt, "failed:", type(err).__name__)
if attempt < tries:
time.sleep(5 * 2 ** (attempt - 1))
raise RuntimeError("The proxy is still failing; check the line or contact support")
print(get("https://api.ipify.org").text)Vài quy tắc dùng được với mọi ngôn ngữ:
- Luôn đặt timeout. Không có timeout, một request treo là đủ làm đứng cả script.
- Đừng thử lại lỗi IPv6. Lỗi 502 trả về ngay ở mọi lần thử là trường hợp IPv6, không phải rớt mạng.
- Đừng thử lại lỗi
407. Lỗi này nghĩa là sai tài khoản hoặc mật khẩu, thử lại cũng không khác; xem lỗi 407. - Ghi giờ của từng lần lỗi theo UTC. Bộ phận hỗ trợ cần đúng thông tin này để kiểm tra đường truyền.
Các cách dùng proxy khác trong Python (httpx, aiohttp, SOCKS5) có trong bài dùng proxy trong Python.
Khi nào nên báo bộ phận hỗ trợ
Hãy báo hỗ trợ khi vòng lặp kiểm tra cho thấy lỗi kéo dài hơn khoảng 10 phút, hoặc rớt ngắn nhiều lần trong ngày. Gửi kèm:
- Host và cổng của proxy (không gửi mật khẩu).
- Giờ xảy ra lỗi theo UTC, sao chép từ vòng lặp kiểm tra.
- Thông báo lỗi chính xác, từ curl
-vhoặc từ tool. - Bạn đã thử gì: cổng HTTP hay SOCKS5, và website nào.
Có những thông tin đó, chúng tôi xem được đường truyền vào đúng các thời điểm ấy, khởi động lại modem hoặc chuyển proxy của bạn sang modem khác khi còn modem trống.
Proxy 4G Singapore của 65Proxy
Proxy của 65Proxy chạy trên modem 4G Singtel và M1 tại Singapore. Mỗi proxy có một cổng HTTP và một cổng SOCKS5 dùng chung tài khoản và mật khẩu, kèm link đổi IP (tối đa một lần mỗi 5 phút), và không dùng chung với khách hàng khác.
- Bảng giá: 1 ngày $4, 7 ngày $13, 1 tháng $32, cùng các gói tháng nhiều băng thông hơn (500GB $40, 1TB $65).
- Thử trước: chạy vòng lặp kiểm tra ở trên với gói dùng thử miễn phí 1 giờ trước khi trả tiền.
- Mua: mua proxy 4G Singapore, proxy được giao tự động sau khi thanh toán.
- Hỗ trợ: chat trực tiếp trên website, gửi kèm giờ và lỗi lấy từ vòng lặp kiểm tra.
Câu hỏi thường gặp
Proxy 4G thỉnh thoảng rớt có bình thường không?
Rớt ngắn từ vài giây đến vài phút là bình thường với mọi đường di động. Mất kết nối lâu, hoặc vài phút lại lỗi suốt cả ngày thì không bình thường: chạy vòng lặp kiểm tra và báo hỗ trợ.
Tăng số luồng có giúp ổn định hơn không?
Không, thường là ngược lại. Mọi luồng dùng chung một đường 4G, nên quá nhiều request song song làm phản hồi chậm hơn và dễ timeout hơn. Hãy giảm số luồng trên mỗi proxy, hoặc dùng nhiều proxy.
Vì sao curl chạy mà trình duyệt cứ lỗi?
Có thể trình duyệt đang dùng cổng SOCKS5, loại mà Chrome và Edge không dùng được khi có mật khẩu, hoặc vẫn giữ kết nối cũ từ trước khi đổi IP. Dùng cổng HTTP trong Chrome như hướng dẫn ở bài cài proxy cho Chrome, và khởi động lại trình duyệt sau khi đổi IP.
VPN trên máy tính có làm proxy rớt không?
Có thể. VPN thay đổi đường đi từ máy bạn tới proxy, và một số VPN hoặc phần mềm diệt virus chặn các cổng lạ. Tắt VPN rồi chạy lại vòng lặp kiểm tra để so sánh.