Mua HTTP proxy, hỗ trợ HTTPS với IP cố định

HTTP proxy là gì?

HTTP proxy là máy chủ nhận yêu cầu web từ trình duyệt hoặc chương trình và chuyển tiếp đến trang web đích, sau đó trả lại phản hồi. Trang web đích sẽ thấy IP của proxy thay vì IP của bạn.

HTTP proxy là phương thức proxy được hỗ trợ rộng rãi nhất. Cài đặt proxy của hệ điều hành, tất cả các trình duyệt chính, Python requests, Node.js, cURL, Scrapy, Selenium và các công cụ khác đều hỗ trợ HTTP proxy mà không cần thêm gói nào. Nếu công việc chính của bạn là thu thập dữ liệu web và gọi API, HTTP proxy là cách thiết lập đơn giản nhất.

HTTP proxy là phương thức yêu cầu ít cấu hình nhất từ phía chương trình. Hầu hết các ngôn ngữ và thư viện đều tự động điều hướng cả yêu cầu http và https thông qua proxy chỉ với một địa chỉ proxy. Bạn cũng có thể đặt HTTP proxy trong cài đặt proxy của toàn bộ hệ điều hành, cho phép nhiều chương trình sử dụng cùng một IP.

Có thể truy cập trang HTTPS bằng HTTP proxy không?

Đúng vậy. Khi truy cập trang HTTPS, chương trình sẽ gửi yêu cầu CONNECT đến proxy để mở kênh kết nối với đích đến, sau đó thực hiện kết nối mã hóa trong kênh đó. Proxy chỉ biết địa chỉ đích và không thể xem nội dung trang hoặc thông tin đăng nhập.

Mặc dù được gọi là HTTP proxy, nhưng bạn có thể sử dụng nó cho hầu hết các trang HTTPS và API. Trong cài đặt chương trình, chỉ cần nhập một địa chỉ HTTP proxy để cả http và https đều đi qua cùng một proxy.

Nên sử dụng HTTP proxy hay SOCKS5 proxy?

Đối với các tác vụ chỉ gửi yêu cầu web như trình thu thập dữ liệu, thư viện HTTP hay tự động hóa trình duyệt, HTTP là đơn giản nhất. Nếu kết nối chương trình không phải web, sử dụng DNS từ xa hoặc trình duyệt chống phát hiện khuyến nghị SOCKS5, bạn có thể dùng SOCKS5.

Mọi IP của Socks5Proxy đều có cả cổng HTTP và SOCKS5. Không cần mua riêng sản phẩm, có thể kết nối cùng IP theo cách khác nhau tùy công cụ.

Nếu công cụ không kết nối được bằng một cổng, hãy thử cổng khác. IP giống nhau chỉ khác cổng nên từ phía site đích sẽ không thấy gì thay đổi.

Giá của HTTP proxy là bao nhiêu?

Chức năng HTTP được bao gồm trong tất cả các gói, vì vậy giá được xác định bởi loại IP. Giá hàng tháng cho một IP chia sẻ từ trung tâm dữ liệu là $0.0179, chia sẻ ISP là $0.1800, và các IP riêng tư và chuyên dụng có giá cao hơn một chút do số lượng người dùng ít hơn.

Các gói có số lượng IP lớn được giảm giá tối đa 40%, và thanh toán hàng năm 12 tháng được giảm thêm 30%.

Làm thế nào để thiết lập HTTP proxy?

Nhập IP, cổng HTTP, tên người dùng và mật khẩu từ dòng proxy vào cài đặt proxy của công cụ. Định dạng một dòng là http://USER:PASS@IP:HTTP_PORT. Nếu bật xác thực IP bằng cách đăng ký IPv4 máy chủ của bạn trên bảng điều khiển, bạn có thể kết nối chỉ với http://IP:HTTP_PORT.

Trong Node.js, bạn có thể đính kèm HTTP proxy agent hoặc nhập thông tin host, port và xác thực vào tùy chọn proxy của axios. Selenium và Playwright truyền địa chỉ máy chủ proxy khi khởi chạy trình duyệt, và nếu cần xác thực, Playwright nhận tên người dùng và mật khẩu như một tùy chọn. Bạn có thể tìm thấy các ví dụ chi tiết cho từng công cụ trên trang hướng dẫn.

curl -x http://USER:PASS@IP:HTTP_PORT https://api.ipify.org

import requests

proxy = "http://USER:PASS@IP:HTTP_PORT"
r = requests.get("https://api.ipify.org", proxies={"http": proxy, "https": proxy}, timeout=20)
print(r.text)

yield scrapy.Request(url, meta={"proxy": "http://USER:PASS@IP:HTTP_PORT"})

export HTTP_PROXY=http://USER:PASS@IP:HTTP_PORT
export HTTPS_PROXY=http://USER:PASS@IP:HTTP_PORT

Các phương thức xác thực HTTP proxy là gì?

Đầu tiên là tên người dùng và mật khẩu. Chương trình sẽ gửi thông tin tài khoản qua tiêu đề Proxy-Authorization, và bạn có thể sử dụng cùng một cài đặt từ bất kỳ đâu. Phù hợp với môi trường có vị trí truy cập thay đổi như máy tính xách tay, nhiều máy chủ hoặc công việc trên đám mây.

Thứ hai là xác thực IP. Đăng ký tối đa 10 địa chỉ IPv4 công cộng của server vào dashboard, các kết nối từ những IP này sẽ không cần mật khẩu. Tiện cho các chương trình không có ô nhập mật khẩu hoặc tự động hóa trình duyệt, không cần lưu mật khẩu trong file cấu hình.

Bạn có thể kết hợp cả hai. Kết nối từ server đã đăng ký IP không cần mật khẩu, từ nơi khác dùng username/password. IP đăng ký có thể thay đổi bất cứ lúc nào trong dashboard.

HTTP proxy thường được sử dụng cho những công việc gì?

• Thu thập dữ liệu web: Sử dụng Scrapy, requests, axios để thu thập trang công khai qua nhiều IP.
• So sánh giá: Kiểm tra trang sản phẩm bằng IP từng quốc gia.
• Thu thập kết quả tìm kiếm: kiểm tra kết quả và thứ hạng theo quốc gia.
• Phân tán yêu cầu API: Gọi chia nhỏ các API công khai có giới hạn yêu cầu theo IP.
• Kiểm tra trình duyệt: Sử dụng Selenium và Playwright để kiểm tra giao diện theo khu vực.
• IP đầu ra cố định của hệ thống công ty: dùng làm IP để đăng ký vào danh sách cho phép của đối tác.

Làm thế nào để khắc phục lỗi mã phản hồi 407 hoặc lỗi kết nối HTTP proxy?

Nếu vẫn không giải quyết được, vui lòng liên hệ với bộ phận hỗ trợ khách hàng trên bảng điều khiển và cung cấp dòng proxy cùng thông báo lỗi.

Hầu hết công việc bắt đầu bằng proxy trung tâm dữ liệu shared, và chuyển sang private hoặc dedicated khi truy cập cùng một trang lâu hoặc lượng dữ liệu tăng. Tất cả các gói đều có thể dùng cổng HTTP nên không cần thay đổi mã.

Để giảm lỗi, hãy đặt timeout cho mỗi request và thêm quy tắc thử lại với IP khác nếu thất bại. Nếu lỗi liên tục từ một IP, hãy tạm ngưng IP đó và tiếp tục với các IP còn lại.

• 407 Proxy Authentication Required: Vui lòng kiểm tra lại tên người dùng và mật khẩu, hoặc xác nhận đã đăng ký IP máy chủ hiện tại trong IP authorization.
• Kết nối bị từ chối: Kiểm tra xem bạn đã nhập port HTTP thay vì port SOCKS5 hay chưa.
• Hết thời gian: Tăng thời gian chờ của công cụ lên hơn 20 giây và thử lại.
• 403·429 từ trang đích: tăng khoảng cách giữa các yêu cầu và chia nhỏ qua các IP khác nhau.

Việc sử dụng HTTP proxy có làm thay đổi tiêu đề yêu cầu không?

Trang HTTPS được mã hóa từ đầu đến cuối giữa chương trình của bạn và máy chủ đích, vì vậy proxy không thể xem hoặc thay đổi tiêu đề yêu cầu. Trang web đích sẽ nhận được tiêu đề từ chương trình của bạn, chỉ có IP truy cập được thay đổi thành IP của proxy.

Ngay cả trên các trang web http:// không mã hóa, Socks5Proxy cũng không thêm tiêu đề tiết lộ IP gốc của bạn. Do đó, trang web đích không thể nhận biết yêu cầu qua proxy qua tiêu đề và coi IP proxy như một IP truy cập thông thường.

Header như User-Agent, ngôn ngữ, cookie cần được thiết lập và gửi từ chương trình của bạn. Khi viết trình thu thập, nên gửi kèm header tương tự trình duyệt thực tế.

Làm thế nào để sử dụng HTTP proxy theo quốc gia?

Khi bạn áp dụng bộ lọc quốc gia trên bảng điều khiển hoặc API để nhận danh sách, các tệp sẽ được tạo theo từng quốc gia. Ví dụ, để kiểm tra giá ở Mỹ, bạn chỉ cần tải danh sách của Mỹ, và tương tự với Đức.

Địa chỉ /proxies trong API trả về JSON kèm mã quốc gia và thành phố, có thể nhận toàn bộ danh sách một lần rồi chia theo quốc gia trong chương trình. IP từ gói mới mua tự động thêm vào cùng địa chỉ.

IP trung tâm dữ liệu có sẵn ở nhiều quốc gia trên các châu lục, trong khi IP ISP có sẵn ở các quốc gia thị trường chính. Số lượng IP và thành phố theo quốc gia được liệt kê trên trang khu vực.

Làm thế nào để mua HTTP proxy?

Đăng ký bằng token tài khoản, nạp số dư, sau đó trên màn hình mua hàng, chọn loại IP, quốc gia, số lượng IP và thời hạn. Thanh toán ngay lập tức sẽ phát hành danh sách cùng với cổng HTTP và SOCKS5.

Số tiền nạp tối thiểu: $30. Bạn sẽ nhận được tiền thưởng tùy theo số tiền nạp. Số tiền của gói chưa được kích hoạt sẽ được hoàn lại vào số dư.