Ngành Công Nghiệp Proxy Là Gì và Tại Sao Nó Tồn Tại

Ngành công nghiệp proxy không được xây dựng cho những kẻ tấn công. Khám phá lý do tại sao giới hạn tốc độ IP đã đẩy các doanh nghiệp hợp pháp hướng tới cơ sở hạ tầng proxy.

Ngành công nghiệp proxy tồn tại vì một căng thẳng đơn giản đã được tích hợp vào internet trong hai thập kỷ qua: các trang web muốn kiểm soát ai truy cập dữ liệu của họ và với tốc độ bao nhiêu, đồng thời có cả một nền kinh tế của các doanh nghiệp hợp pháp cần truy cập dữ liệu đó ở quy mô mà các trang web không được thiết kế để phục vụ.

Để hiểu cách chúng ta đến đây, bạn phải quay trở lại khi internet mới bắt đầu phát triển. Theo tiêu chuẩn ngày nay, các trang web hồi đó cực kỳ dễ bị tấn công. Nhưng đó không phải là mối lo ngại lớn vào thời điểm đó, vì kiến thức cần thiết để tấn công chúng không dễ tiếp cận. Khi điều đó thay đổi, một ngành công nghiệp mới ra đời để phòng chống nó: an ninh mạng.

Sự Phát Triển của Các Biện Pháp Phòng Chống Mạng

An ninh mạng ban đầu tập trung chủ yếu vào việc ngăn chặn những điều cơ bản. Các cuộc tấn công DoS được sử dụng để tắt trang web hoặc dịch vụ của đối thủ cạnh tranh. Các lỗ hổng như SQL injection, lỗ hổng IDOR và các cuộc tấn công kiểu SSRF được sử dụng để lấy thông tin nhạy cảm từ cơ sở dữ liệu. Theo thời gian, ngành công nghiệp phát triển, và các biện pháp phòng chống cũng vậy.

Một trong những phát triển quan trọng nhất là giới hạn tốc độ dựa trên IP. Khi các trang web bắt đầu giới hạn số lượng yêu cầu mà một IP có thể thực hiện, các cuộc tấn công từ một máy duy nhất sẽ không còn có khả năng mở rộng. Những kẻ tấn công cũng có những lý do khác để phân tán, chủ yếu là băng thông thô và loại bỏ một điểm lỗi duy nhất, nhưng giới hạn tốc độ đã mang lại cho họ một lý do nữa.

DoS đã nhường chỗ cho DDoS (Tấn Công Từ Chối Dịch Vụ Phân Tán); những đợt tấn công lớn ban đầu, chẳng hạn như Panix năm 1996 và các cuộc tấn công vào Yahoo và eBay vào tháng 2 năm 2000, chủ yếu được thúc đẩy bởi băng thông và botnet. Tấn công brute-force thông tin đăng nhập, trong đó những kẻ tấn công kiểm tra các kết hợp email/mật khẩu bị đánh cắp đối với các trang web giá trị cao, cũng không còn có thể được chạy ở quy mô từ một máy duy nhất nữa, và nó không bao giờ dừng lại: Akamai vẫn ghi nhận hàng chục tỷ lần thử mỗi tháng.

Ai Khác Bị Ảnh Hưởng Bởi Cuộc Chiến Này

Đó là phần của câu chuyện mà hầu hết mọi người biết. Nhưng những gì ít được thảo luận hơn là ai khác bị ảnh hưởng bởi cuộc chiến này.

Cùng lúc với tất cả điều này, một ngành công nghiệp hoàn toàn hợp pháp đang phát triển nhanh chóng. Các công ty cần:

Giám sát giá cả của đối thủ cạnh tranh trên hàng ngàn trang web thương mại điện tử
Xác minh rằng quảng cáo được hiển thị chính xác trên các khu vực địa lý khác nhau
Theo dõi xếp hạng SEO trên hàng triệu từ khóa
Thu thập dữ liệu công khai để hiểu được xu hướng của người tiêu dùng
Lấy giá chuyến bay và khách sạn theo thời gian thực
Quét để tìm hàng giả và vi phạm nhãn hiệu

Không có gì trong số này là tấn công. Đó là các doanh nghiệp trích xuất dữ liệu công khai ở quy mô lớn, cho các mục đích mà các trang web được đề cập thường được hưởng lợi.

Vấn đề là các cơ chế phòng chống mà các trang web triển khai không phân biệt giữa một kẻ tấn công độc hại và một công ty giám sát giá. Cả hai đều trông giống như "một IP duy nhất thực hiện rất nhiều yêu cầu". Captcha, giới hạn tốc độ IP và các hệ thống phát hiện bot xử lý chúng giống nhau.

Proxy Có Vai Trò Gì

Nếu doanh nghiệp của bạn phụ thuộc vào khả năng thực hiện một khối lượng lớn yêu cầu, và trang web bên kia đang giới hạn tốc độ theo IP, giải pháp là phân phối những yêu cầu đó trên nhiều IP. Đó là toàn bộ tiền đề. Bạn không phải đang bỏ qua bảo mật cho các mục đích độc hại; bạn đang định tuyến lưu lượng hợp pháp qua đủ IP khác nhau để không kích hoạt các giới hạn được thiết kế để ngăn chặn hành vi rất khác.

Ngành công nghiệp proxy tồn tại ở giao điểm này. Nó trở nên cần thiết do những tiến bộ an ninh mạng đã giúp bảo vệ các trang web khỏi những kẻ tấn công thực sự, nhưng những tiến bộ tương tự cũng ảnh hưởng đến những người tiêu dùng, nhà nghiên cứu và doanh nghiệp thu thập dữ liệu hợp pháp. Ngành công nghiệp proxy là những gì cho phép những hoạt động hợp pháp đó tiếp tục hoạt động trong một internet nơi mỗi IP được coi là đáng nghi cho đến khi được chứng minh.

Đó là câu chuyện trung thực về cách ngành công nghiệp này ra đời. Không phải như một công cụ cho những kẻ tấn công, mà là cơ sở hạ tầng cho phép nền kinh tế dữ liệu hợp pháp tiếp tục hoạt động.

Nếu bạn muốn hiểu rõ cách proxy hoạt động ở cấp độ kỹ thuật, bài viết tiếp theo sẽ đề cập đầy đủ điều đó.

Được xuất bản bởi Alon Levi, CEO tại FlashProxy

Về tác giả: Alon Levi là CEO của FlashProxy và có kinh nghiệm rộng rãi trong cơ sở hạ tầng proxy, kiến trúc mạng và công nghệ định tuyến IP quy mô lớn.

Kết nối trên LinkedIn · Liên hệ: [email protected]

Các Câu Hỏi Thường Gặp

Sử dụng proxy có hợp pháp không?

Có. Proxy là những công cụ, và như bất kỳ công cụ nào, tính hợp pháp của chúng phụ thuộc vào cách bạn sử dụng chúng. Ba điều đáng phân biệt.

Luật hình sự: ở Hoa Kỳ, thu thập dữ liệu công khai nói chung không phải là vi phạm CFAA, sau Van Buren v. United States (2021) và các quyết định hiQ v. LinkedIn.
Luật hợp đồng: Điều khoản Dịch vụ của một trang web vẫn có thể ràng buộc bạn, và hiQ cuối cùng đã thua đúng vấn đề đó, trả LinkedIn 500 000 đô la (mặc dù Meta v. Bright Data đã đi theo hướng khác vào năm 2024 đối với dữ liệu công khai được thu thập khi đăng xuất).
Luật bảo vệ dữ liệu: nếu bạn đang thu thập dữ liệu cá nhân, GDPR và CCPA áp dụng bất kể các lựa chọn trên.

Đây không phải là tư vấn pháp lý.

Ai sử dụng proxy?

Các công ty thương mại điện tử, công ty công nghệ quảng cáo, các tổng hợp du lịch, nhà nghiên cứu an ninh mạng, nền tảng SEO và công ty AI là những người dùng proxy phổ biến nhất.

Tại sao các trang web lại chặn proxy?

Các trang web chặn proxy chủ yếu để ngăn chặn lưu lượng tự động quá mức có thể làm quá tải máy chủ của họ. Cùng một giới hạn tốc độ ngăn chặn các cuộc tấn công cũng bắt các hoạt động thu thập dữ liệu hợp pháp.