API web scraping tốt nhất: so sánh giá, credit và gói miễn phí

Nên chọn API web scraping nào?

Nếu bạn muốn hạn mức miễn phí lớn nhất và giá thấp nhất cho việc tải các trang thông thường, hãy bắt đầu với Scrape.do: 1.000 credit miễn phí mỗi tháng với 5 request đồng thời, cùng gói Hobby $29 có 250.000 credit. Nếu phần lớn công việc của bạn là kết quả Google, sản phẩm trên Amazon hay các trang phổ biến khác và bạn muốn nhận dữ liệu đã được phân tích sẵn thay vì HTML thô, hãy xem Scrapingdog: các endpoint chuyên dụng của dịch vụ này bao quát Google, Amazon, Walmart, eBay, YouTube và nhiều trang khác, còn endpoint Light Google SERP chỉ tốn 5 credit, so với 10 credit cho một request Google qua API tổng quát của Scrape.do.

Cả hai đều chỉ tính phí các phản hồi thành công, đều cho bắt đầu mà không cần thẻ tín dụng và đều tính tiền theo cùng một cách: một lượng credit hằng tháng, request càng nặng càng tốn nhiều credit. Điểm cuối cùng này quan trọng hơn giá niêm yết, vì vậy phần còn lại của bài hướng dẫn sẽ chỉ cách so sánh hai dịch vụ dựa trên chi phí thực tế cho các request của bạn.

API web scraping làm gì và khi nào bạn cần đến nó

API web scraping đứng giữa code của bạn và trang web bạn muốn đọc. Bạn gửi một URL (hoặc truy vấn tìm kiếm, với các endpoint chuyên dụng) kèm API key, và API trả về HTML của trang hoặc JSON có cấu trúc. Đằng sau request đó, nhà cung cấp vận hành phần hạ tầng thường tốn nhiều công sức nhất nếu tự duy trì: một nhóm proxy xoay vòng, trình duyệt headless cho các trang dùng nhiều JavaScript, quản lý header và fingerprint, thử lại request và xử lý CAPTCHA.

Có lẽ bạn cần đến nó nếu:

• bạn thu thập giá công khai, dữ liệu sản phẩm hoặc kết quả tìm kiếm theo lịch và đã mệt mỏi với việc duy trì proxy và cụm trình duyệt;
• scraper của bạn chạy tốt trên các trang đơn giản nhưng trang dựng bằng JavaScript lại trả về rỗng;
• bạn cần kết quả như khi xem từ một quốc gia cụ thể.

Có lẽ bạn không cần nếu trang web có API chính thức hoặc tính năng xuất dữ liệu cho thứ bạn cần, hoặc nếu bạn chỉ tải vài trang từ một website trả về HTML thuần. Trong cả hai trường hợp, gửi request trực tiếp sẽ đơn giản và rẻ hơn.

Nếu bạn muốn tự quản lý proxy thay vì trả tiền theo request, các bài hướng dẫn về proxy dân cư tốt nhất và proxy dân cư là gì sẽ giải thích hướng đi đó.

Cách chọn API scraping: chúng tôi đã so sánh những gì

• Giá cho mỗi request thành công, không phải mỗi credit. Cả hai dịch vụ đều bán credit, và một request có thể tốn 1 credit hoặc hơn 25. Hãy chia giá gói cho số credit mà một request điển hình của bạn tiêu tốn để có chi phí thực cho mỗi nghìn trang.
• Hệ số nhân credit. Render JavaScript, IP cao cấp hoặc IP dân cư, nhắm mục tiêu theo quốc gia và một số tên miền được bảo vệ sẽ nhân chi phí lên. Hãy kiểm tra hệ số nhân cho đúng các trang bạn định thu thập.
• Gói miễn phí hoặc dùng thử. Có đủ credit miễn phí để chạy thử các trang mục tiêu thật của bạn qua API trước khi trả tiền là cách kiểm tra tốt nhất.
• Số request đồng thời. Số request chạy cùng lúc giới hạn tốc độ bạn xử lý một danh sách URL, bất kể số dư credit là bao nhiêu.
• Endpoint dựng sẵn. JSON đã phân tích cho Google, Amazon và các trang tương tự giúp bạn khỏi phải viết và bảo trì parser.
• Điều gì xảy ra khi chạm giới hạn. Credit chưa dùng có được chuyển sang tháng sau không, và khi hết credit thì request dừng lại hay vẫn tiếp tục bị tính phí.
• Hoàn tiền và hủy gói. API scraping là dịch vụ trả trước, nên hãy đọc điều khoản hoàn tiền trước khi chọn gói lớn.

Bảng ở đầu trang này liệt kê gói khởi điểm, hạn mức miễn phí và giới hạn chính của từng dịch vụ theo cùng một đơn vị.

Giá API scraping: credit không phải là số trang

Dưới đây là những gì các gói trả phí khởi điểm thực sự mua được sau khi áp dụng hệ số nhân, dựa trên chi phí credit mà từng nhà cung cấp công bố:

Như vậy, với các trang thông thường, Scrape.do cho nhiều request hơn trên mỗi đô la ở mức khởi điểm, còn với tìm kiếm Google thì endpoint Light SERP của Scrapingdog rẻ hơn: khoảng $1,00 cho mỗi nghìn lượt tìm kiếm trên gói Lite, so với khoảng $1,16 trên Scrape.do Hobby.

Hai chi tiết chi phí khác:

• Scrape.do công bố chi phí cố định theo tên miền cho các trang được bảo vệ: ví dụ google.* là 10 credit, linkedin.com là 30, shopee.* là 100 và sainsburys.co.uk là 200. Header Scrape.do-Request-Cost trong mỗi phản hồi cho biết bạn đã bị tính bao nhiêu.
• Scrapingdog tính giá theo endpoint: 1 credit cho request qua proxy xoay vòng hoặc tìm kiếm Amazon, 5 cho render JS và hầu hết endpoint Google, 10 cho proxy cao cấp, nhắm mục tiêu theo quốc gia hoặc parser AI, 25 cho render JS kèm proxy cao cấp và tối đa 50 cho profile scraper. Lưu ý rằng chỉ riêng nhắm mục tiêu theo quốc gia đã tốn 10 credit.

Các gói tầm trung khá sát nhau: Scrape.do Pro giá $99 cho 1.250.000 credit, Scrapingdog Standard giá $90 cho 1.000.000. Cả hai đều chỉ tính tiền mười tháng cho mười hai tháng khi thanh toán theo năm.

Scrape.do: gói miễn phí lớn hơn và request thông thường rẻ hơn

Sản phẩm chính của Scrape.do là một Web Scraping API tổng quát: bạn truyền vào URL và token, dịch vụ sẽ lo xoay vòng proxy, render headless khi được yêu cầu (render=true), IP dân cư và di động (super=true), sticky session và nhắm mục tiêu địa lý tại hơn 160 quốc gia. Scrape.do còn có Ready Scraper APIs trả về JSON đã phân tích cho các trang như Google Search, Amazon và YouTube, cùng đầu ra markdown để đưa nội dung trang vào các công cụ AI.

Hãy chọn Scrape.do nếu bạn thu thập dữ liệu từ nhiều trang khác nhau qua một API tổng quát, muốn gói miễn phí đủ để thử nghiệm thật (1.000 credit và 5 request đồng thời mỗi tháng), hoặc muốn có nhắm mục tiêu địa lý ở mọi gói, kể cả gói miễn phí. Theo trang bảng giá, gói nào cũng bao gồm proxy dân cư và di động, render JavaScript và nhắm mục tiêu địa lý, còn proxy dân cư và di động cao cấp có từ gói Business ($249) trở lên.

Điểm trừ: không có hình thức trả thêm theo mức dùng khi vượt hạn mức. Khi hết credit của tháng, request sẽ dừng cho đến khi bạn nâng gói hoặc mua thêm credit. Hoàn tiền chỉ áp dụng cho lần đăng ký đầu tiên, trong vòng 3 ngày, với credit chưa dùng. Bạn có thể hủy bất cứ lúc nào trong bảng điều khiển. Chi tiết xem trong bài đánh giá Scrape.do của chúng tôi.

Scrapingdog: endpoint dựng sẵn cho các trang phổ biến

Scrapingdog kết hợp một API scraping tổng quát (proxy xoay vòng, Chrome headless, xử lý CAPTCHA) với danh sách dài các endpoint chuyên dụng trả về dữ liệu có cấu trúc: Google SERP, Maps, News, Shopping, Scholar, Trends, Jobs và AI Mode; Amazon, Walmart, eBay và Flipkart; YouTube, TikTok và nhiều trang khác; cùng API chụp ảnh màn hình và parser AI. Mọi gói, kể cả gói miễn phí, đều gọi được tất cả các API.

Hãy chọn Scrapingdog nếu bạn theo dõi thứ hạng Google hoặc sản phẩm trên các sàn thương mại điện tử và muốn nhận JSON thay vì tự viết parser, hoặc nếu bạn dự định mở rộng quy mô lớn: trang bảng giá liệt kê các gói từ Lite $40 đến $30.000 mỗi tháng, và credit chưa dùng được chuyển sang tháng sau từ gói Standard ($90) trở lên.

Điểm trừ: gói miễn phí khá nhỏ, 100 credit với 1 request đồng thời, chỉ đủ cho vài chục lượt tìm kiếm Google. Điều khoản ghi rõ không hoàn tiền khi dịch vụ đã được cung cấp, và credit chưa dùng sẽ mất khi bạn hủy hoặc hạ gói. Nhắm mục tiêu theo quốc gia tốn 10 credit mỗi request và có từ gói Lite. Xem thêm trong bài đánh giá Scrapingdog của chúng tôi.

API web scraping miễn phí: thực tế bạn nhận được gì

Không gói miễn phí nào dành cho môi trường production, nhưng cả hai đều đủ để trả lời câu hỏi duy nhất quan trọng trước khi trả tiền: API này có trả về dữ liệu bạn cần từ các trang mục tiêu của bạn không?

• Scrape.do Free: 1.000 credit thành công mỗi tháng, 5 request đồng thời, không cần thẻ. Tức là 1.000 request cơ bản, 200 request có render hoặc 40 request render trên IP dân cư.
• Scrapingdog Free: 100 credit, 1 request đồng thời, không cần thẻ, truy cập tất cả API. Tức là 20 lượt tìm kiếm Google Light SERP hoặc 100 trang sản phẩm Amazon.

Một cách thử tốt: chọn mười URL đại diện cho những trang mục tiêu khó nhất, chạy qua cả hai dịch vụ, rồi kiểm tra chi phí của từng phản hồi (header chi phí của Scrape.do, bảng giá endpoint của Scrapingdog) cùng việc dữ liệu có trả về đầy đủ hay không. Request thất bại, bị chặn hoặc quá thời gian chờ đều không bị tính phí ở cả hai dịch vụ.

Các API scraping khác đáng biết

Thị trường rộng hơn hai cái tên này. ScraperAPI, ScrapingBee, Zyte và Bright Data là những lựa chọn thay thế nổi tiếng, mỗi bên có bản dùng thử miễn phí và hệ thống credit riêng; họ cũng tính phí theo mô hình credit kèm hệ số nhân, nên cách so sánh ở trên áp dụng được cho cả họ.

Để tìm thêm công cụ vận hành một doanh nghiệp trực tuyến, hãy xem danh mục phần mềm doanh nghiệp của chúng tôi.

Thu thập dữ liệu có trách nhiệm

API scraping chỉ thay đổi cách request đến được trang web, chứ không thay đổi việc bạn được phép thu thập những gì. Trước khi mở rộng quy mô:

• Đọc điều khoản và robots.txt của trang mục tiêu. Nhiều trang nêu rõ họ cho phép truy cập tự động đến mức nào; hãy tôn trọng các quy định đó và ưu tiên API chính thức hoặc nguồn dữ liệu (data feed) nếu trang có cung cấp.
• Chỉ thu thập dữ liệu công khai. Đừng lấy nội dung nằm sau trang đăng nhập mà bạn không có quyền truy cập, và hãy cẩn trọng với dữ liệu cá nhân: các quy định như GDPR hay Nghị định 13/2023/NĐ-CP về bảo vệ dữ liệu cá nhân vẫn áp dụng cho tên, hồ sơ và thông tin liên hệ ngay cả khi chúng hiển thị công khai.
• Giữ tải ở mức hợp lý. Chỉ tải những gì bạn cần, với tốc độ không gây quá tải cho trang, và lưu cache kết quả thay vì tải lại nhiều lần.
• Nắm rõ quy định của nhà cung cấp. Điều khoản của Scrape.do chỉ cho phép dùng dịch vụ vào mục đích hợp pháp và cấm các hành vi như thử thẻ (card testing), quét lỗ hổng và bẻ khóa thông tin đăng nhập. Điều khoản của Scrapingdog quy định bạn chịu trách nhiệm tuân thủ luật pháp sở tại và cấm dùng dữ liệu của dịch vụ để tiết lộ thông tin cá nhân riêng tư hoặc nhạy cảm.

Các mục đích hợp pháp điển hình gồm theo dõi giá và tình trạng còn hàng, theo dõi thứ hạng SEO, nghiên cứu thị trường và xây dựng bộ dữ liệu từ các trang công khai. Nếu một dự án phụ thuộc vào việc lách qua sự từ chối rõ ràng của một trang web, thì đó không phải dự án phù hợp cho API scraping.