What should you check before scraping a web site?

4 phương ánCó giải thích

Các phương án trả lời

Chọn một phương án
Lời giảiChọn phương án để mở
Đáp án đúng: "That the web site allows scraping". Thu thập dữ liệu web (web scraping) là dùng chương trình tự động tải trang và bóc nội dung; trước khi làm cần kiểm xem trang có cho phép hay không, qua điều khoản sử dụng (terms of service) và tệp robots.txt, vì nhiều trang cấm truy cập tự động hoặc giới hạn tốc độ, vi phạm có thể bị chặn hoặc gặp rắc rối pháp lý. Phương án "That the web site supports the HTTP GET command" sai vì GET là phương thức cơ bản mà mọi máy chủ web đều hỗ trợ để trả trang, không có gì phải kiểm. Phương án "That the web site returns HTML for all pages" không cần thiết: trang có thể trả JSON, ảnh hay PDF và chương trình vẫn xử lý được theo từng loại. Phương án "That the web site only has links" không liên quan tới việc được phép thu thập, và một trang chỉ toàn liên kết thì cũng chẳng có nội dung gì đáng lấy.

Cùng phần 3

Xuất hiện trong 1 bộ đề