Có một công cụ cho phép tôi truy vấn một nội dung trang web? [đóng cửa]

Tôi hiện đang thực hiện nghiên cứu sâu rộng trên các trang web khác nhau mà tất cả đều có sẵn.

Tôi đã tự hỏi liệu có một tiện ích mở rộng cho Chrome (hoặc Firefox hoặc thậm chí là một công cụ bên ngoài) cho phép tôi truy vấn nội dung trang web như nếu tôi sẽ sử dụng các biểu thức thông thường.

Tôi nghĩ bạn có thể sử dụng google.comnhưng điều này không thuận tiện lắm vì nó không cung cấp nhiều tùy chọn liên quan đến truy vấn và tôi phải chuyển sang google.comquay lại mọi lúc.

Đầu tiên, hãy kiểm tra Google Custom Search. Nó có tùy chọn tìm kiếm miễn phí, nhưng nếu đây là nghiên cứu được tài trợ, có thể đáng để trả tiền cho dịch vụ để bạn có thể truy vấn Google với tần suất lớn hơn nhiều. Tôi đã không kiểm tra giá cả, nhưng tôi không tin rằng nó đắt tiền. Dịch vụ miễn phí chỉ cung cấp 200 tìm kiếm miễn phí mỗi ngày.

API tìm kiếm tùy chỉnh của Google

Tiếp theo, nghiên cứu về các tùy chọn tìm kiếm khác nhau của Google. Google Guide có một danh sách tuyệt vời các nhà khai thác tìm kiếm nâng cao mà bạn có thể sử dụng với tìm kiếm tùy chỉnh của mình.

Ngoài ra còn có một vài công cụ dựa trên dòng lệnh mà mọi người đã tạo sử dụng công cụ Tìm kiếm Tùy chỉnh của Google. Hầu hết trong số này có thể được tìm thấy bởi Googling cho một công cụ như vậy dành riêng cho hệ điều hành của bạn. Những công cụ này sẽ giúp bạn có được thông tin thô mà bạn cần.

Mặc dù đây không phải là tiện ích mở rộng của Chrome, nhưng bạn có thể xem YQL (Ngôn ngữ truy vấn Yahoo) có thể cho phép bạn chọn * từ Internet

gnuwin32 wgetphải lấy các trang và greptruy vấn chúng, và bạn có thể sử dụng powergrephoặc thay thế miễn phí - có thể ransack tác nhân có thể tìm kiếm trong các tệp. Bạn chỉ cần tải xuống các trang web dưới dạng tập tin.