Nếu Google không tìm thấy thì nó không tồn tại? Dù Google tuyệt vời trong việc định vị thông tin trực tuyến, sự thật là bạn chỉ tìm được một phần nhỏ thông tin tồn tại trên thế giới. Google lập chỉ mục hàng tỷ trang, nhưng có hàng trăm, nếu không phải hàng nghìn trang khác không có trong chỉ mục vì một lý do nào đó. Các trang này bị "chôn" trong Deep Web, và khả năng cao bạn sẽ tìm thấy chúng nếu biết cách tìm kiếm.
Deep Web hay Dark Web?
Khi nói về các trang không được Google lập chỉ mục, ý nghĩ đầu tiên có thể là Dark Web. Mặc dù Dark Web (còn gọi là Darknet) phù hợp với mô tả các trang không được Google lập chỉ mục, nhưng Dark Web và Deep Web khác nhau.
Ví dụ trang Deep Web là nhóm kín trên Facebook. Vì trang chỉ truy cập được sau đăng nhập, và Googlebot không thể đăng nhập để truy cập, nên không được lập chỉ mục. Tuy nhiên, khi bạn đăng nhập vào nhóm, bạn thấy được trang. Tương tự, nếu trang yêu cầu thanh toán để truy cập, Googlebot không lập chỉ mục được, nhưng bạn có thể xem sau khi trả tiền.
Liên kết no-follow hoặc hỏng, hoặc trang động được tạo tức thì sau truy vấn tìm kiếm của người dùng, cũng ngăn cản công cụ tìm kiếm lập chỉ mục, nhưng con người vẫn truy cập được thông tin. Thông tin dạng hình ảnh/video hoặc định dạng khác mà công cụ tìm kiếm không hiểu nhưng con người hiểu là ví dụ khác của nội dung Deep Web. Các trang này truy cập được bằng trình duyệt thông thường, thường dùng giao thức http (hoặc https).
Ngược lại, Dark Web dùng giao thức định tuyến khác với mã hóa tích hợp. Hai giao thức phổ biến là TOR và I2P. Dark Web chứa nhiều tài nguyên bất hợp pháp, và công cụ tìm kiếm tuyệt đối không lập chỉ mục chúng, ngay cả khi có thể.
Sau khi phân biệt Deep Web và Dark Web, hãy xem bạn có thể làm gì để tìm nội dung trong Deep Web.
1. Thử công cụ tìm kiếm khác
Đôi khi trang không truy cập được bằng Google (vì lý do nào đó) nhưng được lập chỉ mục bởi công cụ tìm kiếm khác. Về mặt kỹ thuật, trong trường hợp này trang không thuộc Deep Web (vì truy cập được qua công cụ tìm kiếm), nhưng đối với ai chỉ tìm kiếm trên Google, trang đó không tồn tại. Nếu quen thói quen thỉnh thoảng dùng công cụ tìm kiếm khác như DuckDuckGo, công cụ tìm kiếm địa phương, hoặc ngay cả Bing, bên cạnh Google, bạn có thể ngạc nhiên về lượng thông tin tốt tìm được.
2. Tìm trang chủ bằng Google rồi tự khám phá
Trong các trường hợp khác, Google chỉ có trang chủ của một trang web. Điều này xảy ra với các trang yêu cầu đăng nhập, thanh toán, hoặc có liên kết no-follow mà Google không lập chỉ mục. Nếu vậy, rất dễ – tìm trang chủ bằng Google, sau đó tự khám phá trang web. Nếu trang có chức năng tìm kiếm, công việc của bạn còn đơn giản hơn.
3. Thử Google Books hoặc đến thư viện
Đối với thông tin học thuật, hãy thử Google Books. Nếu bạn biết một tài liệu tồn tại nhưng không tìm thấy trên Google Books, bạn có thể đến thư viện, đặc biệt là thư viện học thuật. Nhiều thư viện tại cao đẳng và đại học đăng ký các cơ sở dữ liệu trả phí, và khả năng cao bạn có thể sử dụng chúng, thậm chí miễn phí.
4. Thử công cụ tìm kiếm Deep Web
Nghe có vẻ bất ngờ, Deep Web có công cụ tìm kiếm riêng. Về nhiều khía cạnh như giao diện người dùng hoặc chức năng, các công cụ này "xa lạ" so với Google, nhưng đừng đánh giá sách bằng bìa.
Thực sự có rất nhiều công cụ này, và có thể mất khá nhiều thời gian để tìm thứ bạn muốn. Thậm chí tệ hơn, đôi khi bạn có thể mất ngày hoặc tuần mà không thành công. Hãy xem danh sách khổng lồ các công cụ tìm kiếm Deep Web và xác định những công cụ phù hợp với lĩnh vực quan tâm của bạn. Nếu bạn tìm phiên bản cũ của trang hiện tại và những thứ từng trực tuyến nhưng giờ không còn, hãy thử dự án Internet Archive.
Việc tìm kiếm trên Deep Web có thể khó hơn, nhưng nếu bạn tìm kiếm thông tin chuyên môn cao, bạn có thể may mắn hơn so với công cụ tìm kiếm chung.