Computer >> Hướng Dẫn Máy Tính >  >> Lập Trình >> Lập Trình

Khai thác cấu trúc Web (Web Structure Mining) là gì?

Khai thác cấu trúc Web là công cụ nhận diện mối quan hệ giữa các trang web liên kết bởi dữ liệu hoặc kết nối liên kết trực tiếp. Dữ liệu cấu trúc này có thể khám phá bằng cách cung cấp lược đồ cấu trúc web qua kỹ thuật database cho trang web.

Kết nối này cho phép công cụ tìm kiếm kéo dữ liệu liên quan đến truy vấn tìm kiếm trực tiếp đến trang web kết nối từ trang web nội dung dựa trên. Hoàn thành qua cần thiết của spider quét trang web, lấy trang chủ, sau đó kết nối dữ liệu qua tham chiếu liên kết mang đến trang cụ thể bao gồm thông tin mong muốn.

Khai thác web có thể xem rộng là ứng dụng phương pháp khai thác dữ liệu thích ứng cho web, trong khi khai thác dữ liệu được biểu diễn là ứng dụng thuật toán tìm mẫu trên dữ liệu có cấu trúc chủ yếu cố định trong quy trình khám phá tri thức.

Khai thác web có đặc tính hỗ trợ tập hợp nhiều loại dữ liệu. Web có khía cạnh tạo ra nhiều cách tiếp cận khai thác: trang web bao gồm văn bản, trang web liên kết qua siêu liên kết, hoạt động người dùng giám sát qua nhật ký máy chủ web.

Khai thác cấu trúc giảm thiểu hai vấn đề chính của World Wide Web do lượng lớn dữ liệu. Vấn đề đầu: kết quả tìm kiếm không liên quan. Độ liên quan thông tin tìm kiếm bị hiểu sai do công cụ tìm kiếm thường chỉ cho phép tiêu chí độ chính xác thấp.

Vấn đề hai: không thể lập chỉ mục lượng lớn dữ liệu trên Web. Tạo ra lượng nhớ thấp với khai thác nội dung. Giảm thiểu này xuất hiện một phần với dịch vụ tìm mô hình cơ sở cấu trúc siêu liên kết Web được hỗ trợ bởi khai thác cấu trúc Web.

Mục tiêu khai thác cấu trúc là trích xuất mối quan hệ chưa biết trước giữa các trang web. Cấu trúc khai thác dữ liệu này cung cấp dùng cho doanh nghiệp kết nối dữ liệu trang web để cho phép điều hướng và gom cụm dữ liệu thành sơ đồ trang web (site maps).

Cho phép người dùng tạo dữ liệu mong muốn qua quan hệ từ khóa và khai thác nội dung. Phân cấp siêu liên kết (Hyperlink hierarchy) cũng quyết định đường dẫn dữ liệu liên quan trong trang đến kết nối đối thủ và kết nối qua công cụ tìm kiếm và co-link bên thứ ba. Cho phép gom cụm trang web liên kết tạo mối quan hệ các trang này.

Trên World Wide Web, dùng khai thác cấu trúc cho phép xác định kiến trúc tương tự của trang web bằng gom cụm qua nhận diện cấu trúc cơ bản.

Dữ liệu này có thể dùng thiết kế sự tương đồng nội dung web. Sự tương đồng đã biết sau đó hỗ trợ khả năng hỗ trợ hoặc cải thiện dữ liệu trang web để cho phép truy cập web-spider tỷ lệ cao hơn. Càng nhiều web crawler, càng có lợi cho trang web do nội dung liên quan đến tìm kiếm.