Trong blog cuối cùng của tôi, chúng tôi đã nói về Công cụ trích xuất dữ liệu nguồn mở. Mục tiêu chính của “công cụ ETL” là thu thập nội dung của các cơ sở dữ liệu hoặc hệ thống vận hành khác nhau trong tổ chức của bạn và di chuyển/sao chép/chuyển tất cả dữ liệu này vào cơ sở dữ liệu tập trung. “Cơ sở dữ liệu tập trung” này thường được đặt tên là “Kho dữ liệu”. Ngoài ra, các công cụ ETL cũng được sử dụng để thực hiện các chuyển đổi dữ liệu phức tạp khó thực hiện bằng cách sử dụng các câu lệnh SQL đơn giản.
Dưới đây là danh sách một số công cụ ETL thương mại:
-
TRANG DỮ LIỆU INFOSPHERE của IBM –
Đây là một công cụ ETL và là một phần của bộ Giải pháp nền tảng thông tin IBM và InfoSphere của IBM. Nó sử dụng một ký hiệu đồ họa để xây dựng các giải pháp tích hợp dữ liệu. Nó tích hợp dữ liệu trên nhiều hệ thống bằng cách sử dụng khung song song hiệu suất cao và nó hỗ trợ quản lý siêu dữ liệu mở rộng và kết nối doanh nghiệp. Nền tảng có thể mở rộng cung cấp khả năng tích hợp linh hoạt hơn cho tất cả các loại dữ liệu, bao gồm cả dữ liệu lớn ở trạng thái nghỉ (dựa trên Hadoop) hoặc đang chuyển động (dựa trên luồng), trên các nền tảng phân tán và máy tính lớn.
-
Dịch vụ tích hợp máy chủ Microsoft SQL (SSIS) –
Microsoft SSIS là một công cụ tích hợp dữ liệu, chuyển đổi dữ liệu và di chuyển dữ liệu dành cho doanh nghiệp được tích hợp vào cơ sở dữ liệu SQL Server của Microsoft. Nó có thể được sử dụng cho nhiều tác vụ liên quan đến tích hợp, chẳng hạn như phân tích và làm sạch dữ liệu cũng như chạy các quy trình trích xuất, biến đổi và tải để cập nhật kho dữ liệu.
-
ADEPTIA ETL SUITE –
Adeptia cung cấp chức năng ETL đầy đủ kết hợp với giao diện trực quan, dễ sử dụng; cung cấp cho người dùng khả năng chuyển đổi một số tệp khác nhau. Adeptia ETL Suite được thiết kế cho cả những người không chuyên về CNTT, mang lại cho người dùng doanh nghiệp khả năng truy cập dữ liệu của họ trong thời gian thực và chuyển đổi dữ liệu của chính họ để phù hợp với hoạt động của họ, trong khi vẫn cho phép CNTT quản lý các quy trình và đảm bảo rằng dữ liệu được quản lý an toàn và chính xác.
-
Informatica Powercenter –
Informatica Power Center là công cụ tải, chuyển đổi và trích xuất được sử dụng rộng rãi để xây dựng kho dữ liệu doanh nghiệp. Các thành phần chính của Informatica PowerCenter là các công cụ máy khách, máy chủ, máy chủ lưu trữ và kho lưu trữ. Máy chủ Power Center và máy chủ kho lưu trữ tạo nên Lớp ETL, lớp này hoàn thành quá trình xử lý ETL.
-
IBI IWAY DATAMIGRATOR –
Data Migrator là một công cụ tự động toàn diện và mạnh mẽ được thiết kế để đơn giản hóa đáng kể các quy trình trích xuất, chuyển đổi và tải (ETL), bao gồm việc tạo, bảo trì và mở rộng kho dữ liệu, dữ liệu siêu thị và các cửa hàng dữ liệu hoạt động. Giao diện trực quan cho phép tạo quy trình ETL đầu cuối nhanh chóng liên quan đến cấu trúc dữ liệu không đồng nhất trên các nền tảng điện toán khác nhau. Ngoài ra, tính năng thu thập dữ liệu thay đổi chỉ tải các bản ghi đã thay đổi vào nguồn dữ liệu của bạn, giúp giảm đáng kể thời gian cần thiết để làm mới dữ liệu và tạo điều kiện thuận lợi cho kho dữ liệu gần thời gian thực.
-
Dữ liệu Elixir ETL –
Elixir Data ETL được thiết kế để cung cấp khả năng thao tác dữ liệu tự phục vụ, theo yêu cầu cho người dùng doanh nghiệp cũng như nhu cầu xử lý dữ liệu cấp doanh nghiệp. Mô hình mô hình hóa trực quan của nó giúp giảm đáng kể thời gian cần thiết để thiết kế, thử nghiệm và triển khai khai thác, tổng hợp và chuyển đổi dữ liệu – một quy trình quan trọng đối với mọi sáng kiến xử lý ứng dụng, báo cáo doanh nghiệp và đo lường hiệu suất, siêu thị dữ liệu hoặc kho dữ liệu.
-
SYNCSORT DMX –
Syncsort DMX mang tất cả các chuyển đổi dữ liệu thành một công cụ ETL trong bộ nhớ có hiệu suất cao hơn. Các phép biến đổi được xử lý nhanh chóng, loại bỏ nhu cầu sử dụng các khu vực tổ chức cơ sở dữ liệu tốn kém hoặc đẩy các phép biến đổi vào cơ sở dữ liệu theo cách thủ công.
-
Quản lý dữ liệu SAS –
Quản lý dữ liệu SAS cho phép người dùng doanh nghiệp của bạn cập nhật dữ liệu, điều chỉnh quy trình và tự phân tích kết quả, giải phóng thời gian cho các dự án khác. Ngoài ra, bảng thuật ngữ kinh doanh được tích hợp sẵn cũng như khả năng trực quan hóa dòng và quản lý siêu dữ liệu của SAS và bên thứ ba giúp mọi người nắm được thông tin chung.
-
Dịch vụ dữ liệu SAP –
Nó giúp tích hợp, chuyển đổi và cải thiện dữ liệu ở cấp độ dự án hoặc doanh nghiệp. Nó cung cấp một giải pháp cấp doanh nghiệp duy nhất để tích hợp dữ liệu, chất lượng dữ liệu, lập cấu hình dữ liệu và xử lý dữ liệu văn bản cho phép người dùng tích hợp, chuyển đổi, cải thiện và phân phối dữ liệu.
-
ẤN BẢN DOANH NGHIỆP TÍCH HỢP DỮ LIỆU ORACLE –
Nó cung cấp công nghệ Tải và Chuyển đổi Trích xuất (E-LT) giúp cải thiện hiệu suất và giảm chi phí tích hợp dữ liệu – ngay cả trên các hệ thống không đồng nhất. Cung cấp hiệu suất cao và TCO thấp hơn, hỗ trợ nền tảng không đồng nhất cho các mô-đun tri thức và tích hợp dữ liệu doanh nghiệp để tối ưu hóa năng suất và khả năng mở rộng của nhà phát triển.
-
Bộ meta –
Meta Suite cung cấp cho bạn thời gian nhanh chóng tạo ra giá trị, khả năng mở rộng và sự lựa chọn phong phú về các loại cơ sở dữ liệu và tệp đích và nguồn được hỗ trợ. Ngoài hoạt động thông thường là trích xuất, tải và hợp nhất dữ liệu vận hành, nó cũng có thể được sử dụng để hợp nhất và hợp lý hóa dữ liệu cũng như cung cấp hỗ trợ như vậy cho Quản lý dữ liệu chủ.
-
CÔNG TY TÍCH HỢP DỮ LIỆU CỦA PERVASIVE –
Nó hiện là một phần của Actian. Nó thực hiện các hoạt động tích hợp phức tạp, mặc dù phần mềm này rất dễ sử dụng và không yêu cầu bộ kỹ năng chuyên biệt. Các tính năng phong phú của nó rất trực quan và có thể định cấu hình để thiết kế, triển khai và quản lý – mà không bị giật nhãn dán. Nó có cùng một giao diện người dùng web đầy đủ tính năng được sử dụng cho cả phiên bản tiền đề và phiên bản đám mây.
-
Luồng dữ liệu Sagent –
Đây là một công cụ tích hợp linh hoạt và mạnh mẽ giúp đối chiếu dữ liệu từ các nguồn khác nhau. Nó được thiết kế bởi Pitney Bowes Software và cung cấp một bộ công cụ chuyển đổi dữ liệu toàn diện để nâng cao giá trị kinh doanh của nó. Nó cho phép phân tích thông tin và tạo các báo cáo có ý nghĩa để giúp bạn hiểu rõ hơn về doanh nghiệp của mình
Cũng nên đọc: 15 Công cụ dữ liệu lớn hàng đầu năm 2017
Việc chọn bất kỳ phần mềm hoặc công cụ nào được quyết định tùy theo loại yêu cầu mà một công cụ có và yêu cầu khác nhau giữa các doanh nghiệp. Một doanh nghiệp viễn thông sẽ có dữ liệu lớn và phức tạp để xử lý so với cửa hàng bán lẻ quần áo. Vì vậy, doanh nghiệp viễn thông sẽ lựa chọn công cụ có tính năng vận hành trên dữ liệu phức tạp. Trong khi đó, cửa hàng bán lẻ sẽ sử dụng công cụ dễ sử dụng và ít phức tạp hơn vì cửa hàng đó không có kỹ năng lập trình và nền tảng kỹ thuật.
Trong blog tiếp theo, tôi sẽ liệt kê các công cụ cho lớp tiếp theo trong Kiến trúc tham chiếu.