Giới thiệu Airflow là một công cụ lập lịch và quản lý các Job hỗ trợ ngôn ngữ lập trình Python rất phổ biến. Nhưng ngoài ra, Airflow cũng có thể xử lý được một số tác vụ cần xử lý nhanh chóng với ...
Giới thiệu Ở bài viết trước (Slowly Change Dimension trong Data Warehouse - Phần 1/2) đã nói về các cách tổ chức SCD khác nhau. Trong thực tế sẽ có các trường hợp không sử dụng đơn lẻ từng loại mà...
Giới thiệu Giả sử ta có một Data Warehouse được thiết kế theo mô hình Star Schema, tức là lúc này tất cả dữ liệu chỉ nằm trong bảng Dimension hoặc Fact. Câu hỏi đặt ra là khi dữ liệu trong bảng D...
Giới thiệu Khi nhắc đến các ứng dụng message queue, nhiều người có thể nghĩ ngay tới RabbitMQ, Apache Kafka, Apache ActiveMQ,… là những công cụ được hỗ trợ rất mạnh mẽ. Nhưng giả sử số lượng messa...
Bài toán Trong cơ sở dữ liệu (CSDL), dữ liệu cá nhân nói chung và mật khẩu đăng nhập nói riêng là các dữ liệu cần đặc biệt quan tâm khi lưu trữ, xử lý. Bài toán đặt ra là nên thiết kế CSDL như thế...
Mở đầu Ở bài trước (Link) có giới thiệu cách để một database PostgreSQL có thể kết nối và lấy data của một database PostgreSQL khác. Trong bài này sẽ tiếp tục giới thiệu cách mà PostgreSQL kết nối...
Bài toán Việc gom dữ liệu từ các nguồn về thành một nguồn duy nhất là công việc thường gặp ở vị trí Data Engineer, Data Analyst, Data Scientist. Dữ liệu ở các cơ sở dữ liệu (CSDL) khác nhau sẽ có ...
Dẫn nhập Bài toán: Trong một hệ thống phân tán nhiều server, cần thiết kế một hệ thống nhằm khởi tạo ID hiệu quả Phân tích: hiện tại trong các cơ sở dữ liệu có hỗ trợ một số cách để sinh ra ID. C...