Kỹ sư DataOps (NSDLD/147329)
Chi tiết việc làm
Trách nhiệm
Tối ưu hiệu năng pipeline, đảm bảo độ trễ, throughput và tính nhất quán dữ liệu. Theo dõi, xử lý sự cố pipeline; đảm bảo SLA dữ liệu cho các bộ phận hạ nguồn.
Nhiệm vụ
Phân tích yêu cầu dữ liệu, thiết kế kiến trúc data lake / data warehouse phục vụ AI và phân tích. Phát triển pipeline ETL/ELT (batch và streaming) cho dữ liệu huấn luyện và inference của hệ thống AI. Quản trị chất lượng dữ liệu (Data Quality), data lineage, data catalog, data contract. Tích hợp dữ liệu từ nhiều nguồn: RDBMS, NoSQL, API, message broker (Kafka), file/object storage. Triển khai và vận hành nền tảng dữ liệu: Spark, Airflow, dbt, Trino/Presto trên môi trường on-prem/cloud. Tài liệu hoá quy trình dữ liệu, data dictionary, hướng dẫn sử dụng dataset cho team AI/Analytics. Nghiên cứu công nghệ mới, chuẩn hoá quy trình phát triển và CI/CD cho data pipeline.
Quyền hạn
được quản trị chất lượng dữ liệu
Yêu cầu học vấn
- Trình độ phổ thông cao nhất: Tốt nghiệp Trung học phổ thông
- Trình độ chuyên môn kỹ thuật: Đại học
Yêu cầu khả năng làm việc
Quyền lợi
- Hỗ trợ ăn (4 bữa).
Thông tin khác
Thời gian làm việc
- Yêu cầu về thời gian: Hành chính
Yêu cầu về kỹ năng và các mức độ ưu tiên ⌄
Việc làm tương tự
Kỹ sư cấp thoát nước
CÔNG TY TNHH TƯ VẤN KỸ THUẬT XÂY DỰNG VIỆT NAM
Hoạt động, dịch vụ khác
Engineering Manager
Công Ty Cổ Phần Công Nghệ Sapo
Hoạt động, dịch vụ khác
Network Engineer
CÔNG TY CP VIỄN THÔNG FPT ( FPT Telecom)
Hoạt động, dịch vụ khác
Data Engineer
CÔNG TY CP VIỄN THÔNG FPT ( FPT Telecom)
Hoạt động, dịch vụ khác
