CMCGlobal đang tìm kiếm
Data Platform Engineer (Middle/Senior)
tham gia xây dựng và vận hành nền tảng dữ liệu cho dự án global/ banking lớn.
## Trách nhiệm
Xây dựng pipeline batch/streaming bằng Python, PySpark và SQL.
Phát triển workflow xử lý dữ liệu trên Airflow và Spark.
Xây dựng data pipeline với dependency phức tạp
Xử lý sự cố, giám sát và tối ưu hiệu năng hệ thống.
Phối hợp triển khai giữa các môi trường Dev, UAT và Production.
## Yêu cầu
Từ 3 năm kinh nghiệm Data Engineering/Data Platform.
Thành thạo Python, SQL; có kinh nghiệm với Spark/PySpark và Airflow.
Hiểu ETL/ELT, data modeling và xử lý dữ liệu phân tán.
Có kinh nghiệm với Docker, Git và Linux.
Có khả năng troubleshooting hệ thống dữ liệu.
## Điểm cộng
Từng triển khai end-to-end data pipeline.
Có hiểu biết về CI/CD.
Có kinh nghiệm trên cả On-premises và Cloud.
Có kinh nghiệm trong lĩnh vực ngân hàng.
Từng tối ưu pipeline, Spark, Kafka, SQL hay tài nguyên hệ thống.
Có kinh nghiệm với Kubernetes, Kafka và Lakehouse.
Tech stack:
Python, SQL, PySpark, Spark, Airflow, Kafka, Kubernetes, Docker, Helm, MinIO, Delta Lake, Hive Metastore, Trino, Jenkins, Argo CD, Prometheus và Grafana.
Thông tin ứng tuyển:
Mail: [protected info]
Zalo: [protected info]
Thông tin chung