- Chi tiết công việc
- Giới thiệu công ty
Thu nhập: Thỏa thuận
Loại hình: Toàn thời gian
Chức vụ: Nhân viên
Kinh nghiệm: 3 năm
Mô tả công việc
Xây dựng, triển khai và tối ưu hóa quy trình ETL sử dụng Airflow và Python.
Thiết kế và duy trì các pipeline dữ liệu phục vụ cho hệ thống Data Warehouse.
Quản lý dữ liệu, lưu trữ, và các cấu trúc dữ liệu lớn trên MinIO.
Phối hợp với đội ngũ ứng dụng và phân tích để đảm bảo tính nhất quán và hiệu quả trong xử lý dữ liệu.
Thiết kế và duy trì các pipeline dữ liệu phục vụ cho hệ thống Data Warehouse.
Quản lý dữ liệu, lưu trữ, và các cấu trúc dữ liệu lớn trên MinIO.
Phối hợp với đội ngũ ứng dụng và phân tích để đảm bảo tính nhất quán và hiệu quả trong xử lý dữ liệu.
Yêu cầu
Trên 3 năm kinh nghiệm trong lĩnh vực Data Engineering.
Kỹ năng mạnh về Python và ETL (sử dụng Airflow, Airbyte).
Hiểu biết về các hệ thống lưu trữ dữ liệu như MinIO hoặc các giải pháp tương tự.
Kinh nghiệm làm việc với Data Warehouse và các công cụ liên quan.
Khả năng làm việc nhóm và làm việc dưới áp lực cao, khả năng tự tìm hiểu và ứng dụng công nghệ mới.
Các kỹ năng khác:
Hệ thống Data Warehouse: Hiểu biết chuyên sâu về kiến trúc và quy trình ETL trong các hệ thống Data Warehouse. Kiến thức về cơ sở dữ liệu OLAP (Online Analytical Processing) và khả năng tối ưu hóa truy vấn dữ liệu lớn.
Big Data: Có kinh nghiệm làm việc với các hệ sinh thái dữ liệu lớn như Hadoop, Spark, hoặc các nền tảng lưu trữ phân tán.
SQL nâng cao: Kỹ năng SQL chuyên sâu để viết và tối ưu hóa truy vấn phức tạp. Khả năng tối ưu hóa hiệu năng truy vấn cho các tập dữ liệu lớn.
Data Lake: Kiến thức về các mô hình Data Lake và Data Lakehouse, cùng với kỹ năng sử dụng các công cụ như AWS S3, Google Cloud Storage, hoặc MinIO để quản lý dữ liệu lớn.
Python: Thành thạo Python cho xử lý dữ liệu và tự động hóa các pipeline dữ liệu. Kinh nghiệm trong việc tạo các script tự động hóa với thư viện Pandas, NumPy, hoặc các thư viện liên quan đến dữ liệu.
Quản lý workflow: Thành thạo công cụ Airflow cho việc quản lý và giám sát các luồng công việc ETL, cũng như khả năng xử lý lỗi và khắc phục sự cố khi luồng công việc bị gián đoạn.
Kỹ năng mạnh về Python và ETL (sử dụng Airflow, Airbyte).
Hiểu biết về các hệ thống lưu trữ dữ liệu như MinIO hoặc các giải pháp tương tự.
Kinh nghiệm làm việc với Data Warehouse và các công cụ liên quan.
Khả năng làm việc nhóm và làm việc dưới áp lực cao, khả năng tự tìm hiểu và ứng dụng công nghệ mới.
Các kỹ năng khác:
Hệ thống Data Warehouse: Hiểu biết chuyên sâu về kiến trúc và quy trình ETL trong các hệ thống Data Warehouse. Kiến thức về cơ sở dữ liệu OLAP (Online Analytical Processing) và khả năng tối ưu hóa truy vấn dữ liệu lớn.
Big Data: Có kinh nghiệm làm việc với các hệ sinh thái dữ liệu lớn như Hadoop, Spark, hoặc các nền tảng lưu trữ phân tán.
SQL nâng cao: Kỹ năng SQL chuyên sâu để viết và tối ưu hóa truy vấn phức tạp. Khả năng tối ưu hóa hiệu năng truy vấn cho các tập dữ liệu lớn.
Data Lake: Kiến thức về các mô hình Data Lake và Data Lakehouse, cùng với kỹ năng sử dụng các công cụ như AWS S3, Google Cloud Storage, hoặc MinIO để quản lý dữ liệu lớn.
Python: Thành thạo Python cho xử lý dữ liệu và tự động hóa các pipeline dữ liệu. Kinh nghiệm trong việc tạo các script tự động hóa với thư viện Pandas, NumPy, hoặc các thư viện liên quan đến dữ liệu.
Quản lý workflow: Thành thạo công cụ Airflow cho việc quản lý và giám sát các luồng công việc ETL, cũng như khả năng xử lý lỗi và khắc phục sự cố khi luồng công việc bị gián đoạn.
Quyền lợi
Lương: cạnh tranh
Thưởng dự án/thưởng kinh doanh: từ 1 - 5 tháng lương, trả cuối năm
Đánh giá nhân sự và điều chỉnh lương: định kỳ 1 năm 1 lần.
Thời gian làm việc: thứ 2 đến thứ 6, 08h30 đến 17h30.
Nghỉ phép: 12 ngày/năm
Nghỉ lễ, nghỉ thai sản, nghỉ ốm, nghỉ hiếu hỉ: theo quy định chung của luật Lao động.
BHXH, BHYT, BHTN cho 100% cán bộ sau thời gian thử việc.
Chính sách thu hút và đãi ngộ nhân tài.
Chính sách ưu đãi đối với nhân viên có thâm niên làm việc tại công ty.
Chế độ nghỉ mát, du xuân, liên hoan cuối năm cho nhân viên và gia đình.
Các hoạt động giao lưu bóng đá, golf, văn nghệ...
Đào tạo chuyên sâu theo yêu cầu công việc
Được tham gia các dự án lớn triển khai toàn quốc
Được tiếp cận các kỹ thuật, công nghệ hiện đại...
Thưởng dự án/thưởng kinh doanh: từ 1 - 5 tháng lương, trả cuối năm
Đánh giá nhân sự và điều chỉnh lương: định kỳ 1 năm 1 lần.
Thời gian làm việc: thứ 2 đến thứ 6, 08h30 đến 17h30.
Nghỉ phép: 12 ngày/năm
Nghỉ lễ, nghỉ thai sản, nghỉ ốm, nghỉ hiếu hỉ: theo quy định chung của luật Lao động.
BHXH, BHYT, BHTN cho 100% cán bộ sau thời gian thử việc.
Chính sách thu hút và đãi ngộ nhân tài.
Chính sách ưu đãi đối với nhân viên có thâm niên làm việc tại công ty.
Chế độ nghỉ mát, du xuân, liên hoan cuối năm cho nhân viên và gia đình.
Các hoạt động giao lưu bóng đá, golf, văn nghệ...
Đào tạo chuyên sâu theo yêu cầu công việc
Được tham gia các dự án lớn triển khai toàn quốc
Được tiếp cận các kỹ thuật, công nghệ hiện đại...
Thông tin khác
Địa điểm làm việc
- Viwaseen Tower Tố Hữu, Phố Tố Hữu, Trung Văn, Nam Từ Liêm, Hà Nội
Việc làm Hà Nội
Việc làm Quận Nam Từ Liêm
- Viwaseen Tower Tố Hữu, Phố Tố Hữu, Trung Văn, Nam Từ Liêm, Hà Nội
Việc làm Hà Nội
Việc làm Quận Nam Từ Liêm
Thông tin chung
- Thu nhập: Thỏa thuận
Cách thức ứng tuyển
Ứng viên nộp hồ sơ trực tuyến bằng cách bấm nút Ứng tuyển bên dưới:
Hạn nộp: 06/01/2025
Giới thiệu công ty
Xem trang công ty
Giới thiệu công ty
G-Connect có đội ngũ các gia hàng đầu trong lĩnh vực CNTT từ từ 5 đến 22 năm kinh nghiệm, đã từng tham gia các tập đoàn công nghệ lớn của nước ngoài như Harvey Nash, Pentalog, HP, Samsung..., kinh nghiệm trên 15 năm quản lý và triển khai các hệ thống lớn của châu Âu cũng như các ...
Quy mô công ty
Từ 26 - 100 nhân viên
Việc làm tương tự
CÔNG TY TNHH GIẢI PHÁP PHÂN TÍCH DỮ LIỆU INSIGHT DATA
35 - 50 triệu
28/01/2025
Hà Nội
CÔNG TY CỔ PHẦN GIẢI PHÁP THANH TOÁN VIỆT NAM (VNPAY)
Thỏa thuận
27/12/2024
Hà Nội
hỗ trợ doanh nghiệp
Giải thưởng
của chúng tôi
Top 3
Nền tảng số tiêu biểu của Bộ
TT&TT 2022.
Top 15
Startup Việt xuất sắc 2019 do VNExpress tổ chức.
Top 10
Doanh nghiệp khởi nghiệp sáng tạo Việt Nam - Hội đồng tư vấn kinh doanh ASEAN bình chọn.
Giải Đồng
Sản phẩm công nghệ số Make In Viet Nam 2023.