Senior Data Engineer

VIETTEL Thái Bình

Địa điểm làm việc: Hà Nội

Hết hạn: 31/03/2024

Chi tiết công việc
Giới thiệu công ty

Vị trí công việc này hiện tại đã hết hạn nộp hồ sơ, bạn có thể tham khảo thêm một số công việc tương tự tại đây:

Việc làm Senior Data Engineer

Mô tả công việc

Thiết kế và quản lý luồng Dữ liệu (Data Pipeline)
- Thiết kế các luồng đồng bộ dữ liệu, làm sạch dữ liệu, chuẩn hóa dữ liệu đầu vào, luồng đánh giá chất lượng dữ liệu, tổng hợp dữ liệu báo cáo, xuất dữ liệu lớn theo tài liệu nghiệp vụ.
- Khảo sát hiện trạng hệ thống Big Data đang chạy.
- Thực hiện quản lý ETL metadata (từ điển dữ liệu, logic của các luồng ETL,...)
- Kiểm tra code và phê duyệt tích hợp mã nguồn (merge code).
- Kiểm tra và phê duyệt kịch bản upcode với các yêu cầu nâng cấp
Cài đặt, triển khai nền tảng dữ liệu
- Cài đặt và triển khai nền tảng dữ liệu lớn cho các dự án mới
- Viết tài liệu phục vụ chuyển giao hệ thống (Hướng dẫn cài đặt triển khai, Hướng dẫn vận hành, khai thác)
- Quản lý team dự án với quy mô vừa và nhỏ (team 2-5 người)""
Đào tạo chuyên môn
- Training kỹ năng và chuyên môn cho vị trí Associate.

Yêu cầu công việc

1. Trình độ: Tốt nghiệp ĐH chính quy loại khá trở lên chuyên ngành khoa học dữ liệu, khoa học máy tính,CNTT, toán học ứng dụng, điện tử viễn thông hoặc các chuyên ngành liên quan
2. Tiếng Anh: chứng chỉ TOEIC, TOEFL hoặc IELTS tương đương với TOEIC 650/990 trở lên
3. Kiến thức, kỹ năng
Thành thạo một trong các framework, thư viện lưu trữ, xử lý dữ liệu lớn (Hadoop, Spark, Kafka, Nifi)
Kiến thức về thiết kế, tổ chức luồng xử lý dữ liệu (batch processing, stream procesing, ...)
Kiển thức về các loại CSDL (RDBMS, Graph Databases, NoSQL Products, ...)
Có ít nhất 1 năm kinh nghiệm trong việc thiết kế và xây dựng các hệ thống dữ liệu lớn.
Có kinh nghiệm quản lý nhóm DE tối thiểu 3 năm
Kỹ năng quản lý dự án
Có kiến thức vững về cấu trúc dữ liệu và giải thuật: Hiểu biết chi tiết về các loại dữ liệu cơ bản ( Interger, Boolean...) và array; Hiểu rõ về mối liên hệ giữa cấu trúc dữ liệu và giải thuật; Hiểu biết , đánh giá độ phức tạp và cài đặt được các thuật toán, ví dụ các thuật toán sắp xếp : sắp xếp nổi bọt, sắp xếp lựa chọn.., các thuật toán tìm kiếm - Kiến thức về lập trình, cấu trúc dữ liệu & giải thuật
Kỹ năng sử dụng một loại ngôn ngữ lập trình (Java, Scala, ...),
Kỹ năng sử dụng SQL thành thạo
Kỹ năng sử dụng một trong các loại CSDL (Hive, Oracle, Neo4j, HBase, Cassandra, MongoDB, ..)
Có khả năng sử dụng các công cụ phân tích log để tìm ra nguyên nhân lỗi.