Data EngineerCÔNG TY CỔ PHẦN VÀNG BẠC ĐÁ QUÝ PHÚ NHUẬN
Nơi làm việc: Hồ Chí Minh
Ngành nghề: IT phần mềm, IT / Phần mềm / IOT / Điện tử viễn thông
Lương: Cạnh tranh
Hình thức: Toàn thời gian
Ngày đăng: 11/06/2024
Hạn nộp: 19/07/2024
Mô tả công việc
Mô tả Công việc
1. Xây dựng và vận hành kho dữ liệu:
- Làm việc với các team ERP, software, các đối tác và phòng ban chức năng để xác định luồng đi và ý nghĩa của dữ liệu.
- Thiết kế các phương án thu thập dữ liệu, các tiêu chuẩn thu thập, đảm bảo việc thu thập và ghi nhận dữ liệu đúng và phù hợp cho việc khai thác/ ứng dụng.
- Xây dựng, phát triển các nền tảng lưu trữ, xử lý, quản lý dữ liệu lớn (Big Data) trên hệ sinh thái Cloud Azure (MS Fabric) ,AWS,...
- Thiết kế, xây dựng, tối ưu hóa luồng dữ liệu, giải pháp ETL có khả năng mở rộng linh hoạt với độ tin cậy cao, phục vụ cho việc khai thác/ingest các loại dữ liệu vào Data lake, Data Warehouse.
- Làm việc với các team phân tích để thiết kế những bộ dữ liệu phù hợp cho hệ thống báo cáo/ dashboard.
- Cập nhật những thay đổi trong các bộ dữ liệu theo quá trình chuyển đổi của business và các nhu cầu khai thác.
- Xây dựng các tài liệu liên quan đến kiến trúc và định nghĩa dữ liệu.
2. Cải tiến, nâng cấphiệu suất của kho dữ liệu:
- Xây dựng những kiến trúc dữ liệu phù hợp với nhu cầu từ các đội phân tích, khoa học dữ liệu, học máy và người dùng.
- Làm việc với các team kỹ thuật công nghệ để tối ưu hóa chi phí hạ tầng, môi trường kho dữliệu, tư vấn và xây dựng những giải pháp để dữ liệu có thể được lưu trữ nhiều hơn, đa dạng hơn, truy vấn nhanh hơn với chi phí tối ưu nhất.
- Kiểm soát chi phí và khả năng đáp ứng của kho dữ liệu, liên tục theo dõi, cảnh báo và xử lí nhanh nhất có thể khi có sự cố phát sinh để đảm bảo hệ thống báo cáo và các sản phẩm dữ liệu khác hoạt động trơn tru hiệu quả.
3. Minh bạch và antoàn dữ liệu:
- Đảm bảo các kết nối được ổn định ,an toàn.
- Data được khai thác & sử dụng đúng đối tượng & phạm vi công việc.
- Theo dõi và cảnh báo nếu có bất kì vấn đề gì khiến dữ liệu có thể bị sai lệch, lấy cắp,dùng sai mục đích.
- Quy hoạch & xây dựng cơ chế an toàn dữ liệu của Data Warehouse
1. Xây dựng và vận hành kho dữ liệu:
- Làm việc với các team ERP, software, các đối tác và phòng ban chức năng để xác định luồng đi và ý nghĩa của dữ liệu.
- Thiết kế các phương án thu thập dữ liệu, các tiêu chuẩn thu thập, đảm bảo việc thu thập và ghi nhận dữ liệu đúng và phù hợp cho việc khai thác/ ứng dụng.
- Xây dựng, phát triển các nền tảng lưu trữ, xử lý, quản lý dữ liệu lớn (Big Data) trên hệ sinh thái Cloud Azure (MS Fabric) ,AWS,...
- Thiết kế, xây dựng, tối ưu hóa luồng dữ liệu, giải pháp ETL có khả năng mở rộng linh hoạt với độ tin cậy cao, phục vụ cho việc khai thác/ingest các loại dữ liệu vào Data lake, Data Warehouse.
- Làm việc với các team phân tích để thiết kế những bộ dữ liệu phù hợp cho hệ thống báo cáo/ dashboard.
- Cập nhật những thay đổi trong các bộ dữ liệu theo quá trình chuyển đổi của business và các nhu cầu khai thác.
- Xây dựng các tài liệu liên quan đến kiến trúc và định nghĩa dữ liệu.
2. Cải tiến, nâng cấphiệu suất của kho dữ liệu:
- Xây dựng những kiến trúc dữ liệu phù hợp với nhu cầu từ các đội phân tích, khoa học dữ liệu, học máy và người dùng.
- Làm việc với các team kỹ thuật công nghệ để tối ưu hóa chi phí hạ tầng, môi trường kho dữliệu, tư vấn và xây dựng những giải pháp để dữ liệu có thể được lưu trữ nhiều hơn, đa dạng hơn, truy vấn nhanh hơn với chi phí tối ưu nhất.
- Kiểm soát chi phí và khả năng đáp ứng của kho dữ liệu, liên tục theo dõi, cảnh báo và xử lí nhanh nhất có thể khi có sự cố phát sinh để đảm bảo hệ thống báo cáo và các sản phẩm dữ liệu khác hoạt động trơn tru hiệu quả.
3. Minh bạch và antoàn dữ liệu:
- Đảm bảo các kết nối được ổn định ,an toàn.
- Data được khai thác & sử dụng đúng đối tượng & phạm vi công việc.
- Theo dõi và cảnh báo nếu có bất kì vấn đề gì khiến dữ liệu có thể bị sai lệch, lấy cắp,dùng sai mục đích.
- Quy hoạch & xây dựng cơ chế an toàn dữ liệu của Data Warehouse
Yêu cầu công việc
Yêu Cầu Công Việc
• Tốt nghiệp Đại học trở lên chuyên ngành: Công nghệ thông tin hoặc ngành khác liên quan
• Các học vấn khác cần cho ngành nghề: Phân tích kĩ thuật, phân tích chiến lược kinh doanh, cơ sở dữ liệu, phân tích thống kê toán.
• Tối thiểu 3 năm kinh nghiệm làm việc trong lĩnh vực Data Engineer.
• Kỹ năng công việc:
- Sử dụng thành thạo các ngôn ngữ phân tích dữ liệu SQL, Python, NoSQL,...
- Sử dụng thành thạo các ETL Tools : Talend,Airflow, SSIS,Glue,...
- Có kinh nghiệm làm việc môi trường cloud: Azure Fabric, Azure Synapse, Azure Data Lake, Azure Data Factory, Databrick, AWS Redshift,...
- Có kinh nghiệm BI Tools (Power BI, SAP BI,...)
- Có kinh nghiệm làm việc với hệ thống ERP.
- Có kinh nghiệm làm việc với một trong các hệ sinh thái Hadoop, Spark, Airflow, Kafka,...
- Có kiến thức về Phân tích kĩ thuật, hạ tầng công nghệ thông tin, phần mềm ứng dụng, quản lý dự án
• Yêu cầu khác:
- Trung thực,ham học hỏi, chăm chỉ, không ngại khó, dám dấn thân, cầu tiến,..
- Tư duy logic;
- Khả năng phân tích;
- Khả năng giải quyết vấn đề;
- Kỹ năng mềm: Có kỹ năng giao tiếp tốt ,làm việc nhóm.
• Tốt nghiệp Đại học trở lên chuyên ngành: Công nghệ thông tin hoặc ngành khác liên quan
• Các học vấn khác cần cho ngành nghề: Phân tích kĩ thuật, phân tích chiến lược kinh doanh, cơ sở dữ liệu, phân tích thống kê toán.
• Tối thiểu 3 năm kinh nghiệm làm việc trong lĩnh vực Data Engineer.
• Kỹ năng công việc:
- Sử dụng thành thạo các ngôn ngữ phân tích dữ liệu SQL, Python, NoSQL,...
- Sử dụng thành thạo các ETL Tools : Talend,Airflow, SSIS,Glue,...
- Có kinh nghiệm làm việc môi trường cloud: Azure Fabric, Azure Synapse, Azure Data Lake, Azure Data Factory, Databrick, AWS Redshift,...
- Có kinh nghiệm BI Tools (Power BI, SAP BI,...)
- Có kinh nghiệm làm việc với hệ thống ERP.
- Có kinh nghiệm làm việc với một trong các hệ sinh thái Hadoop, Spark, Airflow, Kafka,...
- Có kiến thức về Phân tích kĩ thuật, hạ tầng công nghệ thông tin, phần mềm ứng dụng, quản lý dự án
• Yêu cầu khác:
- Trung thực,ham học hỏi, chăm chỉ, không ngại khó, dám dấn thân, cầu tiến,..
- Tư duy logic;
- Khả năng phân tích;
- Khả năng giải quyết vấn đề;
- Kỹ năng mềm: Có kỹ năng giao tiếp tốt ,làm việc nhóm.
Quyền lợi được hưởng
Chế độ bảo hiểm
Du Lịch
Phụ cấp
Chế độ thưởng
Đào tạo
Du Lịch
Phụ cấp
Chế độ thưởng
Đào tạo
Thông tin khác
Bằng cấp:
Đại học
Độ tuổi:
Không giới hạn tuổi
Lương:
Cạnh tranh
Đại học
Độ tuổi:
Không giới hạn tuổi
Lương:
Cạnh tranh
Nộp hồ sơ liên hệ
CÔNG TY CỔ PHẦN VÀNG BẠC ĐÁ QUÝ PHÚ NHUẬN
Giới thiệu công ty
CÔNG TY CỔ PHẦN VÀNG BẠC ĐÁ QUÝ PHÚ NHUẬN
170E Phan Đăng Lưu - Phường 3 - Quận Phú Nhuận - TP. Hồ Chí Minh
https://www.pnj.com.vn/
Việc làm tương tự
Machine Learning Engineer Python, C#, C++, Linux
Greystones Data System VN
Thỏa thuận
Hồ Chí Minh
24/08/2024
Senior AI Engineer
Công Ty Cổ Phần Thời Trang Yody - Chi Nhánh Hải Dương
Thương lượng
Hà Nội, Hồ Chí Minh, Hải Dương
05/08/2024
Data Scientist
Công Ty Cổ Phần Thời Trang Yody - Chi Nhánh Hải Dương
Thương lượng
Hà Nội, Hồ Chí Minh
20/08/2024
Chuyên Viên Cao Cấp - Quản trị cơ sở dữ liệu phân tích
CÔNG TY CỔ PHẦN VÀNG BẠC ĐÁ QUÝ PHÚ NHUẬN
thỏa thuận
Hồ Chí Minh
19/07/2024
Quản Trị Dự Án (PM) Phần Mềm
Công ty CP tư vấn quản trị doanh nghiệp Tinh Vân
18 - 26 triệu VNĐ
Hồ Chí Minh
22/07/2024
Scrum Master - Hà Nội - Around 30M
Công ty Cổ phần Công nghệ KiotViet
15 - 30 triệu
Hồ Chí Minh
30/06/2024
Vị trí Data Engineer do công ty CÔNG TY CỔ PHẦN VÀNG BẠC ĐÁ QUÝ PHÚ NHUẬN tuyển dụng tại Hồ Chí Minh, Joboko tự động tổng hợp mức lương Cạnh tranh, tìm thêm việc làm về Data Engineer hoặc công ty CÔNG TY CỔ PHẦN VÀNG BẠC ĐÁ QUÝ PHÚ NHUẬN ở các link phía trên
Giới thiệu công ty
CÔNG TY CỔ PHẦN VÀNG BẠC ĐÁ QUÝ PHÚ NHUẬN
170E Phan Đăng Lưu - Phường 3 - Quận Phú Nhuận - TP. Hồ Chí Minh
https://www.pnj.com.vn/