Senior Data Engineer

Địa điểm Quận Ba Đình
Ngành nghề Công nghệ thông tin và truyền thông (ICT)
Mã số 15424
Loại công việc Cố định
Lương 40.000.000-60.000.000
Email liên hệ quan.duong@manpower.com.vn
Ngày đăng Tháng một 17, 2024

Trách nhiệm công việc:

  • Thiết kế và quản lý luồng Dữ liệu (Data Pipeline). 

  • Thiết kế các luồng đồng bộ dữ liệu, làm sạch dữ liệu, chuẩn hóa dữ liệu đầu vào, luồng đánh giá chất lượng dữ liệu, tổng hợp dữ liệu báo cáo, xuất dữ liệu lớn theo tài liệu nghiệp vụ. 

  • Khảo sát hiện trạng hệ thống Big Data đang chạy. 

  • Thực hiện quản lý ETL metadata (từ điển dữ liệu, logic của các luồng ETL,...) 

  • Kiểm tra code và phê duyệt tích hợp mã nguồn (merge code). 

  • Kiểm tra và phê duyệt kịch bản upcode với các yêu cầu nâng cấp. 

  • Cài đặt, triển khai nền tảng dữ liệu. 

  • Cài đặt và triển khai nền tảng dữ liệu lớn cho các dự án mới. 

  • Viết tài liệu phục vụ chuyển giao hệ thống (Hướng dẫn cài đặt triển khai, Hướng dẫn vận hành, khai thác). 

  • Quản lý team dự án với quy mô vừa và nhỏ (team 2-5 người). 

  • Đào tạo chuyên môn. 

  • Training kỹ năng và chuyên môn cho vị trí Associate. 

 

Kỹ năng & Chuyên môn:

  • Bằng cấp: Đại học hoặc trên Đại học chuyên ngành CNTT/ĐTVT 

  • Tiếng Anh: Toeic tối thiểu 650 hoặc chứng chỉ tương đương. 

  • Tối thiểu 3 năm làm việc trong các dự án với vai trò Kỹ sư dữ liệu lớn hoặc tương đương. 

  • Có khả năng nghiên cứu, đánh giá, cập nhật và tiếp cận công nghệ mới, Nghiên cứu tài liệu, xây dựng bảng câu hỏi khảo sát. 

  • Thanh thạo quy trình sản xuất và công cụ quản lý sản xuất phần mềm 

  • Kiến thức về lập trình, cấu trúc dữ liệu & giải thuật 

  • Kiến thức về lập trình lưu trữ, xử lý dữ liệu phân tán, xử lý dữ liệu lớn (Hadoop, Spark, Elastic search, …) 

  • Kiến thức về xây dựng luồng xử lý dữ liệu (batch processing, stream processing…) 

  • Kiến thức về các loại CSDL (RDBMS, Graph Database, No SQL Product, …) 

  • Kiến thức về thiết kế, tổ chức DWH (snow schema, star schema,…) 

  • Kiến thức về thiết kế, tổ chức luồng xử lý dữ liệu (batch processing, stream processing,…) 

  • Kỹ năng sử dụng ngôn ngữ lập trình (Java, scala,..) SQL. 

  • Kỹ năng thành thạo một trong các framework, thư viện lưu trữ, xử lý dữ liệu lớn (hadoop, Spark, Kapka, Zookeper…) 

  • Kỹ năng sử dụng một trong các loại CSDL (Oracle, Neo4j, HBase, Cassandra, MongoDB,…) 

 

Phúc lợi dành cho bạn :

  • 15 ngày nghỉ phép nguyên lương cùng khoản chi phí hỗ trợ để bạn nghỉ dưỡng và tái tạo sức lao động 

  • Gói chăm sóc sức khỏe cao cấp và các hoạt động tập thể được thiết kế để đảm bảo sức khỏe thể chất và tinh thần cho bạn 

  • Cơ hội làm việc với nhiều chuyên gia, đối tác nước ngoài, tham gia các hội thảo khoa học quốc tế và trong nước 

  • Nguồn học miễn phí trên các nền tảng LinkedIn, Coursera, O'relly; hội thảo nội bộ và tài trợ chứng nhận 

  • Tận hưởng môi trường làm việc chuyên nghiệp, coi trọng năng lực cá nhân và cơ hội thăng tiến