1500 400
26187 1

Data Engineering Specialist (AIA)

Địa điểm: HCMC | Hạn nộp: 21/05/2025 | Mức lương: Thỏa thuận | Giờ làm việc: Giờ hành chính | Số lượng cần tuyển: 2

Nộp hồ sơ ứng tuyển

Data Engineering Specialist (AIA)

Nộp hồ sơ ứng tuyển

Thông tin cơ bản

Hạn nộp
21/05/2025

Mức lương
Thỏa thuận

Số lượng
2

Giờ làm việc
Giờ hành chính

Địa điểm
HCMC

Ngành nghề
Công nhân/ LĐPT

Vị trí
Nhân viên

Mã QR giới thiệu

Mô tả công việc

Built and managed the company's data lake and common data platform (CDP).

Ingested data into the data lake via batch files, collecting data from various on-premise data sources.

Used IBM DataStage to create jobs for extracting data, ensuring that PII information is masked and non-consent customer lists are removed before exporting to ADF self-hosted integration runtime.

Utilized Azure Data Factory to verify data and copy data into the raw landing zone.

Performed data transformation and merged files using Azure Databricks according to business logic, storing transformed data in the ADLS transformation folder (transformation zone).

Loaded clean files into the curated zone as per subject area and loaded the data into the database.

Ingested real-time data via Confluent Cloud (Kafka), collecting data from various on-premise data sources and centralizing it into a staging data lake database.

Enabled CDC on the staging database, using Confluent Cloud to connect and ingest data into the bronze layer, transforming data in the silver layer, and publishing data in the gold layer through APIs.

Managed the bronze, silver, and gold layers in delta tables on Databricks.

Set up CI/CD pipelines using Azure DevOps and deployed new data sources as needed.

Monitored various ETL jobs, including ADF Jobs, Databricks Jobs, Kafka topics, Power Automate jobs, Power BI jobs, IBM DataStage jobs, CDC jobs, and workspaces.

Built an automatic internal data sharing method, ensuring a stable, fast, and accurate data stream using SharePoint & Databricks Unity Catalog as the platform to share data.

Kept an eye on storage size to ensure it aligns with the cost budget.

Provided and analyzed data for various company projects to ensure the best possible outcomes, such as fraud analysis, audit, sales behavior, abnormal claims, and more.

Built Power BI dashboards to illustrate unusual sales behavior of agents based on sales data, persistency of channel & company, K2 report, voice recording reports,…

Working with the Data Science Team to Build AI Models:

Built AI models for detecting customer lapse (high, medium, low) for the purpose of saving premiums. These models provide early warnings for abnormal sales behavior and fraudulent claims. These were written using PySpark on Databricks.

Prepared data for the data science team for other campaigns such as Upsell/Cross-sell/Winback/People Like You for incremental premium.

Ensure the data is always stable and accurate for the DS team to use with confidence.

Furthermore, I support my team members in showcasing their abilities to the fullest extent.

 

Quyền lợi được hưởng

Lương tháng 13.

BHXH theo quy định luật BHXH

Phép năm, thưởng Lễ Tết, quà sinh nhật, quà tết.

Bảo hiểm sức khỏe, tai nạn 24/7

Làm việc môi trường công nghệ lớn, có nhiều cơ hội tiếp xúc khách hàng lớn.

Nhập thông tin vào đây để công ty liên hệ lại bạn

Yêu cầu công việc

Tốt nghiệp Đại học chuyên ngành Hệ thống thông tin, Khoa học máy tính, Công nghệ thông tin.

Có trên 3 năm kinh nghiệm trong việc thiết lập nhập dữ liệu theo thời gian thực, xây dựng bảng điều khiển Power BI chuyên sâu và tiến hành phân tích dữ liệu chuyên sâu để hỗ trợ các nhu cầu kinh doanh khác nhau.

Thành thạo và có kinh nghiệm làm việc với hệ quản trị cơ sở dữ liệu IBM DataStage

Hiểu biết và có kinh nghiệm Technology: IBM datastage, PySpark, Scalar, Spark SQL, T-SQL, Azure data factory, Azure databricks, Confluent cloud, Azure pipelines, Kubernetes, Flink, Power Bi, Power Automate, Powershell.

Trung thực, cẩn thận, cầu tiến. Yêu thích công việc Kỹ sư Dữ liệu.

Khả năng đọc hiểu tài liệu tiếng anh tốt, giao tiếp cơ bản.

Kỹ năng thuyết trình tốt, tự tin, làm việc nhóm, năng động, dám vượt trội, tuân thủ kỷ luật, trách nhiệm.

Khả năng nghiên cứu, làm việc độc lập, dưới áp lực lớn.

Yêu cầu hồ sơ

01 bộ hồ sơ đầy đủ theo quy định

Thông tin thêm

Công ty Cổ phần Mắt Bão BPO
Người liên hệ: Nhân sự
Điện thoại: 0966980862
Xin lưu ý: Ghi rõ "Biết đến tin tuyển dụng tại Vieclamnhamay.vn" khi nộp hồ sơ cho chúng tôi. Xin cảm ơn!

GIỚI THIỆU NHÀ TUYỂN DỤNG

Ngày tạo gian: 04-03-2020

Quy mô:

Lĩnh vực hoạt động: Mắt Bão được trong và ngoài nước biết đến như một công ty hoạt động trong nhiều lĩnh vực CNTT: trung tâm dữ liệu, nhà đăng ký tên miền Quốc tế và Việt Nam, cung cấp dịch vụ cho thuê máy chủ, đặt website, phát triển ứng dụng quản lý, cung cấp hạ tầng web, các giải pháp về phát triển website và ứng dụng trên nền web…. Bên cạnh đó, Mắt Bão còn tham gia vào thị trường cung cấp dịch vụ thuê ngoài quy trình kinh doanh (BPO) - lĩnh vực nhân sự và chăm sóc khách hàng.

THÔNG TIN LIÊN HỆ

Công ty Cổ phần Mắt Bão BPO

Địa chỉ: M1-05 Chung cư Carillon - 171A Hoàng Hoa Thám - P.13 - Q. Tân Bình - TP HCM

Điện thoại: 0966980862

Website: https://matbao.com/

Lượt xem: 5943

BÌNH LUẬN - PHẢN HỒI

Nội dung nhập vào không được vượt quá 5000 kí tự.

NỘI DUNG
ĐÁNH GIÁ

VIỆC LÀM LIÊN QUAN

TỪ KHÓA LIÊN QUAN

Hàng ngàn công việc đang chờ bạn

TƯ VẤN VÀ HỖ TRỢ ỨNG VIÊN

Fanpage | 091 668 0330 VIỆC LÀM NHÀ MÁY, KHU CÔNG NGHIỆP

TƯ VẤN NHÀ TUYỂN DỤNG Mail: info@vieclamnhamay.vn

091 949 0330