Mô tả công việc
We are seeking a
Senior Data Engineer
to play a pivotal role in building our data platform from the ground up. You will be responsible for designing, developing, and deploying a scalable, secure, and open- source based data platform on the
AWS cloud
. This is a unique opportunity to shape the future of our data infrastructure and empower data- driven decision making across the organization.
Develop and maintain data pipelines for efficient movement and processing of large datasets.
Automate data platform tasks and processes for improved efficiency and reliability.
Design and implement a robust data platform architecture on AWS, leveraging open- source technologies whenever possible.
Ensure data quality and consistency throughout the data lifecycle.
Collaborate with data scientists, analysts, and other stakeholders to understand data needs and translate them into technical requirements.
Monitor and troubleshoot data platform performance to identify and resolve issues proactively.
Evaluate and select appropriate open- source tools and services for data ingestion, transformation, storage, and analytics.
Implement data security best practices to protect sensitive information.
Stay up- to- date on the latest trends and technologies in the data engineering space.
Document data platform design, architecture, and processes for future reference.
Yêu cầu công việc
Experience with cloud platforms, preferably AWS.
Excellent written and verbal communication skills.
Proven experience 4+ years as a Senior Data Engineer or similar role.
Proficient in working with open- source data technologies (e.g., Apache Spark, Apache Airflow, Kafka, etc.).
Ability to work independently and as part of a cross- functional team.
Expertise in designing and building scalable data pipelines.
Solid knowledge of SQL and experience with relational databases.
Strong understanding of data engineering principles and best practices.
Bonus Points
Experience with DevOps principles and practices.
Experience building data platforms for similar industries.
Experience with data governance and data security frameworks.
Experience with machine learning and data science workflows.
Quyền lợi
Other rewards: 5- star, employee of the month (EOTM), employee of the year (EOTY), loyalty employee (3- year, 5- year, 8- year, etc.)
100% statutory insurance contribution as per the labor law.
Annual bonus: depending on business & individual performance.
Annual salary review.
Working time from Monday to Friday (09:00 am- 18:00 pm).
100% gross salary in probation.
12 Annual Leave (AL) per year + extra 1 AL per extra working year.
Good chance to study and develop career path stably with internal promotion and rotation.
Internal Activities: General Meeting, Company Trip, International Women&039;s Day, Vietnamese Women&039;s Day Mid- Autumn Festival, Family Day, Christmas, Year- end Party, etc.
Bao Viet Healthcare insurance.
Cập nhật gần nhất lúc: 2024-11-24 14:50:02
CÔNG TY TNHH DATATYK cung cấp các dịch vụ tư vấn và cố vấn cho phép khách hàng của chúng tôi đạt được các mục tiêu và mục đích phân tích hiện tại và tương lai. Bằng cách chuyển đổi dữ liệu thành thông tin chi tiết, giúp các công ty hiểu rõ hơn về tài sản thông tin của họ. Chúng tôi là Mạng lưới đối tác của Microsoft về Phân tích dữ liệu. Điều này có nghĩa là chúng tôi có những người có chứng chỉ đầy đủ, giàu kinh nghiệm, những người có thể tùy chỉnh, triển khai và hỗ trợ các sản phẩm và giải pháp Microsoft Business Intelligence. Chúng tôi giúp hỗ trợ hành trình của khách hàng tiến lên trên con đường thành công thông qua các chuyên gia kỹ thuật có năng lực, kiến thức sâu rộng về ngành, giao hàng nhanh chóng và hiệu suất được tối ưu hóa.