Tìm thấy 0 việc làm đang tuyển dụng
Cloud Data Engineer (AWS & Kafka)
IIJ
39 việc làm
8 lượt xem
Thông tin cơ bản
Mức lương:
Thỏa thuận
Chức vụ:
Nhân viên
Ngày đăng tuyển:
20/08/2024
Hạn nộp hồ sơ:
22/02/2025
Hình thức:
FULL_TIME
Kinh nghiệm:
5 - 6 năm
Số lượng:
1
Giới tính:
Không yêu cầu
Nghề nghiệp
Ngành
We are seeking a highly skilled and experienced Cloud Engineer with expertise in AWS Managed Streaming for Apache Kafka (MSK) to join our engineering team. In this role, you will be responsible for designing, implementing, and managing our event-driven architectures and real-time streaming solutions using AWS MSK. Your work will be pivotal in enabling our systems to process large-scale data streams efficiently, ensuring high availability, scalability, and reliability.
Responsibilities:
AWS MSK Management:
Must have skills:
At TYME, opportunities are here for the taking. If you want to be part of our purpose and live and lead through our values, we can offer exciting development opportunities through expanded lateral roles, stretch assignments, or people leadership.
Some of our benefits:
Responsibilities:
AWS MSK Management:
- Design, implement, and maintain streaming solutions using AWS Managed Streaming for Apache Kafka (MSK)
- Monitor and manage Kafka clusters to ensure optimal performance, scalability, and uptime
- Configure and fine-tune MSK clusters, including partitioning strategies, replication, and retention policies
- Collaborate with our engineering teams to design and implement event-driven systems and microservices architectures
- Ensure seamless integration between MSK/SQS/SNS and other AWS services such as Lambda, EventBridge Pipes, S3
- Analyze and optimize the performance of Kafka clusters and streaming pipelines to meet high-throughput and low-latency requirements
- Implement best practices for Kafka topic design, consumer group management, and message serialization (e.g., Avro)
- Implement security best practices for MSK, including encryption, authentication, and access controls
- Ensure compliance with industry standards and regulations related to data streaming and event processing
- Set up comprehensive monitoring and alerting for Kafka clusters and streaming applications using AWS CloudWatch and Datadog
- Troubleshoot and resolve issues related to data loss, message lag, and streaming failures
- Design and implement data integration solutions to stream data between various sources and targets using MSK
- Lead data transformation and enrichment processes to ensure data quality and consistency in streaming applications
Must have skills:
- Bachelor's or Master's degree in Computer Science, Information Technology, or a related field
- Minimum of 5 years of experience in event-driven architectures and streaming solutions
- Proven experience with Apache Kafka, with at least 2 years specifically in AWS MSK
- Experience in designing and implementing high-throughput, low-latency streaming applications in AWS environments
- Strong understanding of Kafka internals, including partitions, brokers, consumer groups, and message serialization formats
- Proficiency in programming languages such as Java, Python, or Scala for building streaming applications
- Experience with AWS services like Lambda, Kinesis, S3, and IAM in conjunction with MSK
- Familiarity with CI/CD tools and practices, as well as IaC tools like CloudFormation, Terraform, or CDK
- Strong analytical and problem-solving skills, with a proactive approach to identifying and resolving issues
- Excellent communication and collaboration skills, with the ability to work effectively across teams
- AWS Certified Solutions Architect, AWS Certified Developer, or similar AWS certificatrion
- Strong analytical and problem-solving skills, with a proactive approach to identifying and resolving issues
- Excellent communication and collaboration skills, with the ability to work effectively across teams
- Ability to manage multiple priorities and projects in a fast-paced environment
At TYME, opportunities are here for the taking. If you want to be part of our purpose and live and lead through our values, we can offer exciting development opportunities through expanded lateral roles, stretch assignments, or people leadership.
Some of our benefits:
- Meal and parking allowances are covered by the company
- Full benefits and salary rank during probation
- Insurances such as Vietnamese labor law and premium health care for you and your family
- SMART goals and clear career opportunities (technical seminar, conference, and career talk) - we focus on your development
- Values-driven, international working environment, and agile culture
- Overseas travel opportunities for training and work-related
- Internal Hackathons and company events (team building, coffee run, etc.)
- Pro-Rate and performance bonus
- 15-day annual + 3-day sick leave per year from the company
- Work-life balance 40-hr per week from Mon to Fri
Khu vực
Quy mô:
200 - 500 nhân viên
Địa điểm:
Công ty TNHH IIJ Global Solutions Việt Nam là công ty con chung của IIJ và IIJ Global Solutions Japan. Tại tập đoàn IIJ, chúng tôi nỗ lực cung cấp cho các công ty Nhật Bản đang mở rộng hoạt động kinh doanh sang thị trường Việt Nam những dịch vụ có chất lượng cao như họ đã quen thuộc ở Nhật Bản. Bằng cách cộng tác với ISP địa phương, chúng tôi có thể cung cấp các dịch vụ như dịch vụ đám mây, với nhiều giá trị gia tăng hơn nữa
Chính sách bảo hiểm
- Tập đoàn tham gia bảo hiểm sức khỏe nâng cao cho các nhân viên với hạn mức lên tới 500 triệu đồng/ năm, không những tham gia cho bản thân nhân viên mà còn tham gia cả cho người thân
Các hoạt động ngoại khóa
- Teambuilding hàng năm
- CLB yoga, bóng đá
- Talkshow phát triển bản thân
Lịch sử thành lập
-
Được thành lập vào năm 2016
Mission
- Với sứ mệnh được tuyên ngôn là “Hướng tới con người và vì con người”, IIJ luôn chú trọng phát triển nguồn nhân lực thông qua việc bồi dưỡng, đào tạo; trao quyền; tạo cơ hội thăng tiến và thể hiện bản thân cho mỗi nhân viên để họ có thể phát huy năng lực và phát triển toàn diện về mọi mặt. Nhiều chương trình đào tạo kỹ năng nghiệp vụ và phát triển bản thân được doanh nghiệp tổ chức. Các nhân viên mới sẽ được đào tạo về kiến thức chuyên môn từ những giảng viên nội bộ có nhiều năm kinh nghiệm trong nghề.
Những nghề phổ biến tại IIJ
Bạn làm việc tại IIJ? Chia sẻ kinh nghiệm của bạn
IIJ
Click để đánh giá