Tìm thấy 0 việc làm đang tuyển dụng
Data Streaming Specialist (AWS MSK/Kafka)
CÔNG TY TNHH SẢN XUẤT VÀ THƯƠNG MẠI CMC
317 việc làm
8 lượt xem
Thông tin cơ bản
Mức lương:
Thỏa thuận
Chức vụ:
Nhân viên
Ngày đăng tuyển:
20/08/2024
Hạn nộp hồ sơ:
16/02/2025
Hình thức:
FULL_TIME
Kinh nghiệm:
5 - 6 năm
Số lượng:
1
Giới tính:
Không yêu cầu
Nghề nghiệp
Ngành
We are seeking a highly skilled and experienced Event/Streaming Specialist with expertise in AWS Managed Streaming for Apache Kafka (MSK) to join our engineering team. In this role, you will be responsible for designing, implementing, and managing our event-driven architectures and real-time streaming solutions using AWS MSK. Your work will be pivotal in enabling our systems to process large-scale data streams efficiently, ensuring high availability, scalability, and reliability.
Requirements
Responsibilities:
AWS MSK Management:
Must have skills:
Requirements
Responsibilities:
AWS MSK Management:
- Design, implement, and maintain streaming solutions using AWS Managed Streaming for Apache Kafka (MSK)
- Monitor and manage Kafka clusters to ensure optimal performance, scalability, and uptime
- Configure and fine-tune MSK clusters, including partitioning strategies, replication, and retention policies
- Collaborate with our engineering teams to design and implement event-driven systems and microservices architectures
- Ensure seamless integration between MSK/SQS/SNS and other AWS services such as Lambda, EventBridge Pipes, S3
- Analyze and optimize the performance of Kafka clusters and streaming pipelines to meet high-throughput and low-latency requirements
- Implement best practices for Kafka topic design, consumer group management, and message serialization (e.g., Avro)
- Implement security best practices for MSK, including encryption, authentication, and access controls
- Ensure compliance with industry standards and regulations related to data streaming and event processing
- Set up comprehensive monitoring and alerting for Kafka clusters and streaming applications using AWS CloudWatch and Datadog
- Troubleshoot and resolve issues related to data loss, message lag, and streaming failures
- Design and implement data integration solutions to stream data between various sources and targets using MSK
- Lead data transformation and enrichment processes to ensure data quality and consistency in streaming applications
Must have skills:
- Bachelor's or Master's degree in Computer Science, Information Technology, or a related field
- Minimum of 5 years of experience in event-driven architectures and streaming solutions
- Proven experience with Apache Kafka, with at least 2 years specifically in AWS MSK
- Experience in designing and implementing high-throughput, low-latency streaming applications in AWS environments
- Strong understanding of Kafka internals, including partitions, brokers, consumer groups, and message serialization formats
- Proficiency in programming languages such as Java, Python, or Scala for building streaming applications
- Experience with AWS services like Lambda, Kinesis, S3, and IAM in conjunction with MSK
- Familiarity with CI/CD tools and practices, as well as IaC tools like CloudFormation, Terraform, or CDK
- Strong analytical and problem-solving skills, with a proactive approach to identifying and resolving issues
- Excellent communication and collaboration skills, with the ability to work effectively across teams
- AWS Certified Solutions Architect, AWS Certified Developer, or similar AWS certificatrion
- Strong analytical and problem-solving skills, with a proactive approach to identifying and resolving issues
- Excellent communication and collaboration skills, with the ability to work effectively across teams
- Ability to manage multiple priorities and projects in a fast-paced environment
Khu vực
CÔNG TY TNHH SẢN XUẤT VÀ THƯƠNG MẠI CMC
Xem trang công ty
Quy mô:
200 - 500 nhân viên
Địa điểm:
Tầng 12 tòa nhà CMC, phố Duy Tân, Phường Dịch Vọng Hậu, Quận Cầu Giấy, Thành phố Hà Nội, Việt Nam.
CMC P&T là đơn vị thành viên của Tập đoàn Công nghệ CMC, được thành lập vào tháng 10 năm 2007. CMC P&T có 10 năm kinh nghiệm trong lĩnh vực cung cấp các sản phẩm và dịch vụ CNTT, mang lại những giá trị thiết thực cho khách hàng. Tầm nhìn hướng đến 2020, CMC P&T phấn đấu trở thành nhà cung cấp dịch vụ IT uy tín, chuyên nghiệp hàng đầu tại Việt Nam. CMC P&T sở hữu đội ngũ kỹ thuật viên là những kỹ sư CNTT chuyên ngành, dày dạn kinh nghiệm, có trình độ kỹ thuật cao, thường xuyên được đào tạo về chuyên môn và kỹ năng chăm sóc khách hàng, tác phong cung cấp dịch vụ chuyên nghiệp, luôn tận tâm, sáng tạo, nỗ lực hết mình vì khách hàng.
Những nghề phổ biến tại CÔNG TY TNHH SẢN XUẤT VÀ THƯƠNG MẠI CMC
Bạn làm việc tại CÔNG TY TNHH SẢN XUẤT VÀ THƯƠNG MẠI CMC? Chia sẻ kinh nghiệm của bạn
CÔNG TY TNHH SẢN XUẤT VÀ THƯƠNG MẠI CMC
Click để đánh giá