Việc làm Wacontre

Cập nhật 23/11/2024 13:52
Tìm thấy 103 việc làm đang tuyển dụng
Công Ty TNHH Một Thành Viên Wacontre
Data Streaming Specialist (AWS MSK/Kafka)
Wacontre
2.3k việc làm 5 lượt xem
Thông tin cơ bản
Mức lương: Thỏa thuận
Chức vụ: Nhân viên
Ngày đăng tuyển: 20/08/2024
Hạn nộp hồ sơ: 16/02/2025
Hình thức: FULL_TIME
Kinh nghiệm: 5 - 6 năm
Số lượng: 1
Giới tính: Không yêu cầu
Nghề nghiệp
Ngành
We are seeking a highly skilled and experienced Event/Streaming Specialist with expertise in AWS Managed Streaming for Apache Kafka (MSK) to join our engineering team. In this role, you will be responsible for designing, implementing, and managing our event-driven architectures and real-time streaming solutions using AWS MSK. Your work will be pivotal in enabling our systems to process large-scale data streams efficiently, ensuring high availability, scalability, and reliability.

Requirements

Responsibilities:

AWS MSK Management:

  • Design, implement, and maintain streaming solutions using AWS Managed Streaming for Apache Kafka (MSK)
  • Monitor and manage Kafka clusters to ensure optimal performance, scalability, and uptime
  • Configure and fine-tune MSK clusters, including partitioning strategies, replication, and retention policies


Event-Driven Architecture:

  • Collaborate with our engineering teams to design and implement event-driven systems and microservices architectures

Develop and maintain robust data pipelines to process and stream data in real-time using Kafka.

  • Ensure seamless integration between MSK/SQS/SNS and other AWS services such as Lambda, EventBridge Pipes, S3


Performance Optimization:

  • Analyze and optimize the performance of Kafka clusters and streaming pipelines to meet high-throughput and low-latency requirements
  • Implement best practices for Kafka topic design, consumer group management, and message serialization (e.g., Avro)


Security and Compliance:

  • Implement security best practices for MSK, including encryption, authentication, and access controls
  • Ensure compliance with industry standards and regulations related to data streaming and event processing


Monitoring and Troubleshooting:

  • Set up comprehensive monitoring and alerting for Kafka clusters and streaming applications using AWS CloudWatch and Datadog
  • Troubleshoot and resolve issues related to data loss, message lag, and streaming failures


Data Integration and ETL:

  • Design and implement data integration solutions to stream data between various sources and targets using MSK
  • Lead data transformation and enrichment processes to ensure data quality and consistency in streaming applications


Benefits

Must have skills:

  • Bachelor's or Master's degree in Computer Science, Information Technology, or a related field
  • Minimum of 5 years of experience in event-driven architectures and streaming solutions
  • Proven experience with Apache Kafka, with at least 2 years specifically in AWS MSK
  • Experience in designing and implementing high-throughput, low-latency streaming applications in AWS environments
  • Strong understanding of Kafka internals, including partitions, brokers, consumer groups, and message serialization formats
  • Proficiency in programming languages such as Java, Python, or Scala for building streaming applications
  • Experience with AWS services like Lambda, Kinesis, S3, and IAM in conjunction with MSK
  • Familiarity with CI/CD tools and practices, as well as IaC tools like CloudFormation, Terraform, or CDK
  • Strong analytical and problem-solving skills, with a proactive approach to identifying and resolving issues
  • Excellent communication and collaboration skills, with the ability to work effectively across teams

Nice to have skills

  • AWS Certified Solutions Architect, AWS Certified Developer, or similar AWS certificatrion
  • Strong analytical and problem-solving skills, with a proactive approach to identifying and resolving issues
  • Excellent communication and collaboration skills, with the ability to work effectively across teams
  • Ability to manage multiple priorities and projects in a fast-paced environment
Khu vực
Báo cáo

Quy mô:
500 - 1.000 nhân viên
Địa điểm:
155a Nam Kì Khởi Nghĩa P6 Quận 3

Công ty WACONTRE là công ty IT Nhật Bản thành lập vào năm 2010 tại Việt Nam. Hiện nay, WACONTRE chủ yếu thực hiện các nghiệp vụ như hỗ trợ dịch vụ phát triển Offshore, Co-Labo với các công ty Nhật Bản, phương tiện truyền thông ở Việt Nam, chuyên tư vấn thành lập công ty ở Việt Nam.

Chính sách bảo hiểm

  • Được hưởng các chế độ bảo hiểm : BHYT, BHXH, BHTN
  • Hưởng quyền lợi bảo hiểm 24/7

Các hoạt động ngoại khóa

  • Du lịch hàng năm 
  • Team building theo quý 
  • Các hoạt động vui chơi, giải trí, ca hát thường xuyên
  • Thể thao: Đá bóng, bóng chuyền,..

Lịch sử thành lập

  •  Công ty được thành lập năm 2010

Mission

  • Chúng tôi mong muốn trở thành một nền tảng phát huy tối đa tiềm năng của tất cả mọi người tham gia vào công ty và dịch vụ của chúng tôi thông qua phát triển nguồn nhân lực, đồng thời nâng cao kiến ​​thức chuyên môn của chúng tôi trong lĩnh vực CNTT x Nhân sự.
  • Là một công ty Nhật Bản được thành lập tại Việt Nam, chúng tôi mong muốn phát triển như một tổ chức và đóng góp cho xã hội bằng cách tận hưởng sự đa dạng và tích hợp thành công sự đa dạng đó để tiếp tục tạo ra nguồn nhân lực và dịch vụ độc đáo.
 

Những nghề phổ biến tại Wacontre

Bạn làm việc tại Wacontre? Chia sẻ kinh nghiệm của bạn

Logo Wacontre

Wacontre

Click để đánh giá