CStory

  • 홈
  • 태그
  • 방명록

FairCallQueue 1

Hadoop의 Fair Call Queue

Fair Call Queue Client의 요청을 담아놓는 Queue이다. heavy한 클라이언트로 인해 전체 요청의 처리가 늦어지지 않도록 하기 위해 만들어졌다. 이전 방식 FIFO Queue Fair call queue가 도입되기 전에는 FIFO방식의 큐를 사용하였다. 하지만 이러한 방식은 heavy user로 인해 전체 응답 속도를 느리게 만들었다. 그리고 high load를 발생시키면 전체 시스템에 과부하가 걸려 분산 서비스에 대한 공격이 가능하기에 DDoS방식으로 공격이 가능하다. Fair Call Queue 구성 multi-level queue가 multiplxer와 scheduler로 연결되어있다. RPC Scheduler Listen queue에 RPC요청이 도착하면 reader threa..

Data Engineering/Hadoop 2024.01.09
이전
1
다음
더보기
프로필사진

CStory

  • Menu (102)
    • Cloud (15)
      • OS (1)
      • AWS (2)
      • DataBase (1)
      • Network (5)
      • Docker (2)
      • Kubernetes (4)
    • Data Engineering (42)
      • Distributed System (14)
      • Observability (8)
      • Server (5)
      • JAVA (1)
      • Hadoop (9)
      • Kafka (3)
    • MLOps (3)
    • AI (36)
      • CV (5)
      • NLP (9)
      • ML (13)
      • MultiModal (1)
    • Web (0)
    • TroubleShooting (5)

Tag

OpenSearch, grafana, fluentd, AWS, observability, NLP, Kibana, 도커, efk, 분산시스템, k8s, Elasticsearch, Hadoop, dns, kubernetes, 하둡, LOG, HDFS, docker, Prometheus,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

공지사항

페이스북 트위터 플러그인

  • Facebook
  • Twitter

Archives

Copyright © Kakao Corp. All rights reserved.

티스토리툴바