반응형
zookeeper(주키퍼)란?
분산 처리 시스템에서 일괄적으로 관리해주는 시스템

분산처리 환경에서는 기본적으로 서버가 몇대에서 수백대까지도 구축 가능 
- 이런 환경에서는 예상치 못하는 예외적인 부분이 많이 발생 (네트워크장애, 일부 서비스 기능 중지, 서비스 업그레이드 및 확장)

즉, 싱글 서버에서는 문제가 되지 않으나 멀티 서버 관리를 하면 문제가 될 수도 있는ㄷ 이러한 문제점들을 쉽게 해결해준다.

1)  네임서비스를 통한 부하분산
- 하나의 서버에만 서비스가 집중되지 않게 서비스를 알맞게 분산해 각각의 클라이언트들이 동시에 작업하게 해준다
- DNS 서버에 어느 서버로접속해야 하는지 물어보고 나서 직접 서버에 연결하는 방식

2) 데이터의 안정성 보장
- 하나의 서버에서 처리한 결과를 다른 서버들과 동기화하여 데이터의 안정성을 보장한다.

3) 장애상황 판단 및 복구
- 운영서버에 문제가 발생해서 서비스를 제공할 수 없을 경우, 다른 대기중인 서버를 운영 서버로 바꿔서 서비스가 중지없이 제공되게 한다.

4) 환경설정 관리
분산환경을 구성하는 서버의 환경설정을 따로 분산하지 않고 주키퍼 자체적으로 관리한다.

주키퍼는 다중의 서버 집합을 묶어서 관리해주는 시스템인데 그 중에서도 리더가 되는 서버 하나가 존재한다.
모든 서버의 중심이 되는 서버, 또한 하나의 서버에서 처리가 되어 데이터가 변경되면 모든 서버에 전달되어 동기화를 하게 된다.

분산 환경에서의 주키퍼 서버는 일반적으로 세대 이상을 사용하고 홀수로 구성한다. - 과반수룰을 적용하기 위해

SPOF(single Point Of Failure) 처리

액티브 서버 : 현재 서비스를 하고있는 서버

스탠바이 서버 : 장애 발생시 대처하기 위한 대기 서버

동작중이던 액티브 서버가 장애가 발생 할 경우 관리시스템이 판단하여 기존의 스탠바이 서버를 액티브 서버로 전환하여 서비스를 처리


주키퍼의 기본 구조와 상세 활용법에 대해서는 추후 업로드 하도록 하겠다.




출처: http://creatorw.tistory.com/entry/2-주키퍼zookeeper-기본-구조 []

출처: http://creatorw.tistory.com/entry/2-주키퍼zookeeper-기본-구조 []
출처 : http://exem-academy.com/?p=2927


반응형

'개발공부 > 개발TIP' 카테고리의 다른 글

htttps 호출시 SSL 무시하여 오류안나게 하는법  (0) 2019.01.03
tar 상대경로로 압축 및 절대경로로 압축된 tar 풀기  (0) 2018.09.05
String, Stringbuilder, StringBuffer 차이점  (0) 2018.08.13
Crontab - 배치  (0) 2018.07.02
Redis - 기본 개념  (1) 2018.06.08
반응형
 Cache 란 무엇인가부터 개념을 잡아야 한다.
-  Cache는 빠른 속도를 위해서 사용하게 된다.

 Cache를 사용하게 되면, 보통 Key-Value 타입을 사용하게 되면, 쿼리를 파싱하는 시간도 없어지고, 훨씬 접근 속도가 빠른 메모리에서 읽어오게 되기 때문에, 거기서 많은 속도 차이가 나게 됩니다. 다음은 DB 서버의 CPU 사용량입니다. Cache를 적용한 이후부터, 전체적으로 Wait I/O가 많이 떨어지는 것을 볼 수 있습니다.

Select와 Qcache_hits 는 거의 1/10 수준으로 줄어버립니다. DB서버로의 요청이 줄어버려서, 전체 서비스가 좀 더 큰 요청이 들어와도 버틸 수 있게 해줍니다.

캐싱(Caching)은 말 그대로 미리 읽어두었다가 요청이 올 경우 빠르게 응답하기 위한 목적으로 사용할 수 있다. 이 경우 전체 데이터가 필요없고 데이터 역시 계속 유지될 필요가 없기에 Redis처럼 적은 공간의 데이터베이스에 최적이다.

Redis - REmote DIctionary System
여러 솔루션 중 하나로 메모리를 사용하는 키, 밸류 형식의 데이터베이스

-  DB 종류에는 RDBMS, NOSQL, IN-memory  방식이 있다.

1)  RDB
- 관계형 데이터베이스, 둘의 관계를 나타내줄 수 있는 무엇인가가 필요한다.
- 추가적으로 RDB에서는 근본적으로 null값을 허용하지 않음
- 해당 데이터의 모델의 정의가 확실해야 한다.
- 트랜젝션이라고 하는 처리 단위를 중요시 여김.
-데이터의 모델이 확실하고 하나하나의 처리가 확실해야 한다

2) NOSQL
- 데이터를 막 저장을 하자 다만 데이터의 고유성을 알아야 하니 키값만 만들어 두자

3) IN-MEMORY
- 하드 기반이 아닌 메모리 기반의 디비
- 말 그대로 데이터를 HDD가 아닌 memory에 저장하는 기술
- get, put을 이용하여 데이터를 넣고 뺄 수 있다.
- 인 메모리 기반의 디비는 key:value의 형태로 저장이 되지만 redis의 경우 value가 단순한 objet가 아닌 자료구조를 갖는 점에서 다른 인 메모리 기반의 디비와 큰 차이를 보입니다.
- 메모리는 휘발성 - 캐싱 서버로 사용하기 위해 나왔지만, 하드 저장이 가능해짐


대부분 Redis를 보조 데이터베이스 역할로 그 가치를 최대한 끌어내어 활용하고 있다. 그 중 Redis에 가장 적합한 것이 바로 데이터베이스 캐싱(Caching)이다.

Redis는 별도 서버로 구축되어 주서버와 지속적인 서비스를 주고 받는 방법이 효과적이다. 요즘은 하나에 모든 것을 관리 운영하기 보다 각각의 기능, 필요에 따른 마이크로 서비스(Micro Service) 형태로 많이 운영되어진다. 


Redis의 내부구조

- 영속성을 지원하는 인메모리 데이터 저장소다.
- 레디스는 고성능 키-값 저장소로서 문자열, 해시, 셋, 정렬된 셋 형식의 데이터를 지원하는 NoSQL이다
- 장점은 익히기 쉽고 직관적인 데 있고, 단점은 저장된 데이터를 가공하는 방법에 제한이 있다는 데 있다.


1) key/value Store
기본적으로 Key/Value Store이다. 특정 키 값에 값을 저장하는 구조로 되어 있고 기본적인 PUT/GET Operation을 지원한다.

2) 다양한 데이타 타입
Value가 단순한 Object가 아니라 자료구조를 갖는다고 앞서 언급하였다.  redis가 지원하는 데이타 형은 크게 아래와 같이 5가지가 있다.


** 각 타입의 명령어는 해당 링크를 통해 진입 가능 하다. 사용할때 참고할 것.

(1) String
일반적인 문자열로 최대 512mbyte 길이 까지 지원한다.
Text 문자열 뿐만 아니라 Integer와 같은 숫자나 JPEG같은 Binary File까지 저장할 수 있다.

(2) Set
set은 string의 집합이다. 여러개의 값을 하나의 Value 내에 넣을 수 있다고 생각하면 되며 블로그 포스트의 태깅(Tag)등에 사용될 수 있다.
재미있는 점은 set간의 연산을 지원하는데, 집합인 만큼 교집합, 합집합, 차이(Differences)를 매우 빠른 시간내에 추출가능하다

(3) Sorted Set
set 에 "score" 라는 필드가 추가된 데이타 형으로 score는 일종의 "가중치" 정도로 생각하면 된다.
sorted set에서 데이타는 오름 차순으로 내부 정렬되며, 정렬이 되어 있는 만큼 score 값 범위에 따른 쿼리(range query), top rank에 따른 query 등이 가능하다.

(4) Hashes
hash는 value내에 field/string value 쌍으로 이루어진 테이블을 저장하는 데이타 구조체이다.
RDBMS에서 PK 1개와 string 필드 하나로 이루어진 테이블이라고 이해하면 된다.

(5) List
list는 string들의 집합으로 저장되는 데이타 형태는 set과 유사하지만, 일종의 양방향 Linked List라고 생각하면 된다. List 앞과 뒤에서 PUSH/POP 연산을 이용해서 데이타를 넣거나 뺄 수 있고, 지정된 INDEX 값을 이용하여 지정된 위치에 데이타를 넣거나 뺄 수 있다. 

출처:



http://develop.sunshiny.co.kr/1001



반응형

'개발공부 > 개발TIP' 카테고리의 다른 글

htttps 호출시 SSL 무시하여 오류안나게 하는법  (0) 2019.01.03
tar 상대경로로 압축 및 절대경로로 압축된 tar 풀기  (0) 2018.09.05
String, Stringbuilder, StringBuffer 차이점  (0) 2018.08.13
Crontab - 배치  (0) 2018.07.02
zookeeper(주키퍼)  (0) 2018.06.08

+ Recent posts

티스토리툴바