개발자노트

개발환경 문제 Android Studio에서 Android Emulator를 설치하려고 했다. 그런데 아래와 같은 에러 메시지가 발생했다. 정확한 에러 메세지는 이렇다. [SC] DeleteService 성공 [SC] 4294967201 오류가 발생하여 StartService이(가) 실패했습니다. Android Emulator Hypervisor Driver for AMD Processors installation failed. To install Android Emulator Hypervisor Driver for AMD Processors follow the instructions found at: https://github.com/google/android-emulator-hypervisor-dri..

IT/프로그래밍 2020. 6. 7. 13:52

컨슈머 그룹(Consumer Group) 이란? 컨슈머 그룹은 카프카의 개별 컨슈머 인스턴스들을 하나로 묶는 논리적 그룹 단위이다. 왜 Consumer Group 을 사용하는가? 첫 번째, 장애 내성(Fail Over) 특정 컨슈머에 문제가 생기는 경우 동일 그룹 내의 다른 컨슈머가 계속해서 파티션에서 데이터를 읽을 수 있다. 예를 들어 위 그림에서 컨슈머 1에 장애가 발생하더라도, 동일 컨슈머 그룹 내의 2,3,4 컨슈머가 계속해서 읽을 수 있도록 리밸런싱이 된다. 카프카는 컨슈머 그룹 단위로 offset을 관리하기 때문이다. 두 번째, Offset 관리 아직 offset을 모르시는 분들을 위해 먼저 offset을 간단히 정리하면 아래와 같다. 오프셋(Offset) 이란? 파티션 내에서 데이터의 위치를..

IT/프로그래밍 2020. 3. 31. 18:30

kafka 에서 consumer group 의 consumer 의 개수는 partition의 개수와 되도록 일치시키는 것이 효율적이다. partition은 동일 consumer group에 대해서는 1:1의 관계를 가진다. 반대로 consumer group의 consumer는 partion과 1:N의 관계를 가질 수 있다. partition이 consumer 보다 많다면, 하나의 consumer가 여러 개의 partition을 처리해야 하기 때문에 지연(lag)이 생길 수 있다. 또한 consumer의 수가 partition의 수보다 많다면, 놀고 있는 consumer가 생기기 때문에 비용을 낭비하게 된다. ※ 참고로 파티션의 수는 늘릴 수는 있지만 줄일 수는 없다. 따라서 무작정 파티션과 컨슈머의 수를..

IT/프로그래밍 2020. 3. 31. 18:30

들어가며 릿코드의 LRU Cache 문제를 풀다가 이 자료구조를 알게 되었다. 처음에는 HashMap으로 직접 LRU Cache에 해당하는 알고리즘을 작성하였으나, 입력값이 커지니 Time limit exceed 가 발생했다. 이 문제의 솔루션은 LinkedHashMap 을 확장하는 것으로 별다른 로직 추가 없이 LRU Cache의 요구사항을 만족시킬 수 있었다. 이런 건 그냥 지나갈 수 없다. 간단하게라도 이 자료구조를 학습해보고 정리해본다. LinkedHashMap 이란 무엇인가? HashMap의 모든 기능은 그대로 사용할 수 있다. 추가적으로, 저장된 데이터들의 순서를 유지한다. 순서를 유지하기 위해 이중 연결 리스트 (Doubly Linked List)를 사용한다. 따라서 메모리 사용량이 Hash..

IT/프로그래밍 2020. 2. 22. 16:33

모든 경우의 수를 순서대로 나열하는 방법인 순열을 정리한다. 순열이란? 순서가 있으면 순열, 순서가 없으면 조합이다. 순열을 계산하는 방법은 아래와 같다. 그러나 경우의 수를 구하는 것 보다는, 경우의 리스트를 반환하는 방식으로 문제가 출제되는 것 같다. 중복순열 순열과 다르게 중복순열은 중복을 허용한다. 코드 function main(nums) { let result = []; perm(result, nums, 0); return result; } function perm(result, nums, depth) { if (depth === nums.length) { result.push(nums.map(n => n)); //deep copy return result; } //swap and deep do..

IT/프로그래밍 2020. 1. 26. 13:01

Git을 처음 설치하고 저장소를 ssh clone 받을 때 위의 오류가 발생하는 경우가 있다. 깃허브에서 인증되지 않은 클라이언트로 다운로드를 허용하지 않아서 인증을 요구하는 경우다. 해결방법은 간단하다. ssh-keygen 으로 키 생성 공개키를 github에 등록 1. ssh-keygen 으로 키 생성 window git bash를 설치하면 ssh-keygen 모듈이 내장되어 있다. ssh-keygen 을 입력하면 공개키와 개인키를 생성할 수 있다. 개인키는 내 PC에 보관하고, 개인키와 짝이 맞는 공개키를 github 에 등록해서 인증을 하는 방식이다. 2. 공개키를 github에 등록 개인키와 공개키가 생성되었다. 공개키가 /c/Users/jongholee/.ssh/id_rsa.pub에 생성되으므..

IT/프로그래밍 2020. 1. 17. 19:52

Consumer Process 를 개발하는데 Spring Kafka 를 사용하였다. Consumer Config 를 생성 시 사용되는 옵션 중 하나인 KafkaConsumerFactory 에 대한 설정값을 알아본다. Example @Bean public Map consumerConfigs() { Map props = new HashMap(); props.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG, kafkaCluster); props.put(ConsumerConfig.GROUP_ID_CONFIG, consumerGroupId); props.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG, StringDeserializer.clas..

IT/프로그래밍 2020. 1. 13. 19:00

들어가며 신규 프로젝트에서 내가 담당한 서비스에 이벤트 버스 패턴을 틈틈이 학습하며 적용했다. 이벤트 버스에 대한 개념 정리를 미루고 있다가, 이번에 시간이 좀 나서 블로그에 이벤트 버스 패턴을 정리해보려고 한다. 이벤트 버스 패턴이란? 확장성이 뛰어난 반응성 애플리케이션을 구현하기 위한 분산 비동기 아키텍처 패턴 주요 아이디어 이벤트를 비동기적으로 전달하고 처리하는 것 네트워킹 분야의 버스(Bus Topology)의 동작 방식과 매우 유사함 장점 느슨한 결합(loose coupling)과 관심사의 분리(separation of concerns) 원칙을 유지하면서 컴포넌트 간 통신이 가능 개발 복잡도의 간소화 따라서 규모가 크고 고도로 분산화된 시스템에 효과적임 단점 메모리 수요가 증가할 수 있음 구독자..

IT/프로그래밍 2020. 1. 13. 10:55