인턴 기간 진행했던 일들 + 배운 내용과 생각을 정리한다. 기록을 안 하면 큰 줄기만 기억하고 디테일은 까먹을게 뻔하다. Object Storage 리소스 추가 처음 진행했던 일이다. 전반적인 테라폼 프로바이더 프로젝트의 구조를 파악하고, Object Storage에 대한 테라폼 프로바이더를 제공하는 것을 목적으로 했다. 기존과 조금 다른 형태의 코드 작성이 필요했었는데, 그 이유는 아래와 같다. NCP의 Object Storage의 경우 AWS S3 Compatible API를 사용하고 있어 AWS SDK와의 호환성을 확인해야함. VPC 종속의 리소스가 아니어서 기존과 조금 다른 형태로 생성과 삭제를 확인해야함....

Serf 서비스 디스커버리 라이브러리이다. 유명한 서비스들인 Consul, ZooKeeper 등과 비교하였을 때에 더욱 코어한 로직이 담긴 라이브러리이다. 실제로 하시코프에서는 Consul을 서비스하기 위해 내부적으로 Serf를 사용하고 있다. 서프의 큰 특징 중 하나는 중앙 집중식 레지스트리 아키텍쳐를 띄지 않는다는 것이다. 서프를 이용해 서비스되고 있는 Consul의 경우는 중앙 집중식 아키텍쳐를 띄고 있는데, Serf는 그렇지 않음에 유의해서 보면 좋다. Serf는 서비스 디스버리에 포함되는가? Serf가 Consul 등 서비스 디스커버리의 핵심적인 기능들을 포함하는 것은 맞지만, 실제로 서비스 디스커버리 포함된다고 말하기는 어렵다....

mTLS with cfssl NOTE: 개념에 대해 설명하지 않고, 간단한 구현을 진행하는 글입니다. mTLS와 CFSSL에 대해서는 아래 글을 참고해주세요. mTLS: rfc8705 cfssl: cfssl mTLS의 경우는 요 영상을 통해서도 어렵지 않게 접할 수 있다 :) 토스ㅣSLASH 23 - 고객 불안을 0으로 만드는 토스의 Istio Zero Trust 다만 위 영상에서 소개되는 istio의 경우, mTLS를 위한 다양한 기능을 제공하기에 어렵지 않게 프로덕션 환경에서 mTLS를 적용할 수 있다. 이 글에서 진행하는 내용은 istio를 이용한 것은 아니며, mTLS를 위해서 자체 CA를 구축하고, 이를 기반으로 두 애플리케이션이 연결될 수 있도록 하는 것을 목적으로 한다....

Logging 로깅은 프로그래밍 전반에 걸쳐 매우 중요하게 여겨지는 요소이다. 실제 핵심적인 로직에 반영되는 것은 아니지만, 안정적이고 에러에 강한 프로그램을 만들기 위해서라면 로그는 분명 필요하다. Why we log 왜 로깅이 필요한지 돌이켜 생각해보면, 컴퓨터가 처음 만들어지는 시대로 돌아가야 한다. 우리는 전기 신호를 통해 특정 연산을 수행하는 작은 장치들을 통해, 인간이 수작업으로 진행해야 했던 일들을 점차 자동화해나가기 시작했다. 그러나 전기 신호는 가시성은 있으나 가독성이 없어, 단순한 전기 신호만으로는 해당 프로그램이 어떤 작업을 수행하고 있는지 파악하기 매우 어렵다....

ls나 cd는 뭔데 그냥 입력해도 동작하나? 예약어의 기원이 궁금해 환경변수 정리 cc: c compiler gcc: gnu compiler collection. GNU 프로젝트의 일환으로 개발되어 쓰이는 컴파일러. 리눅스에서는 gcc가 기본으로, gcc가 자동으로 cc로 연결되어 사용되도록 함. 일반적인 실행파일의 경우, 해당 실행파일이 존재하는 디렉토리에 접근해야 실행 가능하게된다. 일반적인 바이너리 파일을 열게 되면, 다음과 같이 나온다(2진수 포맷). 이렇게 기계어로 정리된 파일을 실행파일로 사용하게 된다. xxd -b binary --- ... 00e625a8: 10111010 01010101 01001111 10110010 11010101 11010110 ....

ref: https://blog.siner.io/2021/12/26/garbage-collection/ Mark-and-Sweep 전통적인 가비지 컬렉션 기법 중 하나. 프로그램 실행 중 동적으로 할당된 메모리들에 대해 주기적으로 sweeping을 진행하며 메모리를 관리함. 과정 Mark: 프로그램이 도달할 수 있는 모든 객체에 대해 탐색을 시작하며(유향그래프 형태), 직접 또는 간접적으로 참조 가능한 객체에 “표시"를 남긴다. 이는 트리 탐색과 비슷한 형식으로 이루어지며, 모든 루트 객체에서 시작해 연결된 객체를 찾아나가는 과정을 거친다. mark 단계에서 root set 전체를 순회하며 flag를 ‘사용중’상태로 설정한다. 현재 참조가 되어 있는 객체들은 모두 ‘사용중’ flag를 가지게 된다....

Multiplexing 정리 별 생각 없다가, 어제 디코에서 아우슥 사람들 얘기 듣다 보니 나도 헷갈려서 다시금 정리한다. Encap, Decap에 대한 개념을 시작으로 이어진 얘기였지만 결국 Multiplexing에 대한 내용을 정리하는 것으로 한다! 그렇게 되면 내용을 컴퓨터 일반으로 빼서 고민하는 것이 좋았겠지만, 주로 논의되는 곳이 네트워크 단에서이고 이 글을 쓰게 된 발단이 네트워킁 이야기이므로 이곳에 정리한다. Multiplexing in logic design 한국어로 다중화, 처음 만난 것은 논리 설계 수업이었다. 멀티플렉서 멀티플렉서(multiplexer) 또는 mux는 여러 아날로그 또는 디지털 입력 신호 중 하나를 선택하여 선택된 입력을 하나의 라인에 전달하는 장치이다....

V8-isolate study 결국 독립적인 heap 메모리 할당, GC 등을 통하여 독립적인 실행 환경을 구성하도록 해준다. https://github.com/nodejs/node/blob/main/src/node_worker.cc 위 파일에서 확인 시 Node.js의 worker_thread 또한 내부적으로 v8-isolate를 사용하여 구현된 것을 알 수 있는데, 그렇기에 동작이 매우 유사하다. 경량 스레드 경량 스레드는 (Light weight thread) 는 일반적인 스레드와 달리 운영체제 커널에서 관리되지 않고 유저 레벨에서 관리되는 스레드이다. 효율적인 멀티스레딩 환경을 제공하고, 커널의 간섭 없이 애플리케이션 수준에서 이를 스케쥴링 및 컨텍스트 스위칭을 할 수 있도록 한다....

Go goroutine, JAVA virtual thread, Node.js worker_thread 공통점 경량 스레드 이들 모두 경량 스레드 또는 작업 단위로서 동작한다. 즉, 전통적인 운영체제의 스레드보다 훨씬 적은 비용으로 생성되고 스케쥴링될 수 있다. 실제 운영체제 스레드보다 메모리 사용량이 적고, 컨텍스트 스위칭 비용이 적다. 동시성 지원 모두 동시성 프로그래밍을 지원하며, 여러 작업을 비동기적으로 실행하여 프로그램의 응답성을 높인다. 복잡한 병렬 처리나 비동기 작업을 더 쉽게 관리할 수 있도록 한다. 비동기적 실행 병렬 작업을 스케쥴링하고 비동기적으로 실행할 수 있다....

v8-isolate v8 isolate class reference isolate은 v8엔진의 일종의 복사본으로, 격리된 환경에서 독립적인 병렬 실행이 가능하도록 도와주는 기능이다. 하나의 프로세스 내에서 여러 작업들이 서로 간섭 없이 실행되도록 한다. 특히 서버리스 환경에서 조금 더 작은 단위의 여러 작업들을 병렬 실행하고자 할 때, 프로세스를 여러 격리된 환경으로 분리하는 것에 탁월하다. 실제 Cloudflare Workers 는 모든 동작에 대해 http call 을 통해 서비스를 제공하는데, 이 경우 v8-isolate를 사용하여 경량 작업들을 하나의 인스턴스에서 병렬로 실행하게 만들어두었다....