데이터 중심 애플리케이션 설계05
복제 데이터 복제란? 데이터 복제는 네트워크로 연결된 여러 머신에 동일한 데이터의 복사본을 유지하는 것을 의미합니다. 복제의 목적 데이터 복제를 사용하는 주요 이유는 다음과 같습니다: 신뢰성 향상: 하드웨어 장애나 소프트웨어 오류로 인한 데이터 유실을 방지합니다. 여러 복제본을 유지함으로써 단일 장애점을 제거할 수 있습니다. 가용성 증대...
복제 데이터 복제란? 데이터 복제는 네트워크로 연결된 여러 머신에 동일한 데이터의 복사본을 유지하는 것을 의미합니다. 복제의 목적 데이터 복제를 사용하는 주요 이유는 다음과 같습니다: 신뢰성 향상: 하드웨어 장애나 소프트웨어 오류로 인한 데이터 유실을 방지합니다. 여러 복제본을 유지함으로써 단일 장애점을 제거할 수 있습니다. 가용성 증대...
테스트 주도 개발 후기 배경 TDD(Test-Driven Development)라는 개념은 알고 있었지만, 실제로 어떻게 적용해야 하는지 막막했습니다. 특히 “테스트를 먼저 작성한다”는 것이 현실적으로 가능한지, 정말 효과적인지에 대한 의문이 있었습니다. 그러던 중 TDD의 창시자인 켄트 백의 원서를 읽어보게 되었습니다. 핵심 메시지 TDD는 ...
부호화와 발전 데이터 구조가 메모리 표현에서 바이트 시퀀스로 변환되는 방법과 그 역변환 방법을 다룸 인코딩과 디코딩 인코딩: 인메모리 데이터를 바이트 시퀀스로 변환하는 과정. 직렬화(serialization) 또는 마셜링(marshalling)이라고 부릅니다. 디코딩: 바이트 시퀀스를 다시 인메모리 표현으로 변환하는 과정으로 파싱...
저장소와 검색 데이터베이스의 기본적인 역할 데이터 저장 요청 시, 저장된 데이터 돌려주기 저장 엔진 아키텍처 해시 인덱스 : 키-값 쌍을 파일에 추가하고, 인메모리 해시 맵으로 각 키의 데이터 오프셋을 저장 컴팩션 : 로그에서 중복된 키를 버리고 각 키에 대한 최신 업데이만 유지해서 디스크 공간 회수 SS Table ...
데이터 모델과 질의 언어 데이터 모델은 해결하려는 문제를 어떻게 생각해야 하는지에 대해서도 영향을 미친다. 관계형 모델과 문서 모델 관계형 데이터베이스의 근원은 비즈니스 데이터 처리에 있다. 트랜잭션 처리, 일괄 처리가 핵심 사용 사례다. NoSQL 매우 높은 쓰기 처리량 달성을 관계형 데이터베이스보다 쉽게 하기 위해서 ...
소프트웨어 시스템의 3가지 관심사 신뢰성 : 하드웨어나, 소프트웨어 결함, 인적 오류 같은 역경에서도 올바르게 동작해야 한다. 확장성 : 스템의 데이터 양, 트래픽 양, 복잡도가 증가해도 처리해야 한다. 유지보수성 : 시간이 지나도, 모든 사용자가 시스템 상에서 생산적으로 작업할 수 있어야 한다. 신뢰성 잘못될 수 있는 일...
환경 window 4070 super 32G 메모리 전체 코드는 여기를 참고해주세요. 웹 검색 LLM 은 학습 시점의 데이터에 따라서, 특정 문제를 해결하기 위해서 필요한 정보가 없을 수도 있습니다. 이 점을 보완하기 위해서, 웹 검색을 해서 필요한 정보를 context 에 넣을 수 있도록 하는 기능을 구현해보겠습니다. asy...
모던 소프트웨어 엔지니어링 후기 배경 소프트웨어 엔지니어링 관련해서 좋은 리뷰를 받고 있는 책이라서 읽어봤습니다. 특히 개발 속도와 품질의 균형에 대한 고민이 있던 차에 이 책을 접하게 되었습니다. 핵심 메시지 개발 속도와 품질은 서로 상반되는 개념일까? 빠르게 개발하면서도 높은 품질을 유지할 수 있는 방법은 없는 걸까? 이 책은 그런 질문에 ...
환경 window 4070 super 32G 메모리 Self Improvements AI 가 자신의 출력을 스스로 평가하고 개선하는 능력을 말합니다. 기본 프로세스: 초기 답변 생성 자기 평가 (“이 답변이 좋은가?”) 문제점 식별 개선된 답변 재생성 반복… rok 을 써보면...
환경 window 4070 super 32G 메모리 컨텍스트 관리 저희가 사용하는 claude, chatgpt 를 생각해보면 대화의 맥락을 기억하고 이를 바탕으로 응답을 합니다. 불과 1년전의 chatgpt 를 생각해보면 맥락을 벗어나는 헛소리를 굉장히 자주 했습니다. 그러나 불과 1년 만에 이 기능이 비약적으로 상승하면서 사용자 ...