Elasticsearch 대용량 데이터 파이프라인 구축기: 수십억 건을 실시간으로 처리하기
로그에 쌓이는 사용자 선호 국가 데이터의 가중치를 실시간으로 보정해야 했다. Update By Query 대신 Ingest Pipeline을 쓰고, Index Template 우선순위와 기존 인덱스, Kibana 필드 문제를 풀어 간 기록이다.
로그에 쌓이는 사용자 선호 국가 데이터의 가중치를 실시간으로 보정해야 했다. Update By Query 대신 Ingest Pipeline을 쓰고, Index Template 우선순위와 기존 인덱스, Kibana 필드 문제를 풀어 간 기록이다.
https://www.mongodb.com/cloud/atlas
스키마(구조적 개념, 데이터 형태 만들기)
When you need to import something that doesn't export anything, but does something else, this is a side effect only…
대표적인 NoSQL 데이터베이스이다. - mongo(humongous, extremely large)는 Humongous 에서 따온 말로, 엄청나게 큰 DB 라는 의미이다. - 대용량 데이터를 처리하기 좋게…