Dev. Blog isprometheo의 좌충우돌 개발 블로그
Posts with the tag parquet:

[Log] Spark ElasticSearch Parquet

로그를 ElasticSearch에 쌓아서 실시간으로 보고 있었는데 로그의 양이 많아서 차지하는 용량이 계속 커지고 있었다. 파일로도 로그를 남겨두기는 해서 한동안은 80 ~ 90% 정도 되면 인덱스를 지워서 용량을 확보했다. 하지만 다년