태그: utf-8

1개의 포스트

한글 문서를 벡터 DB에 올리다 만난 두 개의 벽: 바이트와 토큰

한글 문서를 벡터 DB에 올리다 만난 두 개의 벽: 바이트와 토큰

•5 min read

Cloudflare Vectorize에 한국어 문서를 업로드하며 부딪힌 문제들. 벡터 DB가 처음인 분들을 위해, 한글이 왜 유독 까다로운지 차근차근 풀어봅니다.

#cloudflare #vectorize #embedding #korean #utf-8 #rag