얇게 써는 기계
긴 텍스트를 덩어리로 나누고 단어 분할을 위한 무료 API입니다.
분할기 API
슬라이서는 대규모 모델이 맥락적 제약 조건 내에서 입력을 관리하고 모델 성능을 최적화하는 데 중요한 역할을 합니다. 개발자는 토큰을 계산하고 관련 텍스트 세그먼트를 추출하여 효율적인 데이터 처리와 비용 관리를 보장할 수 있습니다.
chevron_leftchevron_right
GET 요청을 사용하여 토큰 수를 직접 반환
더 많은 기능을 보려면 POST 요청을 사용하세요.
마지막 N개의 토큰을 반환합니다.
지정된 콘텐츠의 마지막 N개 토큰을 반환합니다. 국경 독점. "머리"와 함께 사용할 수 없습니다.
분할기
사용할 토크나이저를 선택합니다.
cl100k_base
arrow_drop_down
upload
묻다
Bash
언어
arrow_drop_down
curl -X POST 'https://api.jina.ai/v1/segment' \
-H "Content-Type: application/json" \
-d @- <<EOFEOF
{
"content": "Jina AI: Your Search Foundation, Supercharged! 🚀\nIhrer Suchgrundlage, aufgeladen! 🚀\n您的搜索底座,从此不同!🚀\n検索ベース,もう二度と同じことはありません!🚀"
}
EOFEOF
key
API 키
visibility_off
남은 토큰 금액
0
세그먼터란 무엇입니까?
세그먼터는 텍스트를 토큰이나 청크로 변환하는 핵심 구성 요소입니다. 토큰이나 청크는 벡터 모델/재배열자 또는 대규모 모델에서 처리하는 기본 데이터 단위입니다. 토큰은 단어 전체, 단어의 일부, 심지어 문자 하나를 나타낼 수도 있습니다.
텍스트를 입력하세요
번개처럼 빠른 속도로 긴 문서를 덩어리로 자르세요!
또한 분할기를 사용하여 긴 문서를 더 작은 덩어리로 분할하여 벡터 모델이나 재정렬기에서 처리하기 쉽게 만들 수도 있습니다. 우리는 공통의 구조적 단서를 가져와 Markdown, HTML, LaTeX, CJK 언어 등 다양한 유형의 콘텐츠에서 잘 작동하는 일련의 규칙과 경험적 방법을 구축했습니다.
텍스트를 입력하세요
각 블록의 최대 문자 수입니다. 실제로 텍스트에 자연스러운 경계가 있는 경우 블록 길이는 이 값보다 작을 수 있습니다.
0 총 청크
슬라이서는 무료입니다!
API 키를 제공하면 더 높은 요금 한도에 액세스할 수 있으며 키에 요금이 청구되지 않습니다.
비율 제한
속도 제한은 세 가지 방법, 즉 RPM(분당 요청 수)과 TPM(분당 단어 수)으로 추적됩니다. 제한은 IP/API 키별로 적용되며 RPM 또는 TPM 임계값에 먼저 도달하면 트리거됩니다. 요청 헤더에 API 키를 제공하면 IP 주소 대신 키별로 요금 제한을 추적합니다.
Columns
arrow_drop_down
제품 | API 포트 | 설명하다arrow_upward | API 키 없음key_off | API 키 사용key | 프리미엄 API 키와 함께 제공key | 평균 지연 | 단어 사용 횟수 | 요청 유형 | |
---|---|---|---|---|---|---|---|---|---|
리더 API | https://r.jina.ai | URL을 큰 모델 친화적 텍스트로 변환 | 20 RPM | 500 RPM | trending_up5000 RPM | 7.9s | 출력 응답의 토큰 수를 기준으로 합니다. | GET/POST | |
리더 API | https://s.jina.ai | 웹을 검색하고 결과를 모델 친화적인 큰 텍스트로 변환합니다. | block | 100 RPM | trending_up1000 RPM | 2.5s | 각 요청에는 10000개의 토큰으로 시작하는 고정된 수의 토큰이 필요합니다. | GET/POST | |
심층 검색 | https://deepsearch.jina.ai/v1/chat/completions | 추론하고, 검색하고, 반복하여 최상의 답을 찾으세요 | block | 50 RPM | 500 RPM | 56.7s | 전체 프로세스에서 총 토큰 수를 계산합니다. | POST | |
벡터 모델 API | https://api.jina.ai/v1/embeddings | 텍스트/이미지를 고정 길이 벡터로 변환 | block | 500 RPM & 1,000,000 TPM | trending_up2,000 RPM & 5,000,000 TPM | ssid_chart 입력 크기에 따라 다름 help | 입력 요청의 토큰 수를 기준으로 합니다. | POST | |
재정렬 API | https://api.jina.ai/v1/rerank | 쿼리로 문서 구체화 | block | 500 RPM & 1,000,000 TPM | trending_up2,000 RPM & 5,000,000 TPM | ssid_chart 입력 크기에 따라 다름 help | 입력 요청의 토큰 수를 기준으로 합니다. | POST | |
분류자 API | https://api.jina.ai/v1/train | 훈련 샘플을 사용하여 분류기 훈련 | block | 20 RPM & 200,000 TPM | 60 RPM & 1,000,000 TPM | ssid_chart 입력 크기에 따라 다름 | 단어 수는 입력 단어 × 반복 횟수입니다. | POST | |
분류자 API (작은 샘플) | https://api.jina.ai/v1/classify | 훈련된 퓨샷 분류기를 사용하여 입력을 분류합니다. | block | 20 RPM & 200,000 TPM | 60 RPM & 1,000,000 TPM | ssid_chart 입력 크기에 따라 다름 | 토큰 개수는 다음과 같습니다. 입력 토큰 | POST | |
분류자 API (제로 샘플) | https://api.jina.ai/v1/classify | 제로샷 분류를 사용하여 입력 분류 | block | 200 RPM & 500,000 TPM | 1,000 RPM & 3,000,000 TPM | ssid_chart 입력 크기에 따라 다름 | 단어 수는: 입력 단어와 태그 단어입니다. | POST | |
분할기 API | https://api.jina.ai/v1/segment | 긴 텍스트를 단어와 문장으로 분할 | 20 RPM | 200 RPM | 1,000 RPM | 0.3s | 토큰 사용은 계산되지 않습니다. | GET/POST |
슬라이서 비용은 얼마입니까?
keyboard_arrow_down
API 키를 제공하지 않는 경우 속도 제한은 어떻게 됩니까?
keyboard_arrow_down
API 키를 제공하는 경우 비율 제한은 어떻게 됩니까?
keyboard_arrow_down
내 API 키로 토큰을 청구하나요?
keyboard_arrow_down
슬라이서는 여러 언어를 지원합니까?
keyboard_arrow_down
GET 요청과 POST 요청의 차이점은 무엇입니까?
keyboard_arrow_down
요청당 분할할 수 있는 최대 단어 길이는 얼마입니까?
keyboard_arrow_down
다이싱 기능은 어떻게 작동하나요? 시맨틱 다이싱인가요?
keyboard_arrow_down
스플리터에서 "endoftext"와 같은 특수 토큰을 처리하는 방법은 무엇입니까?
keyboard_arrow_down
청킹은 영어 이외의 언어도 지원하나요?
keyboard_arrow_down
비율 제한
속도 제한은 세 가지 방법, 즉 RPM(분당 요청 수)과 TPM(분당 단어 수)으로 추적됩니다. 제한은 IP/API 키별로 적용되며 RPM 또는 TPM 임계값에 먼저 도달하면 트리거됩니다. 요청 헤더에 API 키를 제공하면 IP 주소 대신 키별로 요금 제한을 추적합니다.
Columns
arrow_drop_down
제품 | API 포트 | 설명하다arrow_upward | API 키 없음key_off | API 키 사용key | 프리미엄 API 키와 함께 제공key | 평균 지연 | 단어 사용 횟수 | 요청 유형 | |
---|---|---|---|---|---|---|---|---|---|
리더 API | https://r.jina.ai | URL을 큰 모델 친화적 텍스트로 변환 | 20 RPM | 500 RPM | trending_up5000 RPM | 7.9s | 출력 응답의 토큰 수를 기준으로 합니다. | GET/POST | |
리더 API | https://s.jina.ai | 웹을 검색하고 결과를 모델 친화적인 큰 텍스트로 변환합니다. | block | 100 RPM | trending_up1000 RPM | 2.5s | 각 요청에는 10000개의 토큰으로 시작하는 고정된 수의 토큰이 필요합니다. | GET/POST | |
심층 검색 | https://deepsearch.jina.ai/v1/chat/completions | 추론하고, 검색하고, 반복하여 최상의 답을 찾으세요 | block | 50 RPM | 500 RPM | 56.7s | 전체 프로세스에서 총 토큰 수를 계산합니다. | POST | |
벡터 모델 API | https://api.jina.ai/v1/embeddings | 텍스트/이미지를 고정 길이 벡터로 변환 | block | 500 RPM & 1,000,000 TPM | trending_up2,000 RPM & 5,000,000 TPM | ssid_chart 입력 크기에 따라 다름 help | 입력 요청의 토큰 수를 기준으로 합니다. | POST | |
재정렬 API | https://api.jina.ai/v1/rerank | 쿼리로 문서 구체화 | block | 500 RPM & 1,000,000 TPM | trending_up2,000 RPM & 5,000,000 TPM | ssid_chart 입력 크기에 따라 다름 help | 입력 요청의 토큰 수를 기준으로 합니다. | POST | |
분류자 API | https://api.jina.ai/v1/train | 훈련 샘플을 사용하여 분류기 훈련 | block | 20 RPM & 200,000 TPM | 60 RPM & 1,000,000 TPM | ssid_chart 입력 크기에 따라 다름 | 단어 수는 입력 단어 × 반복 횟수입니다. | POST | |
분류자 API (작은 샘플) | https://api.jina.ai/v1/classify | 훈련된 퓨샷 분류기를 사용하여 입력을 분류합니다. | block | 20 RPM & 200,000 TPM | 60 RPM & 1,000,000 TPM | ssid_chart 입력 크기에 따라 다름 | 토큰 개수는 다음과 같습니다. 입력 토큰 | POST | |
분류자 API (제로 샘플) | https://api.jina.ai/v1/classify | 제로샷 분류를 사용하여 입력 분류 | block | 200 RPM & 500,000 TPM | 1,000 RPM & 3,000,000 TPM | ssid_chart 입력 크기에 따라 다름 | 단어 수는: 입력 단어와 태그 단어입니다. | POST | |
분할기 API | https://api.jina.ai/v1/segment | 긴 텍스트를 단어와 문장으로 분할 | 20 RPM | 200 RPM | 1,000 RPM | 0.3s | 토큰 사용은 계산되지 않습니다. | GET/POST |
API 관련 FAQ
code
Reader, Embedding, Reranker, Classifier 및 Fine-Tuned Model API에 동일한 API 키를 사용할 수 있습니까?
keyboard_arrow_down
code
API 키의 토큰 사용량을 볼 수 있나요?
keyboard_arrow_down
code
API 키를 잊어버린 경우 어떻게 해야 합니까?
keyboard_arrow_down
code
API 키가 만료되나요?
keyboard_arrow_down
code
API 키 간에 토큰 잔액을 전송할 수 있나요?
keyboard_arrow_down
code
내 API 키를 파기할 수 있나요?
keyboard_arrow_down
code
일부 모델을 처음 요청할 때 속도가 느린 이유는 무엇입니까?
keyboard_arrow_down
code
모델을 훈련하는 데 사용자 입력 데이터가 사용됩니까?
keyboard_arrow_down
청구 관련 자주 묻는 질문
attach_money
API 요금은 문장 수나 요청 수에 따라 청구되나요?
keyboard_arrow_down
attach_money
신규 사용자가 무료 평가판을 받을 수 있나요?
keyboard_arrow_down
attach_money
실패한 요청에 대해 토큰이 차감되나요?
keyboard_arrow_down
attach_money
어떤 결제 방법이 허용되나요?
keyboard_arrow_down
attach_money
Ci Yuan 구매 후 송장을 발행할 수 있나요?
keyboard_arrow_down