BERT base uncased

google/bigbird-roberta-base

AI 모델

BigBird 기본 모델은 블록 희소 어텐션을 사용하여 훨씬 긴 시퀀스를 처리하도록 BERT를 확장한 트랜스포머입니다. 마스크 언어 모델링을 위해 영어 텍스트로 사전 학습되었으며 최대 4096 토큰의 시퀀스를 효율적으로 처리하여 긴 문서 작업에서 최첨단 결과를 달성합니다.

BERT 다국어 모델

LLM

#50

100개 이상의 언어를 지원하는 두 가지 다국어 모델(Cased 및 Uncased)을 제공합니다. Cased 모델은 라틴 문자 이외의 알파벳과 일반적인 용도에 권장되며, Uncased 모델은 이전 버전입니다. 이 모델들은 자연어 이해 작업을 위해 설계되었으며 특정 애플리케이션에 맞게 미세…BERT는 100개 이상의 언어를 지원하는 두 가지 다국어 모델(Cased 및 Uncased)을 제공합니다. Cased 모델은 라틴 문자 이외의 알파벳과 일반적인 용도에 권장되며, Uncased 모델은 이전 버전입니다. 이 모델들은 자연어 이해 작업을 위해 설계되었으며 특정 애플리케이션에 맞게 미세…

XLM-RoBERTa Base

AI 모델

100개 언어에 걸쳐 2.5TB의 데이터로 사전 훈련된 다국어 모델입니다. 시퀀스 분류 및 토큰 분류와 같은 작업에서 뛰어난 성능을 발휘하여 다양한 자연어 처리 애플리케이션에 유용한 도구입니다.XLM-RoBERTa는 100개 언어에 걸쳐 2.5TB의 데이터로 사전 훈련된 다국어 모델입니다. 시퀀스 분류 및 토큰 분류와 같은 작업에서 뛰어난 성능을 발휘하여 다양한 자연어 처리 애플리케이션에 유용한 도구입니다.

SpanBERT

AI GitHub 저장소

텍스트 스팬의 표현 및 예측을 통해 사전 학습을 개선하는 데 중점을 둔 AI 모델입니다. HuggingFace BERT 형식과 호환되는 사전 학습된 기본 및 대형 cased 모델을 제공합니다. 이 리포지토리는 질문 답변 및 관계 추출을 포함한 다양한 NLP 작업에서 SpanBERT를 사용하고 평가하기…SpanBERT는 텍스트 스팬의 표현 및 예측을 통해 사전 학습을 개선하는 데 중점을 둔 AI 모델입니다. HuggingFace BERT 형식과 호환되는 사전 학습된 기본 및 대형 cased 모델을 제공합니다. 이 리포지토리는 질문 답변 및 관계 추출을 포함한 다양한 NLP 작업에서 SpanBERT를 사용하고 평가하기…

Mistral-7B-v0.1

AI 모델

70억 개의 매개변수를 가진 사전 훈련된 생성 텍스트 모델로, 오픈 소스를 통해 인공지능을 발전시키기 위해 설계되었습니다. 다양한 벤치마크에서 Llama 2 13B를 능가하여 자연어 처리 작업을 위한 강력한 도구입니다.Mistral-7B-v0.1은 70억 개의 매개변수를 가진 사전 훈련된 생성 텍스트 모델로, 오픈 소스를 통해 인공지능을 발전시키기 위해 설계되었습니다. 다양한 벤치마크에서 Llama 2 13B를 능가하여 자연어 처리 작업을 위한 강력한 도구입니다.

Longformer Base 4096

AI 모델

긴 문서를 처리하도록 설계된 트랜스포머 모델입니다. RoBERTa를 기반으로 하며 최대 4,096 토큰의 확장된 시퀀스에 대해 사전 학습되었습니다. 이 모델은 슬라이딩 윈도우와 글로벌 어텐션을 결합한 하이브리드 어텐션 메커니즘을 사용하여 효율적인 긴 문서 이해 및 작업별 표현…Longformer Base 4096은 긴 문서를 처리하도록 설계된 트랜스포머 모델입니다. RoBERTa를 기반으로 하며 최대 4,096 토큰의 확장된 시퀀스에 대해 사전 학습되었습니다. 이 모델은 슬라이딩 윈도우와 글로벌 어텐션을 결합한 하이브리드 어텐션 메커니즘을 사용하여 효율적인 긴 문서 이해 및 작업별 표현…

all-mpnet-base-v2

AI 모델

문장과 단락을 768차원 벡터 공간으로 인코딩하여 클러스터링 및 의미 검색과 같은 작업을 용이하게 하는 문장 변환기 모델입니다. 효율적인 텍스트 임베딩 및 검색 애플리케이션을 위해 설계되었습니다.all-mpnet-base-v2는 문장과 단락을 768차원 벡터 공간으로 인코딩하여 클러스터링 및 의미 검색과 같은 작업을 용이하게 하는 문장 변환기 모델입니다. 효율적인 텍스트 임베딩 및 검색 애플리케이션을 위해 설계되었습니다.

BEiT 이미지 트랜스포머

AI 모델

마스크된 이미지 모델링을 사용하여 비전 트랜스포머를 사전 학습하는 자기 지도 비전 표현 모델입니다. 이미지를 시각적 토큰으로 토큰화하고 마스크된 패치를 복구하여 이미지 분류 및 의미론적 분할과 같은 다운스트림 작업에서 경쟁력 있는 결과를 달성합니다.BEiT는 마스크된 이미지 모델링을 사용하여 비전 트랜스포머를 사전 학습하는 자기 지도 비전 표현 모델입니다. 이미지를 시각적 토큰으로 토큰화하고 마스크된 패치를 복구하여 이미지 분류 및 의미론적 분할과 같은 다운스트림 작업에서 경쟁력 있는 결과를 달성합니다.