OpenAI выпустила новый endpoint в API, упрощающий задачи семантического поиска и анализа данных.
Кратко:
- ●OpenAI представила endpoint
/embeddingsдля API. - ●Эмбеддинги помогают в семантическом поиске и классификации.
- ●Модели основаны на GPT-3 и используют contrastive pre-training.
- ●Примеры успешного использования в реальных проектах.
Новые возможности для обработки текста и кода
25 января 2022 года OpenAI объявила о запуске нового endpoint /embeddings в своём API. Этот инструмент позволяет преобразовывать текст и код в векторные представления, которые могут быть использованы в задачах семантического поиска, кластеризации, тематического моделирования и классификации.
Что такое эмбеддинги
Эмбеддинги — это векторные представления текстов или кода, которые отражают их смысловое содержание. Чем ближе эмбеддинги двух текстов в высокоразмерном пространстве, тем более они схожи по смыслу. Например, фраза «canine companions say» будет ближе к «woof», чем к «meow».