Документация
Документация
Всё что нужно для начала работы с GPT-OSS
Исчерпывающие руководства, справочники API и учебные материалы для эффективного развертывания и использования моделей GPT-OSS.
Быстрый старт
Запустите GPT-OSS за несколько минут
1
Установка зависимостей
Настройте среду с необходимыми пакетами
pip install transformers torch accelerate2
Загрузка модели
Инициализируйте модель GPT-OSS в вашем приложении
from transformers import AutoModelForCausalLM, AutoTokenizer3
Генерация текста
Начните генерировать текст с помощью модели
output = model.generate(input_ids, max_length=100)Руководство по установке
Несколько способов установки и развертывания моделей GPT-OSS
Ollama
Самый простой способ запуска GPT-OSS локально
- Установите Ollama с ollama.ai
- Выполните: ollama pull gpt-oss:120b
- Начните чат: ollama run gpt-oss:120b
Hugging Face
Использование с библиотекой transformers
- pip install transformers torch
- Загрузка модели: AutoModelForCausalLM.from_pretrained('openai/gpt-oss-120b')
- Генерация текста с моделью
VLLM
Высокопроизводительный сервер вывода
- pip install vllm
- vllm serve openai/gpt-oss-120b
- Использование OpenAI-совместимого API
Docker
Контейнеризованное развертывание
- docker pull gpt-oss:120b
- docker run -p 8000:8000 gpt-oss:120b
- Доступ через HTTP API
Справочник API
Полная документация API для моделей GPT-OSS
POST
/v1/chat/completionsСоздать завершение чата
Parameters:
messagesarray
Required
Список сообщений в разговореmodelstring
Required
Модель для завершенияmax_tokensinteger
Максимальное количество токенов для генерацииtemperaturenumber
Температура выборки (0-2)POST
/v1/completionsСоздать завершение текста
Parameters:
promptstring
Required
Текстовый промпт для завершенияmodelstring
Required
Модель для завершенияmax_tokensinteger
Максимальное количество токенов для генерацииГотовы к разработке?
Начните создавать удивительные приложения с моделями GPT-OSS уже сегодня.
