OpenAI поддерживает локальную обработку запросов к GPT-6 Luna через API Responses и Chat Completions. Сервис расширяет существующие возможности локализации данных: теперь они охватывают и вычисления, необходимые для генерации ответов.
Руководитель корпоративного направления OpenAI в Индии Нитин Баванкули сообщил, что требования к локальной обработке данных мешали некоторым индийским компаниям внедрять ИИ для важных задач. Anthropic также предоставила возможности локализации данных для отдельных моделей через Amazon Bedrock. Локальное выполнение инференса было одним из конкурентных преимуществ индийских поставщиков, таких как Sarvam AI.
Клиентам необходимо создать новый API-проект, выбрать Индию для хранения и обработки данных и использовать региональную конечную точку API для Индии. Для разработчиков, обслуживающих компании с требованиями к локальной обработке данных, это предложение может устранить препятствие для запуска поддерживаемых рабочих нагрузок OpenAI в промышленную эксплуатацию.