¿Cómo acceder a Gemma-3-12B-IT de 3 formas?

¿Cómo acceder a Gemma-3-12B-IT de 3 formas?

Gemma-3-12B-IT pertenece a la familia de modelos abiertos Gemma de Google y ofrece un sólido rendimiento multimodal, manteniéndose ligero y eficiente. Construido sobre la misma base avanzada que Gemini, maneja tareas como generación de texto, resumen, razonamiento y comprensión de imágenes con facilidad, ofreciendo una opción potente y accesible tanto para desarrolladores como para investigadores.

En esta guía, comenzaremos con un repaso rápido de Gemma-3-12B-IT y luego exploraremos diferentes formas de acceder a él, incluyendo interfaces web, integración API y despliegue local.

Inicia tu prueba gratuita con Gemma 3 12B IT

¿Qué es Gemma-3-12B-IT?

Información básica

Característica Detalles
Tamaño del modelo 12B parámetros
Arquitectura Densa
Código abierto
Ventana de contexto 128K tokens
Soporte multilingüe Destaca en inglés, soporta 140 idiomas
Multimodalidad Texto e imágenes (normalizadas a resolución 896 x 896)
Licencia Gemma
Benchmark Rendimiento
GPQA Diamond 35%
MMLU-Pro 60%
IFBench 37%
SciCode 17%
LiveCodeBench 14%
AIME 2025 18%
Humanity’s Last Exam 4.8%
AA-LCR 7%

Procesamiento de contexto extendido

Con una ventana de contexto de 128,000 tokens, Gemma-3-12B-IT va más allá de una simple mejora técnica, ya que redefine cómo las organizaciones procesan documentos extensos y flujos de trabajo analíticos complejos. Su diseño avanzado elimina los problemas de fragmentación comunes en modelos convencionales, permitiendo una comprensión fluida a lo largo de grandes volúmenes de texto sin perder coherencia ni contexto.

Esta capacidad expandida abre nuevas fronteras para la inteligencia documental, permitiendo que los sistemas de IA mantengan la comprensión a lo largo de documentos de investigación completos, contratos o manuales técnicos, mientras también interpretan componentes visuales como gráficos, tablas e ilustraciones.

Integración multimodal avanzada

Construido con un marco de visión-lenguaje, Gemma-3-12B-IT va mucho más allá del reconocimiento de imágenes estándar para lograr un razonamiento analítico similar al humano. Al vincular información textual y visual, puede interpretar relaciones entre ambas modalidades y extraer conocimientos más profundos que serían inaccesibles mediante análisis solo de texto o solo de imagen.

Aspectos destacados

  • Análisis de documentos: Extrae información útil de informes que incluyen gráficos, tablas y elementos visuales.
  • Comprensión visual: Responde preguntas complejas basadas en imágenes con razonamiento claro y lógico.
  • Generación de contenido: Escribe descripciones, leyendas y explicaciones claras que conectan lo visual y lo textual de forma natural.
  • Apoyo al aprendizaje: Ofrece explicaciones completas y fáciles de entender que combinan texto con ejemplos visuales útiles.

Arquitectura ajustada por instrucciones

El diseño refinado de ajuste por instrucciones de Gemma-3-12B-IT simplifica el proceso de despliegue de IA al minimizar la necesidad de ingeniería de prompts compleja o configuración técnica avanzada. Interpreta de forma natural comandos en lenguaje humano y preserva el contexto a través de conversaciones extensas de múltiples turnos, permitiendo una interacción más fluida e intuitiva con el modelo.

Cómo acceder a Gemma-3-12B-IT: Interfaz web (para principiantes)

Gemma3 12B IT Web Interface on Novita AI

Prueba Gemma 3 12B IT gratis ahora

Cómo acceder a Gemma-3-12B-IT: Usando la API (para desarrolladores)

Novita AI proporciona la API de Gemma-3-12B-IT con 131K de contexto y costos de $0.05/entrada y $0.1/salida, permitiendo a los desarrolladores aprovechar sin problemas el modelo multimodal ligero de Google para tareas avanzadas de razonamiento, resumen y generación a través de una API unificada.

Novita AI

Paso 1: Inicia sesión y accede a la biblioteca de modelos

Inicia sesión en tu cuenta y haz clic en el botón Model Library.

Log In and Access the Model Library

¡Prueba la demo de Gemma 3 12B IT ahora!

Paso 2: Inicia tu prueba gratuita

Selecciona tu modal y comienza tu prueba gratuita para explorar las capacidades del modelo seleccionado.

Gemma3-12b-it playground

Paso 3: Obtén tu clave API

Para autenticarte con la API, te proporcionaremos una nueva clave API. Entra en la página de “Settings” y copia la clave API como se indica en la imagen.

get API Key

Paso 4: Instala la API

Instala la API usando el gestor de paquetes específico para tu lenguaje de programación.

Después de la instalación, importa las bibliotecas necesarias en tu entorno de desarrollo. Inicializa la API con tu clave API para empezar a interactuar con Novita AI LLM. Este es un ejemplo de uso de la API de chat completions para usuarios de Python.

from openai import OpenAI
  
client = OpenAI(
    base_url="https://api.novita.ai/openai",
    api_key="session_Um3Ozta39g2J__yeP9b_rOegzeA_qSYYquKzJS2oitKENIo8_H2FL2sCtl25-sKWjCY_wsmN18iuDp1zv_Xkaw==",
)

model = "google/gemma-3-12b-it"
stream = True # or False
max_tokens = 4096
system_content = "Be a helpful assistant"
temperature = 1
top_p = 1
min_p = 0
top_k = 50
presence_penalty = 0
frequency_penalty = 0
repetition_penalty = 1
response_format = { "type": "text" }

chat_completion_res = client.chat.completions.create(
    model=model,
    messages=[
        {
            "role": "system",
            "content": system_content,
        },
        {
            "role": "user",
            "content": "Hi there!",
        }
    ],
    stream=stream,
    max_tokens=max_tokens,
    temperature=temperature,
    top_p=top_p,
    presence_penalty=presence_penalty,
    frequency_penalty=frequency_penalty,
    response_format=response_format,
    extra_body={
      "top_k": top_k,
      "repetition_penalty": repetition_penalty,
      "min_p": min_p
    }
  )

if stream:
    for chunk in chat_completion_res:
        print(chunk.choices[0].delta.content or "", end="")
else:
    print(chat_completion_res.choices[0].message.content)

Opción 2: Flujos de trabajo multiagente con OpenAI Agents SDK

Construye sistemas multiagente sofisticados aprovechando las capacidades de modo dual de Gemma-3-12B-IT:

  • Integración plug-and-play: Usa DeepSeek V3.1 en cualquier flujo de trabajo de OpenAI Agents
  • Capacidades avanzadas de agente: Soporte para traspasos, enrutamiento e integración de herramientas
  • Arquitectura escalable: Diseña agentes que aprovechen las capacidades de DeepSeek V3.1

Cómo acceder a Gemma-3-12B-IT: Despliegue local (para usuarios avanzados)

Requisitos de hardware para Gemma3-12B-IT

Cuantización Solo pesos (aprox.) Con KV-cache (aprox.) Configuración mínima GPU recomendada
BF16 24.0 GB 38.9 GB Nvidia L40S ×1 Nvidia H100 ×1
SFP8 12.4 GB 27.3 GB Nvidia L40S ×1 Nvidia A100 ×1
INT4 6.6 GB 21.5 GB Nvidia L4 ×1 Nvidia L40S ×1

Para usuarios que buscan mayor control y flexibilidad, Novita AI proporciona instancias de GPU en la nube bajo demanda que incluyen L40S, A100, H100, así como otras opciones exigentes como RTX 4090, RTX 5090 y RTX 6000 Ada, permitiendo a los usuarios implementar cargas de trabajo de alto rendimiento sin esfuerzo sin depender de hardware local.

Despliega en Novita AI

GPU List 1 on Novita AI

GPU List 2 on Novita AI

Mejores prácticas para usar Gemma-3-12B-IT

  • Elige el método de acceso adecuado: Los principiantes pueden comenzar con la interfaz web para pruebas rápidas, mientras que los desarrolladores deberían usar la API de Novita AI para integración en aplicaciones y flujos de trabajo. Los usuarios avanzados pueden preferir el despliegue local para tener control total y uso sin conexión.
  • Ten en cuenta los requisitos de recursos: Si despliegas localmente, confirma que tu GPU cumple con la configuración mínima; los modelos cuantizados como INT4 o SFP8 son ideales para equilibrar rendimiento y eficiencia de memoria.
  • Optimiza para contexto y rendimiento: Gemma-3-12B-IT soporta hasta 128K tokens. Para entradas más largas, divide el contenido en segmentos estructurados o usa resúmenes para mantener resultados coherentes.
  • Aprovecha las fortalezas multimodales: Combina texto e imágenes en los prompts para explorar las capacidades de razonamiento analítico y generación descriptiva del modelo.
  • Experimenta e itera: Ajusta parámetros como temperature, top_p y max_tokens para afinar la creatividad, la factualidad y la longitud de la respuesta según tu tarea.

Preguntas frecuentes

¿Qué es Gemma-3-12B-IT?

Gemma-3-12B-IT es un modelo multimodal ajustado por instrucciones de la serie Gemma de Google, capaz de manejar entradas de texto e imágenes para generar salidas de texto naturales y conscientes del contexto.

¿En qué se diferencia Gemma-3-12B-IT de otros modelos Gemma?

Ofrece una combinación equilibrada de rendimiento y eficiencia, con 12 mil millones de parámetros optimizados para tareas de razonamiento, resumen y comprensión visual.

¿Cómo puedo empezar con Gemma-3-12B-IT?

Puedes acceder a él a través de la interfaz web oficial, la API de Novita AI o instancias de GPU, o mediante el despliegue local usando Hugging Face. Novita AI ofrece precios asequibles y un rendimiento robusto.

Novita AI es una plataforma líder en la nube de IA que proporciona a los desarrolladores APIs fáciles de usar e infraestructura de GPU asequible y confiable para construir y escalar aplicaciones de IA.