En este documento, se describe cómo se diseñó Gemini para Google Cloud en función de las capacidades, limitaciones y riesgos asociados con la IA generativa.
Capacidades y riesgos de los modelos de lenguaje grandes
Los modelos grandes de lenguaje (LLM) pueden realizar muchas tareas útiles, como las siguientes:
- Idioma de traducción.
- Resumir texto
- Generar código y escritura creativa
- Potenciar chatbots y asistentes virtuales
- Complementar los motores de búsqueda y los sistemas de recomendación
Al mismo tiempo, las capacidades técnicas en evolución de los LLM crean el potencial de aplicaciones incorrectas, usos inadecuados y consecuencias no deseadas o imprevistas.
Los LLM pueden generar resultados que no se esperan, incluido un texto que sea ofensivo, insensible o factible. Debido a que los LLM son increíblemente versátiles, puede ser difícil predecir exactamente qué tipos de resultados no deseados o imprevistos podrían producir.
Debido a estos riesgos y complejidades, Gemini para Google Cloud se diseñó teniendo en cuenta los principios de la IA de Google. Sin embargo, es importante que los usuarios comprendan algunas de las limitaciones de Gemini para que Google Cloud funcione de forma segura y responsable.
Limitaciones de Gemini para Google Cloud
Algunas de las limitaciones que podrías encontrar cuando usas Gemini para Google Cloud incluyen (sin limitaciones) las siguientes:
Casos extremos. Los casos extremos se refieren a situaciones inusuales, excepcionales o excepcionales que no están bien representadas en los datos de entrenamiento. Estos casos pueden generar limitaciones en el resultado de los modelos de Gemini, como un exceso de confianza, una interpretación errónea del contexto o resultados inapropiados.
Modela alucinaciones, fundamentación y facticidad. Es posible que los modelos de Gemini no tengan fundamentos ni factibilidad en el conocimiento del mundo real, las propiedades físicas o la comprensión precisa. Esta limitación puede generar alucinaciones del modelo, en las que Gemini para Google Cloud podría generar resultados que suenan posibles, pero que son incorrectos, irrelevantes, inapropiados o no tienen sentido. Las alucinaciones también pueden incluir la fabricación de vínculos a páginas web que no existen y nunca existieron. Para obtener más información, consulta Escribe mejores instrucciones para Gemini para Google Cloud.
Calidad y ajuste de los datos. La calidad, precisión y sesgo de los datos de la instrucción que se ingresa en los productos de Gemini para Google Cloud pueden tener un impacto significativo en su rendimiento. Si los usuarios ingresan instrucciones incorrectas o inexactas, Gemini para Google Cloud podría mostrar respuestas falsas o deficientes.
Amplificación del sesgo: Los modelos de lenguaje pueden amplificar de forma involuntaria el sesgo existente en los datos de entrenamiento, lo que genera resultados que podrían reforzar aún más los prejuicios sociales y el tratamiento desigual de ciertos grupos.
Calidad del idioma. Si bien Gemini para Google Cloud ofrece capacidades multilingües impresionantes en las comparativas con las que evaluamos, la mayoría de nuestras comparativas (incluidas todas las evaluaciones de equidad) están en inglés americano.
Los modelos de lenguaje pueden proporcionar una calidad de servicio incoherente a diferentes usuarios. Por ejemplo, es posible que la generación de texto no sea tan eficaz para algunos dialectos o variedades de idioma porque están subrepresentados en los datos de entrenamiento. El rendimiento puede ser peor para los idiomas que no son inglés o los variedades de idioma inglés con menos representación.
Parámetros de referencia y subgrupos de equidad. Los análisis de equidad de Google Research de los modelos de Gemini no proporcionan una cuenta exhaustiva de los diversos riesgos potenciales. Por ejemplo, nos enfocamos en los sesgos de género, raza, etnia y religión, pero realizamos el análisis solo en los datos de inglés estadounidense y las salidas de modelos.
Experiencia limitada en el dominio. Los modelos de Gemini se entrenaron con la tecnología de Google Cloud, pero es posible que no tengan la profundidad de conocimiento necesaria para proporcionar respuestas precisas y detalladas sobre temas altamente especializados o técnicos, lo que lleva a información superficial o incorrecta.
Cuando usas el panel Gemini en la consola de Google Cloud, Gemini no reconoce el contexto de tu entorno específico, por lo que no puede responder preguntas como "¿Cuándo fue la última vez que creé una VM?".
En algunos casos, Gemini para Google Cloud envía un segmento específico de tu contexto al modelo para recibir una respuesta específica del contexto, por ejemplo, cuando haces clic en el botón Sugerencias de solución de problemas en la página del servicio de Error Reporting.
Filtrado de seguridad y toxicidad de Gemini
Las instrucciones y respuestas de Gemini para Google Cloud se comparan con una lista exhaustiva de atributos de seguridad según corresponda a cada caso de uso. El objetivo de estos atributos de seguridad es filtrar el contenido que incumple nuestra Política de Uso Aceptable. Si un resultado se considera dañino, se bloqueará la respuesta.
¿Qué sigue?
- Obtén más información sobre cómo Gemini cita fuentes cuando te ayuda a generar código.