Nota:
El acceso a esta página requiere autorización. Puede intentar iniciar sesión o cambiar directorios.
El acceso a esta página requiere autorización. Puede intentar cambiar los directorios.
En este artículo se muestra cómo usar el resumen de texto con Video Indexer de Azure AI. En este ejemplo se usan implementaciones de modelos de Azure OpenAI.
Requisitos previos
Revise la información general sobre el resumen de texto y los siguientes requisitos previos.
Nube
Una cuenta de pago de Video Indexer de Azure AI conectada a una cuenta de Azure OpenAI.
Acceso concedido a Azure OpenAI en la suscripción de Azure deseada. Actualmente, la aplicación concede acceso a este servicio. Para más información sobre cómo solicitar acceso a Azure OpenAI, consulte Acceso limitado para el servicio de Azure OpenAI.
Una implementación de Azure OpenAI de GPT-35-Turbo, GPT-4, GPT-4o o GPT-4O-mini. Para beneficiarse de los resúmenes basados en fotogramas clave, debe seleccionar un modelo de Azure OpenAI que acepte entradas visuales. Para obtener más información, consulte Modelos de servicio de OpenAI de Azure.
El filtro Escudos de indicaciones para ataques directos (jailbreak) debe agregarse a la implementación. Obtenga más información aquí: Uso de filtros de contenido (versión preliminar) con el servicio Azure OpenAI.
Se recomienda configurar filtros de contenido dañinos para categorías como "Violencia", "Odio", "Sexual" y "Auto-daño". Aunque estos filtros no son obligatorios, debe establecerlos en "Medio" o "Bajo" para filtrar el contenido de al menos el nivel medio de daño. Esta configuración garantiza que el contenido con una clasificación de daños de medio o superior está bloqueado. Para aumentar la seguridad, puede optar por una configuración más estricta. Una vez configurado, guarde la configuración del filtro de contenido.
Vídeo cargado en la biblioteca de Video Indexer de Azure AI.
Nota:
Video Indexer de Azure AI no puede conectarse a los modelos ajustados.
Dispositivos de borde
Video Indexer de Azure AI habilitado por Arc permite usar Video Indexer de Azure AI en dispositivos perimetrales. A continuación se muestran los requisitos técnicos para este caso de uso:
- Video Indexer habilitado por Arc con el número de versión 1.1.23 o superior.
- Requisitos de hardware: GPU o CPU Intel. No se recomienda ejecutar en CPU debido a una velocidad lenta. Se recomienda usar GPU Nvidia V100 o posteriores. Si hay varios nodos de GPU, puede agregar un selector de nodos para seleccionar el nodo deseado.
- Usar fotogramas clave como parte del resumen requiere Nvidia A100 o superior.
- El resumen de vídeo textual en el perímetro solo usa el modelo Phi3.5. Para obtener más información de hardware, consulte la información oficial de la versión Phi 3.5.
Abrir páginas web en el explorador
Es más fácil seguir estas instrucciones si ya tiene abiertas las páginas web necesarias. Copie y pegue los parámetros siguientes en su editor de texto favorito. Esta es una lista para empezar:
- ID de cuenta VI
- id. de archivo de vídeo:
- nombre de implementación:
- token de acceso:
-
Abra Azure Portal en una pestaña o ventana e inicie sesión.
- Vaya a la página de la cuenta de Azure AI Video Indexer para el ID de cuenta.
- Vaya a la página de la cuenta de Azure OpenAI.
- En el menú, seleccione Implementaciones de modelos y, a continuación, seleccione Administrar implementaciones. Se abre Azure OpenAI Studio. Copie el nombre de implementación que desea usar.
- Abra el portal web de Azure AI Video Indexer en otra pestaña o ventana e inicie sesión.
- Vaya a la página de la biblioteca, elija un vídeo y haga clic con el botón derecho en él para el identificador de archivo de vídeo.
- Abra Azure AI Video Indexer API en otra pestaña o ventana e inicie sesión.
Generar un resumen de texto con o sin fotogramas clave
Puede usar el portal web de Video Indexer de Azure AI para resumir el texto.
- Si aún no tiene el portal web abierto, abra el portal web de Azure AI Video Indexer.
- Cargue un archivo y espere a que se indexe.
- Seleccione el vídeo para ir a la página multimedia.
- Si desea usar fotogramas clave para generar el resumen, seleccione la opción Incluir información de fotograma clave visual para obtener una mejor calidad de resumen.
- Seleccione Generar resumen. Se genera el resumen textual.
Nota:
Si no ve el botón Generar resumen, es posible que esté usando una cuenta de prueba. Para usar esta característica, cree una cuenta estándar .
Personalizaciones de resumen
Una vez generado el resumen, puede realizar ajustes en él personalizando el estilo de resumen o cambiando la implementación del modelo.
Personalización del estilo de resumen
También puede personalizar el resumen seleccionando el icono Personalizar resumen . Puede elegir entre longitudes de resumen corto, medio o largo , y puede elegir Neutral, Casual o Formal como estilo de resumen. Una vez que elija las opciones, seleccione Generar de nuevo.
Cambio de la implementación del modelo
- Seleccione el icono Personalizar resumen .
- Seleccione la implementación de modelos que desea usar en la lista desplegable Implementación de modelos.
- Seleccione Generar de nuevo.
Nota:
Recuerde que la implementación del modelo es una combinación del modelo y los filtros. Además, cada vez que personalice el resumen de texto, representa una solicitud PUT de API.
Solución de problemas
Antes de buscar soluciones específicas, asegúrese de crear los recursos en la sección Requisitos previos del documento.
No aparece "Generar resumen"
Es posible que la cuenta de Azure OpenAI esté conectada a la cuenta de Azure AI Video Indexer incorrectamente.
No se pudo generar el resumen
- Debe agregar filtros de contenido a la implementación para evitar mostrar contenido perjudicial. Vuelva a Azure OpenAI Studio y agregue filtros a la implementación.
- Ha creado un filtro de contenido permisivo para el contenido que tiene contenido confidencial o dañino. El filtro de contenido debe ser al menos medio. Si estableces el filtro de contenido en Medio y el contenido dañino permanece en el vídeo, se activa el filtro. En este caso, no hay ninguna solución.
- No solicitó una transcripción o es posible que no haya suficiente información generada durante el proceso de indexación.
- Es posible que esté usando un valor preestablecido avanzado.
- Es posible que el vídeo no tenga suficiente audio en él para crear una transformación.
No se puede usar una implementación de modelo o falta la implementación
- No ha creado una implementación.
- Alguien cambió o eliminó el modelo implementado.
Limitaciones
Puede haber demasiadas solicitudes enviadas a VI. Espere unos minutos y vuelva a intentarlo.
Recibe el error "no se encontró el filtro"
Si recibe un error porque no se encontró el filtro, obtendrá un mensaje detallado que describe lo que falta. El error podría parecerse al ejemplo siguiente, pero podría tener detalles sobre otras cosas que faltan:
ErrorType":"SUMMARY_FILTERS_NOT_FOUND","Message":"Couldn't generate a summary because the model needs to be set with the right content filters to avoid showing harmful content. Input filter 'Jailbreak' must be enabled with action set to 'Annotate and block'. Trace id: '00000000-0000-0000-0000-000000000000'.
Nota:
El filtro de jailbreak solo es necesario cuando se utiliza un resumen basado en fotogramas clave o un resumen normal, a partir del 1 de noviembre de 2024.
Para resolver el problema del jailbreak:
- Seleccione Ir a Azure Open AI Studio.
- Seleccione Implementaciones.
- Seleccione la implementación con la que está trabajando.
- Seleccione Editar.
- Configure los filtros para que tengan al menos nivel Medio para cada categoría.
- Aplique escudos de protección para ataques de jailbreak.
- Seleccione Crear filtro.
Otras consideraciones
Se recomienda crear las cuentas de Azure AI Video Indexer y Azure OpenAI en la misma región o podría experimentar problemas de rendimiento.