Ir al contenido

Recopilación e indexación

Compruebe si los documentos cargados están preparados para la búsqueda con IA. Los datos creados aquí se utilizan en RAG para recuperar documentos pertinentes que la IA consulta al elaborar la respuesta.

Antes de comenzar

  • Permiso necesario: administrador de Workspace
  • Debe haber un entorno de IA y un modelo de embeddings disponibles.
  • Para la búsqueda vectorial, complete la conexión y el modelo en Knowledge Storage.

Abrir Recopilación e indexación

  1. Acceda a la página de administración.
  2. Seleccione Knowledge Services.
  3. Seleccione Ingestion & Indexing.

Pantalla de recopilación e indexación


Resumen de indexación

CampoDescripción
Pending refreshArchivos nuevos o modificados pendientes de reflejarse en la búsqueda
Pending deleteDatos de búsqueda de archivos eliminados pendientes de limpieza
Pending vector deletionVectores antiguos pendientes de borrarse tras eliminar un archivo o cambiar el almacén
Pending embedTexto ya extraído que espera convertirse en datos de búsqueda
Vectors in databaseVectores de este espacio en la DB elegida. local embedding rows muestra las filas por modelo de knowledge.db para la versión actual del documento y puede ser distinto.
SQLite usageTamaño de la base de datos de registros; no incluye la base vectorial
Indexing modeAlcance de los archivos procesados
Embedding providerModelo utilizado, por ejemplo Ollama bge-m3:latest / 1024d
Active included rootsRutas indexadas
Team checkpointÚltima comprobación de carpetas de equipo
Client checkpointÚltima comprobación de carpetas personales
Last refreshedÚltima actualización del estado

Deje activado Auto refresh o seleccione Refresh para actualizar manualmente.

Mientras se consulta la base vectorial, o si falla, Vectors in database muestra -. Si el servidor devuelve temporalmente una instantánea anterior del mismo espacio, la pantalla conserva el valor más reciente y muestra una advertencia. Al cambiar entre Teamspace y Clientspace borra inmediatamente el valor anterior y muestra - hasta completar la consulta.

Comprobar la configuración antes de iniciar

ConfiguraciónComprobaciónDestino
AI runtimeSeleccione Ollama, LM Studio u otro entorno y compruebe la conexión.Configurar entornos de IA
Vision model (VL)Seleccione el modelo que leerá PDF e imágenes.Prioridad de modelos de visión
AI vector databaseElija Local (SQLite), Milvus, Qdrant u otra opción y configure la conexión.Configurar la base vectorial
Embedding modelElija el modelo que convierte documentos en vectores, por ejemplo bge-m3.Configurar el modelo

Aquí solo se eligen los modelos. Descargue primero los modelos de visión y embeddings en Modelos de IA.

La tarjeta AI vector database comprueba también la conexión real. Muestra Connection error · check settings si no puede conectarse, Collection mismatch · review needed si las dimensiones o la distancia no coinciden y Collection not found · create it first si Milvus no tiene colección. Consulte el error al pasar el cursor; para Milvus, abra la configuración y siga Crear previamente una colección. En Qdrant, que la colección no exista aún es normal y se muestra Ready · collection is created on first indexing. Consulte Solución de problemas del almacén.

Reglas de recopilación y procesamiento

Determine cuándo se crean los datos y qué carpetas se incluyen.

Activar la indexación de conocimiento

Activa o desactiva toda la función.

Configurar el modo de indexación

CampoDescripciónValor predeterminado
Indexing modeAlcance y métodoFull indexing
Wait time (minutes)Tiempo desde que se detecta un cambio hasta que comienza20
Max concurrent workersCantidad máxima de trabajos a la vez1
Enable worker executionSi se desactiva, detecta cambios pero no crea datos de búsqueda.Enabled
Auto pause on high loadPausa cuando el servidor está ocupado y reanuda cuando se estabiliza.Enabled
Boost ModeEmpieza a indexar 5 segundos después de un cambio y adelanta los trabajos en cola. No acelera el procesamiento y se desactiva automáticamente cuando termina el trabajo pendiente.Disabled
Allowed time windowsPeriodo de indexación; vacío significa en cualquier momento, por ejemplo 01:00-06:00.No restriction

Raíces incluidas

Introduzca las rutas que se indexarán. Si queda vacío, se incluyen todas.

/@team/docs
/@client/projects

Configurar el modelo de embeddings

ProveedorDescripción
OllamaModelo local de Ollama, por ejemplo bge-m3:latest
ONNX Local CPUModelo ONNX local ejecutado en la CPU
ONNX Local GPUModelo ONNX local con aceleración GPU
Remote APIModelo utilizado mediante una API externa

Un proveedor sin modelos instalados aparece como No models available.

CampoDescripción
Vector dimensionsTamaño de los datos de búsqueda, definido automáticamente según el modelo, por ejemplo 1024.
PDF/Image extraction strategyMétodo de extracción. VL first, OCR fallback significa utilizar primero visión y después reconocimiento de texto.

Patrones incluidos de PDF e imágenes

*.pdf, *.png, image/**/*

Patrones excluidos de PDF e imágenes

Si queda vacío, se procesan todos los archivos incluidos.

thumbs.db, *.gif, cache/**

Progreso por espacio de almacenamiento

Consulte cuánto espera cada Teamspace o Clientspace para enviarse a la IA. Busque por espacio y usuario y ordene por actualizaciones pendientes.

CampoDescripción
SpaceTeamspace o Clientspace
UserUsuario del Clientspace
Pending refreshArchivos nuevos o modificados pendientes
Pending deleteDatos eliminados pendientes de limpieza
Pending embedTexto pendiente de convertirse en datos de búsqueda
EmbeddingsTotal completado

Estado de los datos para IA

Muestra cuántos datos de búsqueda se han creado por modelo; no entrena de nuevo el modelo con los documentos originales.

CampoDescripción
ProviderProveedor usado, por ejemplo ollama
ModelModelo utilizado, por ejemplo bge-m3:latest
CountEmbeddings creados con el modelo

Ordene por cantidad para comparar el volumen de datos de cada modelo.