Introducción
Los datos importantes de una empresa no solo se almacenan en servidores de archivos y almacenamiento en la nube, sino también en aplicaciones SaaS y bases de datos. La información de clientes en Salesforce, los datos maestros de productos en bases de datos internas, los datos de listas gestionados en archivos CSV: estos datos normalmente solo son buscables dentro de sus respectivos sistemas.
Este artículo cubre escenarios para importar datos de SaaS y bases de datos al índice de Fess, permitiendo la búsqueda transversal junto con otros documentos.
Audiencia objetivo
Quienes desean incluir información de SaaS y bases de datos en los resultados de búsqueda
Quienes desean aprender a utilizar los plugins de data store
Quienes desean construir una plataforma de búsqueda que abarque múltiples fuentes de datos
Escenario
Una organización de ventas tiene datos distribuidos en los siguientes sistemas.
El objetivo es permitir la búsqueda transversal de todos estos datos con Fess, de modo que la información necesaria para las actividades de ventas pueda encontrarse desde un único campo de búsqueda.
Integración de datos de Salesforce
Para hacer los datos de Salesforce buscables en Fess, utilice el plugin de data store de Salesforce.
Instalación del plugin
Navegue a [Sistema] > [Plugins] en el panel de administración
Instale
fess-ds-salesforce
Configuración de la conexión
La integración con Salesforce requiere configurar una Connected App.
Preparación en el lado de Salesforce
Cree una Connected App en la configuración de Salesforce
Habilite la configuración de OAuth
Obtenga la clave y el secreto del consumidor
Configuración en el lado de Fess
Navegue a [Crawler] > [Data Store] > [Crear nuevo]
Nombre del handler: Seleccione SalesforceDataStore
Configure los parámetros y scripts
Etiqueta: Establezca
salesforce
Ejemplo de configuración de parámetros
Ejemplo de configuración de script
Para auth_type, especifique oauth_password (autenticación por nombre de usuario/contraseña) o oauth_token (autenticación por token JWT Bearer). Al usar autenticación JWT, establezca la clave privada RSA en private_key.
Selección de datos objetivo
Salesforce contiene muchos objetos, pero no todos necesitan ser buscables. Concéntrese en los objetos que el equipo de ventas busca con frecuencia.
Integración con bases de datos
Para hacer los datos de bases de datos internas buscables, utilice el plugin de data store de base de datos.
Instalación del plugin
Instale el plugin fess-ds-db. Este plugin puede conectarse a diversas bases de datos (MySQL, PostgreSQL, Oracle, SQL Server, etc.) a través de JDBC.
Configuración
Navegue a [Crawler] > [Data Store] > [Crear nuevo]
Nombre del handler: Seleccione DatabaseDataStore
Configure los parámetros y scripts
Etiqueta: Establezca
database
Ejemplo de configuración de parámetros
Ejemplo de configuración de script
Los resultados de la consulta SQL especificada en sql son rastreados. En los scripts, utilice los nombres de columna SQL (o etiquetas de columna) para mapearlos a los campos del índice de Fess.
Diseño de consultas SQL
Puntos clave al diseñar la consulta SQL para el parámetro sql:
Incluya una columna
urlque sirva como destino del enlace en los resultados de búsqueda (p. ej.,CONCAT('https://.../', id) AS url)Incluya columnas que sirvan como texto buscable del cuerpo
Utilice una cláusula
WHEREpara excluir datos innecesarios (p. ej.,status = 'active')
En los scripts, utilice los nombres de columna SQL directamente para mapearlos a los campos del índice de Fess.
Integración de archivos CSV
Los datos de archivos CSV también pueden hacerse buscables.
Configuración
Utilice el plugin fess-ds-csv o la funcionalidad del data store CSV.
Navegue a [Crawler] > [Data Store] > [Crear nuevo]
Nombre del handler: Seleccione CsvDataStore
Configure los parámetros y scripts
Etiqueta: Establezca
csv-data
Ejemplo de configuración de parámetros
Ejemplo de configuración de script (use nombres de columna cuando haya una línea de encabezado)
Cuando has_header_line=true, los nombres de columna de la línea de encabezado pueden usarse en los scripts. Cuando no hay línea de encabezado, las columnas se referencian por número, como cell1, cell2, cell3. Los scripts pueden contener expresiones Groovy, incluyendo concatenación de cadenas.
Si los archivos CSV se actualizan regularmente, fije la ubicación de los archivos y configure un programa de rastreo para que los datos más recientes se reflejen automáticamente en el índice.
Búsqueda transversal
Una vez completadas todas las configuraciones de fuentes de datos, puede experimentar la búsqueda transversal.
Ejemplo de búsqueda
Al buscar «ABC Corporation», se obtienen resultados como:
Información de cuenta de Salesforce (Account)
Propuestas del servidor de archivos (PDF)
Historial de compras de productos de la base de datos
Lista de asistentes a ferias comerciales de CSV
Los usuarios pueden encontrar la información que necesitan sin tener que saber dónde está almacenada.
Filtrado por etiqueta
Cuando hay muchos resultados de búsqueda, utilice etiquetas para filtrarlos.
salesforce: Solo datos de Salesforcedatabase: Solo datos de la base de datoscsv-data: Solo datos CSVshared-files: Solo documentos del servidor de archivos
Consideraciones operativas
Frescura de los datos
Los datos de SaaS y bases de datos pueden actualizarse con frecuencia. Configure la frecuencia de rastreo adecuadamente para mantener la frescura de los resultados de búsqueda.
Seguridad de la conexión a la base de datos
Al conectarse directamente a una base de datos, preste especial atención a la seguridad.
Utilice un usuario de base de datos de solo lectura
Restrinja las conexiones a la dirección IP del servidor Fess
No otorgue permisos de acceso a tablas innecesarias
Tenga cuidado con la gestión de contraseñas
Resumen
Este artículo cubrió escenarios para hacer los datos de Salesforce, bases de datos y archivos CSV buscables con Fess.
Integración de datos CRM mediante el plugin de data store de Salesforce
Integración de BD interna mediante el plugin de data store de base de datos
Integración de datos de listas mediante el data store CSV
Mapeo de campos y diseño de consultas SQL
Aprovechamiento de etiquetas en la búsqueda transversal
Al eliminar los silos de datos, se puede lograr un entorno donde todas las fuentes de información son buscables desde una única plataforma. Con esto concluye la sección de Soluciones Prácticas. A partir de la próxima parte, cubriremos la sección de Arquitectura y Escalabilidad, comenzando con el diseño multitenant.