Descripción general
Las consultas federadas funcionan bien cuando los orígenes pueden hacer su parte del trabajo, y mal cuando no pueden. AceMQ evalúa los sistemas de origen candidatos, los patrones de consulta a los que se enfrentarán y el modelo de seguridad tras el que se encuentran, e informa de dónde se sostendrá la federación y dónde no.
Reto
Las propuestas de federación suelen dar por hecho que todos los orígenes son igual de accesibles. En la práctica, puede que una base de datos operacional no tolere la carga de escaneos analíticos, que un origen vinculado al mainframe no tenga ningún conector utilizable, que un clúster de Hive con Kerberos exija una propagación de identidad que el equipo de seguridad no ha aprobado o que ni siquiera existan rutas de red entre segmentos. Descubrirlo después de licenciar la plataforma sale caro.
Entorno
Entornos mixtos on-premise y en la nube con bases de datos relacionales, lagos sobre Hive o almacenamiento de objetos y sistemas de data warehouse en dominios de seguridad separados.
Enfoque
AceMQ perfila cada origen candidato según la madurez de su conector, su capacidad de pushdown y su tolerancia a la carga analítica, y después proyecta sobre ellos los patrones de consulta previstos. La viabilidad de seguridad y de red se evalúa junto con el rendimiento, porque la propagación de identidad y la segmentación son las restricciones que con más frecuencia frenan un despliegue. El resultado es un veredicto origen por origen con un plan de adopción ordenado.
Solución
- Revisión, origen por origen, de la madurez del conector y de la capacidad de pushdown frente a los patrones de consulta previstos
- Análisis de la tolerancia a la carga de los orígenes operacionales que no pueden absorber escaneos analíticos sin afectar a las cargas transaccionales
- Diseño de la propagación de identidad y de la autorización con Kerberos, LDAP, OAuth y control de acceso basado en ficheros
- Revisión de las rutas de red y de la segmentación entre el coordinator, los workers y cada dominio de origen
- Modelo de dimensionamiento del clúster derivado de la concurrencia, el spill previsto y los requisitos de memoria de los workers
- Secuencia de adopción que separa los orígenes que se federan sin problemas de los que conviene replicar primero en el lago
Resultado final
Los clientes obtienen una separación clara entre los orígenes listos para la federación y los que necesitan replicación o remediación previa, además de un diseño de dimensionamiento y seguridad que supera la revisión del comité de seguridad.