Elegir un servidor de búsqueda de texto completo independiente: ¿Sphinx o SOLR? [cerrado]

Estoy buscando un servidor de búsqueda de texto completo independiente con las siguientes propiedades:

• Debe funcionar como un servidor independiente que puede atender solicitudes de búsqueda de múltiples clientes
• Debe poder realizar una "indexación masiva" indexando el resultado de una consulta SQL: diga "SELECCIONAR ID, text_to_index FROM documentos;"
• Debe ser software libre y debe ejecutarse en Linux con MySQL como base de datos
• Debe ser rápido (descarta la búsqueda interna de texto completo de MySQL)

Las alternativas que he encontrado que tienen estas propiedades son:

• Solr (basado en Lucene)
• ElasticSearch (también basado en Lucene)
• Esfinge

Mis preguntas:

• ¿Cómo se comparan?
• ¿Me he perdido alguna alternativa?
• Sé que cada caso de uso es diferente, pero ¿hay ciertos casos en los que definitivamente no quisiera usar un paquete determinado?

He estado usando Solr con éxito durante casi 2 años, y nunca he usado Sphinx, por lo que obviamente soy parcial. Sin embargo, intentaré mantenerlo objetivo citando los documentos u otras personas. También tomaré parches para mi respuesta :-)

Similitudes:

• Tanto Solr como Sphinx satisfacen todos sus requisitos. Son rápidos y están diseñados para indexar y buscar grandes cantidades de datos de manera eficiente.
• Ambos tienen una larga lista de sitios de alto tráfico que los usan ( Solr , Sphinx )
• Ambos ofrecen soporte comercial. ( Solr , Esfinge )
• Ambos ofrecen enlaces de API de cliente para varias plataformas / idiomas ( Sphinx , Solr )
• Ambos se pueden distribuir para aumentar la velocidad y la capacidad ( Sphinx , Solr )

Aquí hay algunas diferencias:

• Solr, al ser un proyecto Apache, obviamente tiene licencia Apache2. Sphinx es GPLv2 . Esto significa que si alguna vez necesita incrustar o extender (no solo "usar") Sphinx en una aplicación comercial, tendrá que comprar una licencia comercial ( justificación )
• Solr es fácilmente integrable en aplicaciones Java.
• Solr está construido sobre Lucene, que es una tecnología probada de más de 8 años con una gran base de usuarios (esto es solo una pequeña parte). Cada vez que Lucene obtiene una nueva función o aceleración, Solr también la obtiene. Muchos de los desarrolladores que se comprometen con Solr también son usuarios de Lucene.
• Sphinx se integra más estrechamente con RDBMS, especialmente MySQL.
• Solr se puede integrar con Hadoop para crear aplicaciones distribuidas
• Solr se puede integrar con Nutch para crear rápidamente un motor de búsqueda web completo con rastreador .
• Solr lata índice formatos propietarios como Microsoft Word, PDF, etc . Sphinx no puede .
• Solr viene con un corrector ortográfico fuera de la caja .
• Solr viene con soporte facetario fuera de la caja . Hacer facetas en Sphinx requiere más trabajo .
• Sphinx no permite actualizaciones parciales de índice para datos de campo .
• En Sphinx, todos los identificadores de documentos deben ser números enteros únicos sin ceros sin signo . Solr ni siquiera requiere una clave única para muchas operaciones , y las claves únicas pueden ser enteros o cadenas.
• Solr admite el colapso de campo (actualmente solo como un parche adicional) para evitar duplicar resultados similares. Sphinx no parece proporcionar ninguna característica como esta.
• Si bien Sphinx está diseñado para recuperar solo identificadores de documentos , en Solr puede obtener documentos completos directamente con casi cualquier tipo de datos, lo que lo hace más independiente de cualquier almacén de datos externo y ahorra el viaje de ida y vuelta adicional.
• Solr, excepto cuando se usa incrustado, se ejecuta en un contenedor web Java como Tomcat o Jetty, que requieren configuración y ajuste específicos adicionales (o puede usar el Jetty incluido y simplemente iniciarlo con java -jar start.jar). Sphinx no tiene configuración adicional.

Preguntas relacionadas:

• Búsqueda de texto completo con rieles
• Comparación del motor de búsqueda de texto completo: Lucene, Sphinx, Postgresql, MySQL?

A menos que necesite ampliar la funcionalidad de búsqueda de cualquier forma patentada, Sphinx es su mejor opción.

Ventajas de la esfinge:

1. El desarrollo y la configuración son más rápidos.
2. Agregación mucho mejor (y más rápida). Esta fue la característica asesina para nosotros.
3. No XML Esto es lo que finalmente descartó a Solr para nosotros. Tuvimos que devolver conjuntos de resultados bastante grandes (piense en cientos de resultados) y luego agregarlos nosotros mismos ya que faltaba la agregación de Solr. La cantidad de tiempo para serializar hacia y desde XML simplemente mató el rendimiento. Sin embargo, para pequeños conjuntos de resultados, estaba perfectamente bien.
4. La mejor documentación que he visto en una aplicación de código abierto

Ventajas de Solr:

1. Puede ser extendido.
2. Puede golpearlo directamente desde una aplicación web, es decir, puede hacer que las búsquedas de tipo autocompletado lleguen al servidor Solr directamente a través de AJAX.

Nota: Hay muchos usuarios con la misma pregunta en mente.

Entonces, para responder al punto:

¿Cuál y por qué?

• Use Solr si tiene la intención de usarlo en su aplicación web (motor de búsqueda de sitios de ejemplo). Definitivamente resultará genial, gracias a su API. Definitivamente necesitará ese poder para una aplicación web.

• Use Sphinx si desea buscar toneladas de documentos / archivos muy rápido. También indexa muy rápido. Recomendaría no usarlo en una aplicación que incluya JSON o analizar XML para obtener los resultados de búsqueda. Úselo para búsquedas directas de dB. Funciona muy bien en MySQL.

Alternativas

Aunque estos son los gigantes, hay muchos más. Además, hay quienes los utilizan para potenciar sus marcos personalizados. Entonces, diría que realmente no te has perdido ninguno. Aunque hay una búsqueda elástica que tiene una buena base de usuarios.

He estado usando Sphinx durante casi un año y ha sido increíble. Puedo indexar 1,5 millones de documentos en aproximadamente un minuto en mi MacBook, e incluso más rápido en el servidor. También estoy usando Sphinx para limitar las búsquedas a lugares dentro de latitudes y longitudes específicas, y es muy rápido. Además, cómo se clasifican los resultados es muy modificable. Fácil de instalar y configurar, si lees uno o dos tutoriales. Casi el estado 1.0, pero sus candidatos de lanzamiento han sido sólidos como una roca.

Lucene / Solr parece ser más destacado y con años más largos en el negocio y una comunidad de usuarios mucho más fuerte. En mi humilde opinión, si puedes superar los problemas de configuración inicial, ya que algunos parecen haber enfrentado (no nosotros), entonces diría que Lucene / Solr es tu mejor opción.