¿Qué tan relevantes son los puntajes de Brainbench al evaluar candidatos? [cerrado]

18

He visto muchas compañías que utilizan servicios de certificación como Brainbench cuando evalúan candidatos. La mayoría de las veces lo usan como pantalla secundaria antes de la entrevista o como validación para elegir entre candidatos.

¿Cuál es su experiencia con los puntajes de Brainbench? ¿Intentó las pruebas usted mismo y, si es así, cree que la puntuación es lo suficientemente significativa como para ser utilizada como parte de un proceso de contratación?


Decisión difícil.

El consenso parece ser que los certificados BB no son muy buenos como certificación. El argumento más importante fue el hecho de que algunas de las preguntas son demasiado precisas para formar una buena evaluación. Esta opinión probablemente se puede moderar de alguna manera, pero aún así, sería irresponsable mantener el futuro de alguien únicamente con los resultados de esta evaluación.

Dicho esto, sigo pensando que es posible usarlos adecuadamente para obtener un conocimiento objetivo adicional sobre el nivel de experiencia de un candidato, siempre que la prueba se realice en un entorno controlado que garantice que todos lo tomen en pie de igualdad.

Por lo tanto, fui con la respuesta que mejor reflejaba este punto de vista teniendo en cuenta que todavía es una pregunta de opción múltiple de 50 horas para evaluar las habilidades y el conocimiento que llevan años adquirir. Para ser tomado con un grano de sal!

En resumen, las pruebas tienen valor pero si valen o no el dinero es otro debate.

Gracias a todos por vuestro tiempo.

Newtopian
fuente
2
Relacionado: ¿Merecen la pena las certificaciones? . He restringido esta pregunta para que sea específicamente sobre los puntajes de Brainbench para evitar que sea un duplicado de esa pregunta y porque es lo que todos respondieron.
Con respecto a cambiar esto a Community Wiki: no usamos community wiki para ese propósito. Para obtener más información sobre para qué se utiliza, consulte The Future of Community Wiki .
Si no está en condiciones de evaluar a alguien como un compañero, le recomiendo contratar no a un reclutador de tecnología sino a un cazador de cabezas especializado honesto con cierta experiencia técnica real. Si certificados como este fueran buenos, cualquiera con un título universitario relevante sería un excelente programador.
Erik Reppen
Por lo que vale, una vez tomé una prueba BB para Cold Fusion, nunca antes había oído hablar de ella, y obtuve un puntaje lo suficientemente alto como para obtener la certificación. Mi amigo que estaba considerando usarlo para evaluar candidatos decidió que no era muy efectivo. En un trabajo posterior, me quedé atrapado en un proyecto basado en la FQ porque después de haberlo visto antes mientras tomaba esa prueba, era la persona más calificada en la empresa ...
Bobson

Respuestas:

12

Creo que los certificados de BB tienen sentido como parte de un proceso de contratación, siempre que pueda garantizar que el tipo que los pasa es el que está entrevistando (en BB es fácil arruinar la identidad y hacer que alguien pase la prueba por usted) .

  • Mi primer encuentro con BB fue en una entrevista cuando me hicieron la prueba de conceptos OO . Como estaba en su oficina, y desde que se estableció la sesión de BB en su cuenta, este procedimiento no dejó ninguna posibilidad de engañar a los resultados del examen. Según mi experiencia adicional con BB, creo que esta es la única forma confiable de certificar a un candidato.
     
    No recibí mis resultados en ese entonces porque se entregaron a los tipos que me entrevistaron, pero de todos modos las preguntas del examen y el enfoque general de BB me dieron la curiosidad de intentarlo más ...

Probé todos los exámenes gratuitos que me interesaron, 5 o 6 o tal vez 7 (fue hace unos años, no recuerdo cuántos): Java SE y EE, RDBMS, escritura comercial, mecanografía.

  • Los puntajes que recibí se sintieron bastante relevantes: obtuve una maestría en áreas donde sentí que mi conocimiento era sólido, puntajes promedio donde no era tan bueno y no pude certificar en el examen para escribir, lo que ha demostrado que no soy un profesional. Además, el puntaje de Java SE en BB se sintió bastante consistente con uno que obtuve en SCJP, que a su vez reflejaba con bastante precisión mis fortalezas y debilidades.

Mi impresión general de BB es que, como entrevistador, me sentiría cómodo usando estas certificaciones como parte de la selección de candidatos, siempre que se hayan tomado de una manera que garantice que la identidad del candidato no se haya estropeado.

mosquito
fuente
Gracias buena respuesta! sin embargo, de acuerdo con la supervisión, probablemente la mejor manera de usarlos sería hacer que los candidatos tomen el examen como parte de la entrevista con la cuenta de la compañía y les den a todos los candidatos los mismos recursos (libros, acceso a internet, etc.). Personalmente, creo que estaría aún más interesado en ver si los candidatos buscan referencias y cómo lo hacen, en lugar de la puntuación real de la prueba.
Newtopian
@Newtopian Creo que su punto sobre dar acceso a los candidatos a libros / recursos en línea está muy bien entendido . Los he estado usando en BB y me gustó mucho Creo firmemente que una opción para verificar rápidamente las referencias hace que la prueba sea más realista, después de todo, así es exactamente como hago las cosas cuando estoy en el trabajo
mosquito
22

Hice pruebas de BrainBench para C # y Java hace algunos años y pensé que eran completamente inútiles. Obtuve un buen puntaje, pero las preguntas se referían principalmente a los detalles de la sintaxis y la biblioteca de la clase. Los programadores incompetentes pueden memorizar esta información y pasar estas pruebas. Los programadores competentes aprenden las características del lenguaje (por ejemplo, C # tiene delegados, Java tiene clases anónimas) y los contenidos generales de la biblioteca estándar, y buscan los detalles según sea necesario. En mi opinión, estas pruebas miden exactamente lo incorrecto. Si desea contratar a un programador, necesita verlos programar.

Kevin Cline
fuente
Un buen punto, mirar los códigos es probablemente la mejor manera de evaluar las habilidades. Sin embargo, pocos tendrán un código que mostrar, ya que la mayoría del trabajo realizado anteriormente era propiedad del empleador anterior y pocos entrevistadores se tomarán el tiempo para leerlo si está disponible.
Newtopian
3
@Newtopian: no necesito ver cientos de líneas de código. Puedo aprender todo lo que necesito saber viendo un programa de candidatos en una pizarra durante cinco minutos. Por lo general, todo lo que tengo que hacer es preguntar "¿qué le gusta y qué no le gusta del <idioma favorito del candidato> ?" Los buenos programadores están llenos de opiniones bien razonadas. Los programadores mediocres no tienen nada que decir.
Kevin Cline
2
Además, las preguntas muchas veces no tienen la respuesta correcta como una opción.
9

Honestamente, de las pocas personas que entrevisté con las "calificaciones" de Brainbench, diría que la prueba de opción múltiple de 20 minutos que construí yo mismo, en eSkills, fue un filtro más efectivo. Y eso no fue un gran filtro, simplemente me salvó de entrevistar por teléfono a personas que iban a avergonzarse.

La única forma en que uso Brainbench como filtro es filtrar los CV donde las personas intentan pasarlo como una calificación profesional como un MCPD. Eso me parece deshonesto.

pdr
fuente
¿Los probaste tú mismo? Al principio tuve un sentimiento similar hacia eso. Sin embargo, después de probar algunas de las pruebas por mí mismo, descubrí que su evaluación era relativamente precisa sobre cómo me calificaría. No es que la autoevaluación sea necesariamente más precisa, sino ir tan lejos como filtrar candidatos solo por poner esa referencia ... Me encantaría saber más si pudiera discutir un poco el caso.
Newtopian
8

No soy un gran admirador de estas pruebas porque son más un concurso de trivia que una prueba real de capacidad de programación. Algunas personas simplemente no se desempeñan bien en estas pruebas por varias razones no relacionadas con su capacidad de programación. Tiendo a tener problemas con ellos por mis problemas de visión y mi proceso típico de pensamiento de programación.

También creo que están predispuestos hacia los graduados universitarios recientes que tendrán en mente las curiosidades que aprendieron en clase no hace mucho tiempo y que están acostumbrados a tomar exámenes regularmente que alguien que se graduó hace más de 10 años o que es en gran medida autodidacta

Consideraría usar tal prueba para un puesto de desarrollador de nivel junior, pero no necesariamente la usaría como la única determinación de quién recibe una entrevista o no. Probablemente no lo usaría para un puesto de desarrollador de nivel medio o superior. Para estos candidatos, una entrevista telefónica o cara a cara donde se les da una oportunidad abierta para discutir sus proyectos anteriores y el conocimiento de programación son más productivos. Creo que preguntarle a dicho programador por qué eligió X sobre Y al desarrollar un proyecto es más revelador que su capacidad de regurgitar 40 preguntas de opción múltiple sobre programación que pueden no ser relevantes para el trabajo que necesita que hagan.

jfrankcarr
fuente
Es cierto que algunas de estas preguntas, especialmente para las pruebas sobre marcos, tendrán preguntas de trivia adjuntas. Cuanto más especializada sea la prueba, más posibilidades hay de obtener casos extraños en las esquinas que pocos han escuchado.
Newtopian
5

Brainbench es una buena manera para que una persona no técnica (por ejemplo, reclutador) proporcione una primera pantalla antes de colocar un currículum en el escritorio de un gerente técnico. Sin embargo, no deberían sustituir a una verdadera pantalla tecnológica.

Además, he tomado algunos certificados de brainbench y descubrí que muchas de las preguntas están demasiado enredadas en las minucias del marco. No obstante, aprobé pero no creo que las preguntas formuladas realmente califiquen a un candidato como competente en el desarrollo.

Michael Brown
fuente
1
Buen punto, RRHH es a menudo un muro de palabras de moda que uno debe atravesar. Integrar una forma más objetiva de recopilar información podría ayudar a cerrar la brecha. Sin embargo, también veo que esto se está convirtiendo en otro muro presentado por RR. HH. Si también se hacen cargo de esta parte de la entrevista. Espada de doble filo.
Newtopian
3

Tomé las pruebas Brainbench Java y XML en 2003. Pensé que eran un poco tontas. Pero en muchas entrevistas de trabajo, las pruebas caseras de 20 preguntas de opción múltiple son aún peores. Están invariablemente compuestos y editados en Word, y la "característica" de capitalización automática convierte "string" en "String" y "boolean" en "Boolean". Este último realmente puede hacer una diferencia en el código Java, y convertir "int" en "Int" puede representar el código C donde se supone que debe elegir el error en un laberinto confuso.

Como entrevistado, tomo esas pruebas con un grano de sal. Cuanto más tonto sea el examen, menos quiero trabajar allí. Entonces: los probadores tengan cuidado. Usted está dando información y, a menos que haya formateado extraordinariamente cuidadosamente, su candidato puede descubrir algo indeseable sobre su empresa.

Bruce Ediger
fuente
1

Tuve que tomar una no hace mucho y creo que este tipo de prueba es más para descartar candidatos que para ver si quieres contratarlos o no .

Tenía 30 preguntas, 3 minutos para cada una y la prueba alentó el uso de referencias, como libros o Internet. La mayoría de las preguntas eran demasiado específicas y no habría podido responderlas yo solo, pero con el uso de referencias, lo hice muy bien. La prueba fue excelente para decidir si un candidato es excelente para investigar rápidamente lo que necesita para responder una pregunta de opción múltiple, pero nada más.

Definitivamente llamaría a alguien para una entrevista si le fue bien en la prueba. ¿Rechazaría a alguien que lo hizo realmente mal (por debajo del 60%?) ¡Probablemente! ¿Rechazaría a alguien si fuera mediocre? (70-85%) Probablemente no. Así que supongo que tiene algo de peso en el proceso de toma de decisiones, pero no mucho.

c_maker
fuente
0

También tomé un examen de Brainbench con respecto a J2EE. Como primera impresión, me pareció que no tenía mucha relación con la programación real. Esto es como saber todo sobre J2EE / Java que en realidad es imposible y no se puede reclamar en la vida.
Según mi experiencia, un desarrollador simplemente toca un aspecto / lado de cualquier lenguaje de programación, como por ejemplo, he trabajado principalmente en aplicaciones que tienen un front-end frente a los formularios HTML y, utilizando algunos ejemplos de marco Struts / Hibernate, manipulo esa información de / a alguna base de datos.
Supongo que hasta ahora he tocado solo una dimensión / aspecto / esquina de Java y no creo que alguna vez abarcaría todas las características de la creciente Java.
El punto es que los conceptos centrales con respecto a la semántica del lenguaje y en particular las construcciones de OOP deben ser muy claros para cualquier desarrollador experimentado.
Si él / ella sabe qué implementar dónde o qué se necesita dónde, entonces puede ser un tipo exitoso. Nadie tiene la memoria para cubrir todo lo relacionado con cualquier idioma. De hecho, solo necesita fortalecer sus conceptos básicos. Una vez que están claros, el resto es trabajo de investigación y desarrollo (RnD). Todo se reduce al hecho, cuánto esfuerzo contribuyes a la resolución de problemas usando un conjunto inicial de herramientas y luego trabajando gradualmente hacia las más sofisticadas.

Faisal Mq
fuente
0

He trabajado en los campos de Tecnología de la Información durante más de 20 años. Empecé cuando no había "ninguna" certificación de TI. De hecho, tengo algunas certificaciones de BrainBench, así como otras certificaciones "Neutral para vendedores", y las uso en mi currículum o en sitios web. Mi experiencia en tecnología de la información abarca no solo la seguridad, las redes y el hardware y el software, sino también la programación. Mi experiencia en el mundo real es lo que las empresas buscan primero, seguido de las certificaciones que tengo. Las pruebas son comparables con otros proveedores de TI y vale la pena realizarlas, sin importar cuál sea su conjunto de habilidades actual.

Feliz tom
fuente
0

Trabajando como líder técnico en la NASA en la Estación Espacial, se hizo necesario para mí obtener la certificación en Seguridad de TI, así como Solaris Sys Admin. La NASA requirió una certificación Brainbench en ese momento, y pagó los tres certificados que debía tomar. Esto en sí mismo dice mucho sobre la opinión que la NASA tiene sobre Brainbench. Desde entonces, he perdido mis certificados después de 3 años, y ahora la NASA no paga las certificaciones, e incluso mi empleador no las pagará, así que dado que tengo que pagarlas de su bolsillo, considero que sus precios son razonables. Tenga en cuenta que la mayoría de los sitios de certificación no cumplen con los criterios de reembolso de los empleadores, ya que no emiten CEU y no tienen la acreditación tradicional. Mi empleador pagará por la preparación del examen, pero no por el examen en sí. La suscripción anual en Brainbench es una gran oferta, si necesita múltiples certificaciones ($ 199 normalmente, pero lo conseguí a la venta por $ 99.50). Sus costos únicos de certificación son de $ 49. En comparación, si desea un MSCE, por ejemplo, le costará $ 72 si usa el atuendo recomendado por Microsoft. Brainbench requiere un extra de $ 15 para un buen certificado impreso, por lo que el precio total normalmente es de aproximadamente $ 65 con certificado. La suscripción le permite tomar tantos certificados en un año como desee, pero aún tiene que pagar los $ 15 por el certificado. Las pruebas generalmente son difíciles y ciertamente demuestran la competencia del examinado. Brainbench requiere un extra de $ 15 para un buen certificado impreso, por lo que el precio total normalmente es de aproximadamente $ 65 con certificado. La suscripción le permite tomar tantos certificados en un año como desee, pero aún tiene que pagar los $ 15 por el certificado. Las pruebas generalmente son difíciles y ciertamente demuestran la competencia del examinado. Brainbench requiere un extra de $ 15 para un buen certificado impreso, por lo que el precio total normalmente es de aproximadamente $ 65 con certificado. La suscripción le permite tomar tantos certificados en un año como desee, pero aún tiene que pagar los $ 15 por el certificado. Las pruebas generalmente son difíciles y ciertamente demuestran la competencia del examinado.

Chip
fuente