Recientemente, en algunos de los eventos que he atendido personalmente, algunas personas se han acercado con preguntas curiosas, por ejemplo:

¿Qué tan bueno es su producto según Gartner?

“Necesito saber según Gartner dónde está el producto que tenemos”

 

Mi respuesta ha intentado ser lo más precisa posible en el sentido de aclarar que Gartner no evalúa qué tan bueno es un producto, o qué tanto puede beneficiar a alguien, sin embargo, parece que me enfrento a una idea mal fundamentada y extraordinariamente difundida,  a la que podría comparar con aquella que señala que todos los gatos toman leche. Sólo si has tenido gato sabes que puede que no le guste, o que incluso le puede hacer mucho daño.

En el mismo sitio web de Gartner es posible encontrar la siguiente afirmación:

 “Use a Gartner Magic Quadrant as a first step to understanding the technology providers you might consider for a specific investment opportunity.”[1]

 

Esto me resulta bastante compatible con la opinión de Tony Byrne de Real Story Group, “Things that matter to investors and other vendors, but not so much to buyers.”[2] en el sentido de afirmar que el análisis involucra elementos que pueden resultar de utilidad para un posible inversionista o competidor, pero no tanto para alguien que desea hacerse una idea de la calidad o pertinencia de los productos del fabricante evaluado.

Al leer el artículo anterior quedan claras algunas de las apreciaciones del análisis estilo Gartner en comparación con un análisis de producto. Claramente la afirmación “has a presence and a reputation for good engineering” no dice mucho acerca de las características técnicas de alguna tecnología o producto, por otra parte algo como “Flexible, open Java architecture“ podría orientar de mejor manera a alguien que evalúa una determinada solución. Pero por qué razón alguien que requiere, por ejemplo, un producto con arquitectura Java abierta y flexible sigue remitiéndose a Gartner cuándo claramente la respuesta que busca no es la que el análisis pretende ofrecer? Creo que la respuesta está en quién difunde la información y qué busca con ello.

Hace unos años, Gartner fue demandada[3], y el texto de la demanda aporta elementos valiosísimos para aquellos que, debiendo hacer un análisis técnico de las tecnologías que adquieren para sus organizaciones, incorporan los cuadrantes mágicos como elemento central, o hasta exclusivo, dentro del proceso de toma de decisión.

“These qualities are broken down into fifteen different categories, almost all of which are qualitative in nature. Only one out of the fifteen categories directly concerns a company’s “Product/Service,” and there is no indication that Gartner’s assessment is based upon product testing. Rather, Gartner’s views are shaped by conversations with “customers” and “vendor-supplied references.” This subjective and qualitative approach is not given to the assertion of objective facts, and a company’s placement on the Magic Quadrant is not susceptible of being proved true or false.”

La misma Gartner señala que sus análisis son de naturaleza cualitativa y en ninguna parte indica que se haga pruebas a los productos, tampoco se habla de hechos objetivos, pero es común encontrar quienes perciben a estos análisis como si se tratara de estudios científicos. En general se puede entender que lo que Gartner expresa es una mera opinión subjetiva, como la que podría expresar cualquier hijo de vecino acerca de la leche o del gato y eso no tiene nada de malo, hasta que esa opinión se extrae de contexto y se utiliza con alguna intención comercial.

Ahora, para responder a mis amables interlocutores:

¿Quiere saber si su anti-virus es bueno contra-virus?

http://www.av-comparatives.org/

https://www.av-test.org/

https://www.virusbulletin.com/

http://www.amtso.org/

 

¿Quiere saber si es lo mejor para usted?

Pruebe! Cualquier fabricante estaría encantado de ofrecerle una prueba gratuita.

 

¿Quiere expresar su opinión acerca de la leche, el gato o el artículo?

Bienvenido sea!

@JavierSOGYO

[1] http://www.gartner.com/technology/research/methodologies/research_mq.jsp

[2] https://www.realstorygroup.com/Blog/1660-Looking-beyond-the-magic-quadrant-to-find-the-nittygritty

[3] http://cdn.ca9.uscourts.gov/datastore/memoranda/2011/05/13/10-16061.pdf