Para entender los trending topics Twitter utiliza... humanos

Imperdible el post en el blog de ingeniería de Twitter sobre como está montado el sistema para detectar e intentar entender el significado de las búsquedas masivas que se producen en el servicio.

Además de un sistema que detecta la frecuencia de búsquedas y encuentra las que se hacen populares, Twitter utiliza Mechanical Turk de Amazon para que humanos le ayuden a detectar el significado, la categoría a la que se refieren y de ahí puedan inferir cuál es la publicidad apropiada para la búsqueda.

Frente al sistema completamente automatizado de Google, la exigencia de entender en tiempo real de a qué se refiere una búsqueda popular o un trending topic y lo intrincado de las expresiones (hashtags, juegos de palabras, polisemia) hace que Twitter apueste por preguntar a personas y no a ningún sistema de procesamiento del lenguaje natural de tantos que pululan por ahí.