A medida que el catálogo de Amazon creció mucho más allá de los libros, acumuló grandes cantidades de páginas de productos duplicadas: el mismo artículo listado varias veces con títulos, imágenes o descripciones ligeramente diferentes. Los ingenieros intentaron automatizar la limpieza con algoritmos de coincidencia, pero la tarea seguía derrotando al software: una persona podía mirar dos listados y decir en segundos si eran el mismo producto, mientras que escribir reglas lo bastante generales para detectar cada variación sin producir coincidencias falsas resultaba poco práctico a la escala del catálogo.
El equipo del gerente de Amazon Venky Harinarayan construyó lo que él llamó un arreglo híbrido de computación máquina-humano: un sistema que dividía la tarea de deduplicación en unidades pequeñas e independientes, cada una respondible por una persona en segundos, y distribuía esas unidades automáticamente por internet a un grupo de trabajadores remotos que podían completarlas cuando y donde eligieran. Jeff Bezos vio el potencial más amplio de la herramienta interna e hizo que se convirtiera en un mercado público en 2005, llamado Mechanical Turk por el autómata ajedrecista del siglo XVIII que había ocultado en secreto a un operador humano en su interior.
Abrió un mercado público para microtareas como la detección de duplicados, pagadas por tarea, de modo que el software pudiera invocar el juicio humano como una API y escalar la mano de obra con la demanda.
Las microtareas no necesitan contexto, así que cualquier trabajador puede responder rápidamente.
Los trabajadores distribuidos escalan con la demanda, no con la plantilla.
Las llamadas programáticas hacen que el juicio humano sea tan fácil de usar como el software.
Cuando la automatización falla en una tarea que requiere juicio humano rápido, descomponerla en microtareas y dirigirla a personas disponibles bajo demanda mediante una API.
La herramienta interna resolvió el propio problema de catálogo de Amazon y luego se lanzó públicamente en 2005 como un mercado que sigue funcionando hoy. Mechanical Turk se convirtió en la plantilla para la industria más amplia del 'crowdwork' y de la IA con humanos en el bucle, y más tarde sustentó buena parte de los datos de entrenamiento etiquetados detrás de los sistemas modernos de aprendizaje automático, todos descendientes de una herramienta construida para resolver un problema estrictamente interno de catálogo.
CONSULTA LAS PRUEBAS
Las fuentes
- Untold History of AI: How Amazon's Mechanical Turkers Got Squeezed Inside the Machine IEEE Spectrum · spectrum.ieee.org