jueves, 24 de noviembre de 2016

Historia de los buscadores

2 Historia de los buscadores

Historia de los motores de búsqueda: Desde 1945 hasta la actualidad Google

Arriba tenéis una infografía sobre la historia de los motores de búsqueda.
El concepto de hipertexto vino a la vida en julio de 1945 cuando, después de disfrutar de lo que se llama “camaradería científica” que era un efecto secundario de la Segunda Guerra Mundial, fue publicado el artículo de Vannevar Bush en The Atlantic Monthly.  As We May Think (1945).
Se instó a los científicos a trabajar juntos para ayudar a construir un cuerpo de conocimiento para toda la humanidad. Aquí hay una frase y párrafos seleccionados que impulsan su punto de origen.
La especialización es cada vez más necesario para el progreso y el esfuerzo para tender un puente entre las diferentes disciplinas y la suma de la experiencia humana es necesario. Un registro, si ha de ser útil para la ciencia, debe extenderse de forma continua, se debe almacenar y, sobre todo, debe poder ser consultado.
No sólo era una firme creencia en el almacenamiento de datos, también se creía que si la fuente de datos era para ser útil a la mente humana tendríamos que representar cómo la mente trabaja a la medida de nuestras posibilidades.
Con el tiempo se propuso la idea de un sistema virtual ilimitada, rápido, fiable y ampliable, que almacenará la memoria asociativa y con sistema de recuperación. A este dispositivo se le llamó Memex.
Gerard Salton, que murió el 28 de agosto de 1995, fue el padre de la moderna tecnología de búsqueda. Sus equipos en Harvard y Cornell desarrollaron el sistema de recuperación de información inteligente. Salton's Magic Automatic Retriever of Text incluye conceptos importantes como el modelo de espacio vectorial, frecuencia inversa de documento (FDI), frecuencia de los términos (TF), los valores de discriminación plazo, y los mecanismos de retroalimentación de relevancia.
Fue el autor de un libro de 56 páginas llamado Teoría de la indización, en el que realizó un gran trabajo al explicar muchas de sus pruebas del cual hoy en día se basa la búsqueda. Tom Evslin registró una entrada de blog acerca de lo que era trabajar con el Sr. Salton.
Ted Nelson: creó Proyecto Xanadu en 1960 y acuñó el término hipertexto en 1963. Su objetivo con el Proyecto Xanadu era crear una red informática con una interfaz de usuario simple que resuelve muchos de los problemas sociales como la atribución.
Mientras que Ted estaba en contra de un marcado código complejo, enlaces rotos, y muchos otros problemas asociados con HTML tradicionales en el WWW.  Gran parte de la inspiración para crear la WWW fue extraída de la obra de Ted. 
Todavía hay conflicto en torno a las razones exactas por el cual Proyecto Xanadu no logró despegar.

Advanced Research Projects Agency Network (ARPANET)

ARPANET es la red que finalmente nos llevó a internet. La Wikipedia tiene entradas sobre ARPANET y en youtube hay un interesante video sobre ARPANET.
Archie (1990):
Los primeros cientos de webs comenzaron en 1993 y, la mayoría de ellos, estaban en las universidades, pero mucho antes de que la mayoría de ellos llegaran, existía Archie. El primer motor de búsqueda que se creó fue Archie, creado en 1990 por Alan Emtage, un estudiante de la Universidad McGill en Montreal. La intención original del nombre era "archivos", pero se acortó a Archie.
Archie ayudó a resolver el problema de dispersión de datos mediante la combinación de un script de datos basada en la escritura con una expresión regular para recuperar y mostrar los nombres de archivos que coincidan con una consulta del usuario. Esencialmente Archie se convirtió en una base de datos de nombres de archivos web que coincidía con las consultas de los usuarios.
Veronica y Jughead:
A medida que el boca a boca sobre Archie se propagaba, un grupo de informática de la universidad de Nevada desarrolló Verónica. Verónica ofrecía el mismo propósito que Archie, pero trabajaba en archivos de texto plano. Pronto otra interfaz de nombre Jughead apareció con el mismo propósito que Verónica, ambos fueron utilizados para vío de archivos vía Gopher, que fue creado como una alternativa a Archie por Mark McCahill en la Universidad de Minnesota en 1991.
¿Qué pasó con Gopher?
Gopher se expandió rápidamente hasta mediados de la década de 1990. Sin embargo, en 1993, la Universidad de Minnesota, que era dueño de los derechos de propiedad intelectual para Gopher, decidió empezar a cobrar derechos de licencia para cada instalación Gopher. La World Wide Web, que se había puesto en marcha después de Gopher y fue quedando atrás, había sido puesto en libertad como una plataforma completamente libre. Como resultado, después de 1993 los usuarios comenzaron a acudir a la web para evitar la asociada con los derechos de licencia de Gopher.
Mientras Gopher fue finalmente liberado como software GPL en el año 2000, y hay unos pocos servidores Gopher activo hoy en día, Gopher es en gran parte un proyecto de pasatiempo mantiene vivo gracias a los entusiastas de Gopher.
Protocolo de transferencia de archivos: (File Transfer Protocol)
Tim Burners Lee durante ese mismo tiempo fue más allá y creo lo que hoy se conoce como la www (world wide web) el primer servidor web en NeXT (que también era editor HTML) y la primera página web… La forma en que las personas comparten datos, a través del protocolo de transferencia de archivos (FTP).
Si usted tenía un archivo que quería compartir configuraría un servidor FTP. Si alguien estaba interesado en la recuperación de los datos debía usar también un FTP. Este proceso funcionó efectivamente en grupos pequeños, pero los datos se volvieron más fragmentados que cuando se recogieron.
Tim Berners-Lee y la WWW (1991):
Sacado de la Wikipedia :
Una vez comenzó la web a tener contenido, en junio de 1993 y desde el MIT (con Matthew Gray a la cabeza), se desarrolló World Wide Web Wanderer, un robot de búsqueda creado en Perl que pretendía medir el tamaño de la red. Ese robot se amplió pudiendo leer direcciones URL creándose así Wandex, el que se podría considerar el primer buscador de internet, y que tuvo grandes problemas de infraestructura y velocidad cuando alcanzó los cientos de visitas diarias, ya que su robots conseguía “tirar” los sitios que indexaba.
El primer sitio web construido estaba en http://info.cern.ch/ y se puso por primera vez online el 6 de agosto de 1991. Subieron una explicación acerca de lo que era la World Wide Web, cómo se puede tener un navegador y cómo configurar un servidor Web. También fue el primer directorio web del mundo, ya que Berners-Lee mantuvo una lista de otras webs, aparte de la suya propia.
En 1994, Berners-Lee fundó el World Wide Web Consortium (W3C) en el MIT (Instituto de Tecnología de Massachusetts).
Tim también creó la Biblioteca Virtual , que es el catálogo más antiguo de la web . Tim también escribió un libro sobre la creación de la web, titulado Weaving the Web .
¿Qué es un bot?
Los bots (robots informáticos) son simplemente programas que automatizan tareas repetitivas a velocidades imposibles de reproducir por los seres humanos. El término bot en Internet se utiliza generalmente para describir cualquier cosa que el usuario haga en la en la interfaz con el usuario o que recoge los datos.
Los motores de búsqueda utilizan "arañas" de búsqueda para obtener información. Ellos son programas de software que solicitan páginas de forma regular como los navegadores lo hacen. Además de leer los contenidos de las webs para su indexación, las arañas registran enlaces.
  • Las citas por links pueden utilizarse como sustitutos de confianza editorial.
  • Los anchors texts puede ayudar a describir de lo que trata una web.
  • Además los enlaces se almacenan para ayudar a los motores de búsqueda a descubrir nuevos documentos para crawlear más tarde.
Partes de un motor de búsqueda:
Los motores de búsqueda se componen de 3 partes principales. Las arañas de los motores de búsqueda que siguen los enlaces en la web para buscar páginas no indexadas o para actualizar. Estas páginas se rastrean y se añaden al índice del motor de búsqueda (también conocido como el catálogo). Cuando realizamos una búsqueda a través de un buscador no estamos buscando en la web sino en su índice, de ahí a las constantes actualizaciones de los spiders rastreando continuamente la web y añadiendo los resultados a sus índices. La tercera parte de un motor de búsqueda es la interfaz de búsqueda y software de relevancia. Para cada consulta de búsqueda que se realiza, los motores de búsqueda suelen realizar algunas o todas las veces:
  • Aceptar la consulta por el usuario, comprobar a nivel de sintaxis que la consulta sea correcta o en su caso recomendar variaciones ortográficas más populares o correctas.
  • Comprobar si la consulta es relevante para otras bases de datos de búsqueda vertical (como la búsqueda de noticias o búsqueda de productos) y ofrecer resultados de interés para esos tipos de búsqueda.
  • Recopilar una lista de páginas relevantes para los resultados de búsqueda orgánica. Estos resultados se clasifican en base al contenido de la página, los datos de uso y datos de enlaces.
  • Solicitar una lista de anuncios relevantes para colocar cerca de los resultados de búsqueda.
Los usuarios en general, tienden a hacer clic sobre todo en los primeros resultados de búsqueda, como se ha señalado en este artículo por Jakob Nielsen.
¿Quieres saber más acerca de cómo funcionan los motores de búsqueda?
Os dejo una infografía de cómo trabajaban los motores de búsqueda hoy en día:
Tipos de consultas de búsqueda:
Andrei Broder fue autor de una taxonomía de Búsqueda web [PDF] , que señala que la mayoría de las búsquedas se dividen en las siguientes 3 categorías:
  • Informativas - la búsqueda de información estática sobre un tema
  • Transaccional – compras, descargas algo, o de otra forma interactuar con el resultado
  • Navegacional - me envía a una dirección URL específica
(De esto ya os hablará Bruno en su clase sobre keyword research)
Mejorar sus habilidades de búsqueda:
¿Desea convertirse en un mejor buscador? La mayoría de los motores de búsqueda a gran escala ofrecen:
  • Páginas de búsqueda avanzada que ayudan a los usuarios a refinar sus consultas para solicitar archivos de todo tipo, en diferentes formatos, tamaños, colores, así como otras formas de búsqueda más refinadas. Por ejemplo el signo ~ significa relacionado con Google.
  • Bases de datos de búsqueda vertical que pueden ayudar a estructurar el índice de información o limitar el índice de búsqueda a una colección más grande o mejor estructurada de fuentes, documentos e información.
Nancy Blachman Guía de Google ofrece libres consejos de búsqueda de Google, y de Greg R.Notes’s Search Engine Showdown  ofrece una carta de características.
También hay muchos servicios de búsqueda verticales más pequeños y populares. Por ejemplo, Del.icio.us le permite buscar direcciones URL que los usuarios han marcado y Technorati le permite buscar blogs, así como Bitacoras, Blogesfera, Blogcatalog
World Wide Web Wanderer
Una vez la web comenzó a tener contenido, desde el MIT en junio de 1993, se desarrolló World Wide Web Wanderer, un robot de búsqueda creado en Perl que pretendía medir el tamaño de la red. Ese robot se amplió pudiendo leer direcciones URL creándose así Wandex, el que se podría considerar el primer buscador de internet, y que tuvo grandes problemas de infraestructura y velocidad cuando alcanzó los cientos de visitas diarias, ya que su robots conseguía “tirar” los sitios que indexaba.
Aliweb
El siguiente buscador (quizá mejor llamarlo directorio) fue Aliweb (Archie Like Indexing on the Web), también apareció en octubre de 1993 y todavía está en marcha. Creado por Martijn Koster, lo que hacía era indexar los meta-tags de las páginas que se le daban a su índice, es decir, que no tenía un robot de búsqueda que consumiera gran cantidad de ancho de banda como Wandex. La desventaja de ALIWEB es que muchas personas no saben cómo presentar su web.
Robots Exclusion Standard: Estándar de exclusión de robots:
Tras estos primeros procesos de rastreo en la red, Martijn Koster propuso unas sugerencias para lo que sería el fichero robots.txt que limita la acción de los robots de búsqueda en los sitios web, creando los estándares de cómo los motores de búsqueda debe indexar o no indexar el contenido. Esto permite a los webmasters poder bloquear los robots de su sitio en un nivel o en todo el site o página por página.
En ese momento se comenzaba a poder detectar cada uno de los robots mediante su agente, se sugería usar siempre una dns única, filtrar determinados lugares del sitio para que no fuera accesible…
Búsqueda web primitiva
Aquí comenzaron a desarrollarse los primeros robots (arañas) como Jumpstation que indexaba el título, URL y cabecera del sitio, al igual que World Wide Web Worm, creado por Oliver Mc.Bryan en 1994 (y comprado en 1998 por Goto.com) que funcionaba de la misma manera. Aunque era interesante que indexaran, el problema de estos motores era la forma de mostrar resultados, ya que lo hacían sin aplicar ningún algoritmo, simplemente mostrando los resultados según la fecha de indexación. Más adelante, en diciembre, también lo hizo así el RBSE(Repository-Based Software Engineering) comenzando a aplicar un primer ranking en base a la relevancia de la palabra dada
Por defecto, si la información está en un servidor web público, y la gente enlazar con él los motores de búsqueda por lo general se indexará.
Hasta aquí podríamos hablar de la versión “beta” de los buscadores, la versión que no era aún ni la primera y en la que todo eran experimentos.
Excite:
Excite provino del proyecto Architext, que se inició en febrero de 1993 por seis estudiantes de licenciatura de Stanford. Tenían la idea de utilizar el análisis estadístico de las relaciones entre palabras para que la búsqueda sea más eficiente. Pronto encuentran financiación. A mediados de 1993 lanzaron copias de su software de búsqueda para su uso en sitios web. El complicado algoritmo intentaba crear un sistema parecido a los sinónimos mediante estadísticas entre las relaciones de palabras, de forma que se podía realizar una búsqueda obteniendo resultados aunque la misma no existiera en la página (si tenía alguna relación, claro). En 1996 compró Magellan y Webcrawler y creó su propio directorio. Fue el buscador de referencia hasta mediados de 1999 y en 2002 perdió su sistema de búsqueda pasando a ser un metabuscador.
Excite fue comprado por un proveedor de banda ancha llamado Home en enero de 1999 por $ 6,5 mil millones, y fue nombrado Excite@Home. En octubre de 2001 Excite @ Home se declaró en quiebra . InfoSpace compró Excite del tribunal de quiebra por $ 10 millones.

Directorios Web:

VLib
Cuando Tim Berners-Lee creó la Biblioteca Virtual , que se convirtió en una confederación de expertos tópicos que mantengan listas de enlaces tópicos relevantes.
EINet Galaxy
De forma paralela iban apareciendo algunos directorios como EINet Galaxy, que en enero de 1994 podría considerarse el primer directorio tal y como los conocemos en la actualidad. La mayor razón por la que EINet Galaxy se convirtió en un éxito fue que también contenía Gopher y Telnet, además de su función de búsqueda en la Web. El tamaño de la web a principios de 1994 en realidad no requería un directorio web; Sin embargo, otros directorios pronto siguieron a ElNet Galaxy.
Yahoo! Directorio
Pero, fue en abril de 1994 cuando David Filo y Jerry Yang crearon Yahoo! Directorio (anteriormente conocido como Jerry’’s Guide to the World Wide Web) como una colección de sus páginas web favoritas. A medida que su número de enlaces creció tuvieron que reorganizar y convertido en un directorio de búsqueda. El gran problema de Yahoo! era que comenzó siendo un directorio hecho por personas y eso llevaba mucho tiempo, por lo que tuvo que evolucionar incorporando un buscador para ese directorio. A medida que pasaba el tiempo y el directorio de Yahoo! creció comenzó a cobrar a las demás webs por ser incluidas. El último importe fue de 299 $ por año (aún me acuerdo de pagarlo varias veces por varios clientes). 
Es curiosa la historia de su nombre debido a que muchos le otorgan el nombre de Yet Another Hierachical Officious Oracle, aunque sus fundadores insisten en que se basa en los personajes de unas aventuras de Gulliver.
El 26 de septiembre de 2014, Yahoo! anunció que cerrarían el directorio de Yahoo! a finales de 2014.
Open Directory Project
En 1998 Rich Skrenta y un pequeño grupo de amigos crearon DMOZ , que es un directorio en el que cualquiera puede descargar y utilizar en su totalidad o en parte. El ODP (también conocido como DMOZ) ha sido unos de los directorios más grandes y donde Google fijo sus ojos como ejemplos de webs con confianza. Netscape compró el proyecto abierto del directorio en noviembre de 1998. Más tarde ese mismo mes AOL anunció la intención de compra de Netscape en 4.5 billón de $.
LII 
Google ofrece un boletín bibliotecario para ayudar a los bibliotecarios y otros editores web que ayudan a hacer más accesible la información y categorizar la web. El segundo boletín bibliotecario de Google vino de manos de Karen G. Schneider, que fue el director de Librarians' Internet Index. LII fue un directorio de alta calidad destinado a bibliotecarios. Su artículo explicaba lo que ella y su equipo realizaban como búsqueda de fuentes fidedignas de calidad para añadir a la LII. La mayoría de los directorios, especialmente los que tienen una opción de inclusión pagada, tienen estándares más bajos de calidad que los catálogos seleccionados creados por los bibliotecarios. 
LookSmart
Looksmart es una compañía que nace en 1995 como un directorio web administrado por Reader’s Digest con la intención de transformarse en un portal complementario a su publicación en papel. Sin embargo, con el tiempo Looksmart fue vendido y terminó transformándose en una compañía de publicidad online que ofrece servicios de búsqueda, CPC y diferentes tipos de publicidad online. Eso causó la desaparición de cualquier buena fe o lealtad que habían construido, aunque se les permitió obtener ganancias mediante la transmisión de los anuncios pagados a algunos grandes portales como MSN. El problema era que LookSmart llegó a ser demasiado dependiente de MSN. El problema era que LookSmart llegó a ser demasiado dependiente de MSN, y en 2003, cuando Microsoft anunció que se estaban deshaciendo de LookSmart  mató a su modelo de negocio.

Los motores de búsqueda vs Directorios:

Todos los principales motores de búsqueda tienen algún proceso de revisión editorial limitado, pero el grueso de relevancia en los principales motores de búsqueda es impulsada por los algoritmos de búsqueda automatizados que aprovechan la potencia del link graph de la web. 
A diferencia de los motores de búsqueda altamente automatizados, los directorios compilan manualmente taxonomías de las web. Los directorios son más costosos y requieren mucho más tiempo de mantenimiento debido a su falta de escalabilidad y a la intervención de personas para crear cada listado y comprobar periódicamente la calidad de los sitios web que aparecen.
Los directorios generales dieron paso a directorios verticales temáticos o sites de noticias temporales como los blogs o sites de marcadores sociales como del.ici.ous. Además, cada uno de estos tres formatos de publicación que acabo de mencionar ayudan en la mejora de la relevancia de los principales motores de búsqueda.
Os dejo un vídeo de Marcus Tandler al que conocí el año pasado en un evento y me parece un crack y que nos habla del futuro de la búsqueda.
Webcrawler
Brian Pinkerton de la Universidad de Washington presentó Webcrawler el 20 de abril de 1994. Fue el primer rastreador, que indexaba páginas enteras y que buscaba información en ellas, al contrario de sus antecesores, que sólo buscaban en la dirección web, título o metas. Esto hizo que la relevancia de los resultados fuera mucho mayor. Además, tenía la peculiaridad de poder ver las búsquedas en tiempo real con su Webcrawler Search Voyeur. En realidad este buscador era de escritorio pero en 3 meses se convirtió en un robot de la red. Pronto se hizo tan popular que durante las horas diurnas no podía ser utilizado. En 1995 AOL compró Webcrawler. A continuación, en 1997, Excite compró Webcrawler, y AOL comenzó a usar Excite para impulsar su NetFind. Webcrawler abrió la puerta a muchos otros servicios que hacian lo mismo. Al cabo de 1 año de su debut llegó Lycos, Infoseek, y OpenText.
Lycos
Lycos fue el siguiente desarrollo importante de búsqueda, creado por Michale Mauldin  en la universidad de Carnegie Mellon University. El 20 de julio de 1994, Lycos salió a bolsa con un catálogo de 54.000 documentos, con un algoritmo interesante que incluía el concepto de proximidad entre palabras. Pero la principal diferencia de Lycos era el gran tamaño de su catálogo: en julio salió con 54.000 docs, en agosto de 1994, Lycos había identificado 394.000 documentos, en enero de 1995, el catálogo había llegado a 1,5 millones de documentos; y en noviembre de 1996 Lycos había indexado más de 60 millones de documentos - más que cualquier otro motor de búsqueda en Internet. En octubre de 1994, Lycos ocupó el primer lugar en la lista de motores de búsqueda. La palabra que ofrecía más resultados era “surf“.
INFOSEEK
INFOSEEK también comenzó en 1994, alegando que fue fundada en enero. Realmente no ofreció nada a nivel innovación, pero sedujo a Netscape en diciembre de 1995 para utilizarlo como su motor de búsqueda por defecto. Una característica popular de INFOSEEK es que permitía que los webmasters pudieran dar de alta sus webs en su índice en tiempo real lo que fue un caramelo para los spammers.
En esta época comenzaron también a aparecer los primeros meta-buscadores. Este sistema lo que hace realmente es unificar los resultados de varios motores de búsqueda para ofrecer los resultados mezclados. En 1995 apareció el primero de ellos llamado MetaCrawler creado por Erik Selberg y Oren Etzioni en la Universidad de Washington (como Webcrawler). En este caso devolvía resultados de Lycos, Altavista, Yahoo!, Excite, Webcrawler e Infoseek. El problema era su velocidad. Como curiosidad, en noviembre de 1996 ya tenía una nueva versión, en beta, para probar.
Altavista 
AltaVista debutó online en diciembre de 1995. AltaVista trajo muchas mejoras a la escena web. Tenían ancho de banda prácticamente ilimitado (para la época), fueron los primeros en permitir consultas en lenguaje natural,  técnicas de búsqueda avanzadas y permitía a los usuarios añadir o eliminar su propia URL en 24 horas. Incluso permitía la comprobación de enlaces entrantes.  AltaVista también proporcionó numerosos consejos de búsqueda y funciones de búsqueda avanzada como búsqueda por nombres de imágenes y ficheros multimedia, pero lo más importante es que era veloz.
Debido a la mala mala gestión, el miedo a la manipulación de resultados, y el desorden general relacionado con el portal, AltaVista fue cayendo en popularidad y Google comenzó a ser popular. El 18 de febrero de 2003, Overture firmó una carta de intención para comprar AltaVista por 80 millones de $ en acciones y  60 millones $ en efectivo. Después Yahoo! compró Overture trasladaron alguna de sus tecnologías en Yahoo! Search, y utilizaron AltaVista como plataforma de pruebas.
OZU
A finales del 95 apareció Ozú como directorio y buscador de la mano de Advernet (todavía funciona su primera dirección). La Base de Datos del buscador y del directorio estaba íntegramente gestionada y actualizada por personas (con ayuda de herramientas de rastreo y gestión de calidad).
Durante el 1997 y hasta el 2000 la empresa tuvo un largo litigio contra un empleado que se robó el dominio ozu.com y que estuvo explotando el buscador paralelamente hasta que salió el juicio a favor. Mientras se usaba ozu.es que es el sitio web que ha perdurado.
A partir del 2001 las cosas evolucionaron ya que Ozú fue comprado por el Grupo Vocento y se llega a un acuerdo con Google para usar sus resultados, priorizando los resultados de Ozú, hasta que finalmente se dejó de usar el contenido original y, en 2006, se comenzó a utilizar Noxtrum
Inktomi
El 20 de mayo de 1996 Paul Gauthier y Eric Brewer, desde la Universidad de Berkeley lanzaron HotBot.  De la mejora de la tecnología adquirida en su investigación. Llegaron a un acuerdo con Wired y fueron los que le ayudaron a darse fama. Se consideró el primer motor de búsqueda capaz de indexar los millones de sitios web que había en ese momento. Tras la burbuja del 2001, perdió muchos de sus usuarios y aunque Inktomi fue pionera en el modelo de pago por de inclusión no era ni mucho tan eficiente como el modelo de pago por click desarrollado por Overture. No pudieron desarrollar un modelo de negocio rentable, y lo vendieron a Yahoo!
DONDE
El 1 de Junio de 1996 se lanzaba el primer directorio español universitario, ¿Dónde? Directorio Online de España que incorporaba 1.157 en su base de datos, según explica su cómo se hizo. A principios de 1997 estaba en 5.000 registros y 3,5 millones de accesos al mes. Después el número de consultas creció más lentamente. El tope se alcanzó en junio de 1998, dos años después de inaugurar el servicio, con 29.000 registros y casi 5 millones de consultas en un mes: una media de más de 100 por minuto, momento en el que se produjo un estancamiento. El número de registros siguió aumentando, pero las consultas no. La razón era el colapso del servidor: no daba abasto, no admitía más usuarios. Con 44.563 registros en la base de datos, dónde anunció que cerraba sus puertas el 1 de junio de 1999.
Ask.com (anteriormente Ask Jeeves)
En 1996 Ask Jeeves fue lanzado como un motor de búsqueda en lenguaje natural, tal y como lo hacemos habitualmente. Ask Jeeves utilizaba editores humanos para tratar de igualar las consultas de búsqueda. 
En 1999 compró una empresa llamada Direct Hit (creado por Gary Culli) que tiene por objeto clasificar los resultados en función de su popularidad y aplicó su tecnología en su motor de búsqueda. Apareció el verano de 1998 y mucha gente ya lo utilizaba a finales del mismo debido a la alta relevancia que ofrecía, principalmente porque basaba sus resultados de búsqueda en los clicks que hacían los usuarios (técnica que utilizan algunos en la actualidad).
El 4 mar 2004, Ask Jeeves acordó la adquisición de Interactive Search Holding por  9,3 millones de acciones y stock options y 150 $ millones en efectivo. El 21 de marzo de 2005, Barry Diller’s IAC acordó la adquisición de Ask Jeeves por 1,85 mil millones de $. IAC posee muchos sites populares como Match.com, Ticketmaster.com, y Citysearch.com, y está promoviendo ASK a través de sus otras propiedades. En 2006 Ask Jeeves paso a llamarse Ask.
Yahoo
El conseguir en Buscar
Yahoo! fue fundada en 1994 por David Filo y Jerry Yang como un directorio de sitios web. Durante muchos años subcontrataron su servicio de búsqueda a otros proveedores, considerándolo secundario a su directorio y a otras características de contenido, pero a finales de 2002 se dieron cuenta de la importancia y el valor de la búsqueda y comenzaron a adquirir agresivamente compañías de búsqueda.
Overture compró AllTheWeb y AltaVista en 2003. Yahoo! compró Inktomi en diciembre de 2002, y luego adquirió Overture en julio de 2003, y combinó las tecnologías de las varias compañías de búsqueda que compraron para crear un nuevo motor de búsqueda. Yahoo! descargó Google en favor de su propia tecnología el 17 de febrero de 2004.
Getting Social
Además de construir su principal producto de búsqueda algorítmica, Yahoo! ha favorecido en gran medida el concepto de búsqueda social.
El 20 de marzo de 2005 Yahoo! compró Flickr, un popular site para compartir fotos. El 9 de diciembre de 2005, Yahoo! compró Del.icio.us, un site de marcadores sociales. Yahoo! también ha hecho un fuerte empujón para promover Yahoo! Answers, una popular comunidad libre de preguntas y respuestas para controlar el contenido.
El 2 de julio de 2007, Yahoo! lanzó su producto SmartAds orientado al comportamiento.
El 29 de julio de 2009, Yahoo! decidió renunciar a la búsqueda y firmó un contrato de 10 años para distribuir anuncios Bing y resultados algorítmicos en su sitio web.
Yahoo! cerró su servicio de directorio en diciembre de 2014 .
En 2014 Yahoo! firmó un acuerdo para ser el proveedor de búsqueda predeterminado en Mozilla Firefox dentro de los Estados Unidos. También hicieron un acuerdo de distribución con Oracle, sin embargo esas ganancias fueron de corta duración y Yahoo siguió perdiendo participación en la publicidad en línea y búsqueda en la web.
Durante los años, Yahoo! no solo salió del negocio de búsqueda, sino que también salió de la mayoría de sus negocios verticales. El papel del portal web de temática general fue relegado a la irrelevancia a través de la combinación de:
  • Motores de búsqueda de uso general como Google que agregan características interactivas y respuestas ricas directamente a sus resultados de búsqueda
  • Las personas que gastan una mayor parte de su tiempo de ocio en webs sociales como Facebook que ofrecen un feed de noticias altamente personalizado
  • El aumento de los bloqueadores de anuncios y la disminución de las tasas de CPM para los anuncios display
  • Las ofertas verticales subcontratadas finas son inferiores a las fuentes y fuentes de datos de terceros que las alimentaron
Verizon anunció que estaban adquiriendo el negocio operativo de Yahoo! en julio de 2016 por4,83 mil millones de $.
Bing Microsoft
Bing de Microsoft lanzado en 2009, pero en realidad no es tan nuevo. Bing existía como MSN Search y Windows Live Search - que data de 1998. Los terceros propulsados ​​sus primeras búsquedas. Alrededor de 2004, Microsoft comenzó a usar sus propios resultados de búsqueda. Esto alimenta el eventual cambio de MSN Search para Windows Live Search y, finalmente, Bing. Aunque no es tan popular como Google, Bing ha logrado hacerse una parte decente del mercado de motores de búsqueda.
Ese mismo año en que Microsoft se metió en el negocio de los motores de búsqueda (1998), se puso en marcha Google. Sería muy pronto revolucionará el mundo de la búsqueda.
En 1998 como decíamos se puso en marcha MSN Search, pero Microsoft no tomo en serio la búsqueda hasta después de que Google probó el modelo de negocio. Hasta que Microsoft vio la luz se basó principalmente en socios como: LookSmart, y Inktomi para impulsar su servicio de búsqueda.
Se puso en marcha la muestra de tecnología de su motor de búsqueda alrededor de primeros de julio del 2004 . Ellos cambiaron formalmente los resultados de búsqueda orgánica de Yahoo! a su propia casa el 31 de enero de 2005 . MSN anunció que vierten el programa de anuncios de búsqueda de Yahoo! 'S el 4 de mayo 2006 .
El 11 de septiembre de, de 2006 , Microsoft anunció que iban a lanzar su producto Live Search.
El 1 de junio de 2009, Microsoft lanzó Bing.
Un nuevo servicio de búsqueda que cambió el panorama de la búsqueda mediante la búsqueda de sugerencias para las búsquedas relacionadas directamente en el conjunto de resultados. Por ejemplo, cuando realizas una búsqueda de “ tarjetas de crédito” te van a sugerir frases relacionadas como
  • tipos de tarjetas de crédito
  • solicitar tarjetas de crédito
  • anular tarjetas de crédito
  • asesoramiento sobre las tarjetas de crédito
Microsoft publicó una guía de SEO para Webmasters de Bing [PDF], que afirmaba que las sugerencias de palabras clave adicionales ayudaron a reducir la demanda de búsqueda para reducir los resultados enumerados cuando se comparan con los antiguos resultados de 6 a 10 cuando se utiliza un solo conjunto de resultados de búsqueda lineal. A la inversa, el formato de Google tiende a concentrar la atención en los listados de búsqueda más importantes. Después de un exhaustivo seguimiento visual, Gord Hotchkiss nombró a este patrón el Triángulo de OroDorado de Google.
Aunque Yahoo! ha perdido gran parte de su relevancia, Bing se ha convertido en un formidable competidor de búsqueda de Google. Han reducido la brecha de ingresos frente a Google y han construido un negocio de búsqueda rentable.
Bing es más fuerte en el mercado estadounidense, mientras que tiene una participación más baja fuera de los EE.UU., en parte debido a que Google ha promocionado de forma agresiva el navegador Google Chrome, desde las actualizaciones de seguridad de Flash y a través de las propiedades de Google y la red de anuncios de AdSense.
Google es más dominante en las búsquedas mobile de lo que son ellos en desktop debido a que:
  • Obliga a los fabricantes de teléfonos Android a configurar Google como proveedor de búsqueda predeterminado
  • Firmando un acuerdo con Apple para ser el servicio de búsqueda web predeterminado en Safari, iPhones, iPads y ordenadores Mac.
El proyecto Google comenzó a desarrollarse como decíamos en enero de 1996 por Sergey Brin y Larry Page en la Universidad de Stanford, llamándose BackRub debido a la tecnología que utilizaba, que calculaba la importancia de un sitio web en base a los enlaces que recibía. En esa época fue cuando Page fabricó un ordenador con piezas de Lego y con tecnología antigua que más adelante se convertiría en lo que hoy es Google. El 15 de septiembre de 1997 el dominio google.com era comprado y el 7 de septiembre de 1998 se creaba Google Inc. Una peculiaridad de Google es que en momentos especiales cambia su logo para adaptarlo a esa ocasión.
Hay que destacar dos razones por las que Google se hizo muy interesante: una interfaz muy clara y sencilla (como la de Altavista en sus inicios) y unos resultados muy relevantes. El secreto de los resultados, la tecnología PageRank (patentada el 4 de septiembre de 2001) hizo que el mundo de los motores de búsqueda cambiase completamente dando por iniciado lo que se puede llamar la versión 2 de los buscadores. Page lo que implementó fue un sistema mediante el cuál no sólo se tenían en cuenta los factores de la propia página en la que se buscaba información, sino que se tenían en cuenta otros factores externos que daban mayor o menos importancia al sitio web. Hoy en día todos los motores de búsqueda utilizan una tecnología similar (o que, al menos, tiene en cuenta estos factores).
Uno de los primeros motores de búsqueda con enfoque profesional fue Norther Light, creado en agosto de 1997 disponía ya de resultados en clustering de forma que daba sugerencias de búsqueda muy interesantes, pero no llegó a ser uno de los más utilizados por el público general. En 2002 dejó de dar servicio y hoy en día vende su tecnología.
En 1998 apareció MSN Search, de la mano de Microsoft, utilizando los datos de Inktomi y también apareció el Open Directory Project (DMOZ) hablamos antes de el, que, aunque no era el primer directorio hecho por personas, sí que era el primero en hacerlo de forma colaborativa. Creado por Rich Skrenta y Bob Truel y llamado inicialmente Gnuhoo, pasó a llamarse Newhoo el 5 de junio de 1998 y finalmente fue adquirido por Netscape en octubre de 1998 cuando pasó a ser el ODP, momento en el cual ya disponía de 100.000 direcciones y cerca de 4.500 editores.
Alltheweb
A mediados de 1999 apareció en el mercado AllTheWeb. Utilizaba la tecnología deFast, una empresa noruega que venía de la Norwegian University of Science and Technology.
Este buscador ofrecía algunas mejoras con respecto a Google tenía una interfaz elegante  una base de datos más actualizada, una búsqueda avanzada rica en funciones, mucho más amplia, búsquedas clusterizadas, pero nunca llegó a tener tanto éxito. En febrero de 2003 fue comprado por Overture y ésta, a su vez, en marzo de 2004 por Yahoo! que redujo algunas de sus funcionalidades. Hay que tener en cuenta que su base de datos pasó de 80 millones a finales de 1999 a 200 millones a principios de 2000 llegando a los 2.000 millones en junio de 2002 quedando en 3.300 millones cuando fue adquirida por su actual propietario.
En 1999 también aparecía un gigante de la red: Baidu. El motor de búsqueda chino sería un punto de referencia hasta la actualidad debido a la presión que mantiene el gobierno chino sobre Internet. Es curioso que la mayor parte de la inversión que tiene viene dada de empresas estadounidenses.
En el año 2000 se lanzó el motor de búsqueda Teoma de mano de Apostolos Gerasoulis en la Universidad de Rutgers. Utilizaba un sistema de clustering para organizar los sitios en base al Subject-Specific Popularity (actualmente Expert Rank) que, al contrario del Pagerank de Google, analizaba los enlaces en un contexto en el que se daba un ranking a una página web según el tema tratado. El 11 de septiembre de 2001 fue comprado por Ask Jeeves.
El 15 noviembre de 2003, Google implementó uno de los primeros grandes cambios en su motor de búsqueda añadiendo mejoras en la búsqueda semántica. Los motores de búsqueda tenían unas necesidades básicas: clustering y semántica.
En diciembre de 2003 se creó la empresa de Seekport, funcional a partir de enero de 2004. La empresa comenzó asociándose con Arexera, que tenía tratos con la versión alemana de Infoseek. La peculiaridad de Seekport es que dispone de una versión local para cada país con un índice independiente preparado para cada una de las necesidades locales.
En 2004, cuando MSN Search dejó de recibir los datos de Looksmart pasó a utilizar los resultados del motor de Inktomi. De esta misma forma, Yahoo! también dejó los datos de Google para unificar los motores de Alltheweb, Inktomi, Altavista… de forma que en marzo de 2004 esos buscadores comenzaron a utilizar la base de datos de Yahoo!.
En esta época también comenzaron a aparecer nuevos proyectos muy interesantes. Uno de ellos es Nutch, un motor de búsqueda en código abierto y creado en Java. Aunque su desarrollo es costoso ha conseguido el apoyo de Yahoo!. En diciembre de 2006 se ha lanzado Nutch en español, un proyecto que pretende crear una comunidad hispana de desarrollo de Nutch.
El 30 de septiembre de 2004 se lanzó Clusty de la mano de Vivisimo. Entre sus peculiaridades hemos de destacar su filosofía completamente basada en el clustering, lo que da pie a que el idioma inglés tenga resultados razonables, pero falle en muchos otros idiomas. Además fue el primer gran buscador que ofrecía búsquedas en Blogs o la Wikipedia en una de sus opciones.
En noviembre de 2004, MSN Search y de la mano de Christopher Payne y Oshoma Momoh pusieron en marcha una primera fase pública del motor de Microsoft, que se hizo pública el 20 de enero de 2005. El 1 de noviembre de 2005 se presentaba la plataforma Windows Live que será la nueva interfaz del motor de búsqueda de Microsoft. Tiene detalles interesantes como que deja de existir el paginador como tal.
También hay que hacer referencia a buscadores como Noxtrum un intento por parte de Telefónica de hacerse un hueco en el mundo hispano. Tras varios años de desarrollo del que comenzó a saberse algo a finales de junio 2004.  Enfocado principalmente en sitios en español y portugués, además de contener toda la información de Páginas Amarillas. (otro fracaso de buscador de la mano de Telefónica que priorizaba los resultados de Páginas Amarillas) Esto lo viví yo en mis propias carnes durante mi etapa en TPI.
El 30 de Noviembre de 2005 se lanzaba la versión beta, y el 22 de Abril de 2006 era presentada la primera versión final del buscador.
Quaero, el buscador europeo que se presentaba los primeros días de 2006, impulsado principalmente por los gobiernos de Francia y Alemania (que ya se ha retirado del mismo) y potenciado por grandes empresas tecnológicas europeas. Finalmente a principios de Abril, se lanza como Exalead (buscador que llevaba años en funcionamiento con los resultados de AOL, y que tras el acuerdo de éste último con Google, decidió usar el índice de Quaero). Desde Septiembre de 2006 su índice cuenta con 8.000 millones de resultados y es compatible con cualquier navegador.

Meta motores de búsqueda

La mayoría de los meta motores de búsqueda sacaban sus resultados de búsqueda de otros motores de búsqueda, los combinaban y hacían un rerank con esos resultados. Esta era una característica útil cuando los motores de búsqueda eran menos inteligentes en el rastreo de la web y cada motor tenía un índice significativamente único. Como la búsqueda ha mejorado la necesidad de meta motores de búsqueda se ha reducido.
Hotbot era propiedad de Wired, tenía colores funky, resultados rápidos, y un nombre fresco que sonaba geek, pero murió poco después, Lycos lo compró y lo ignoró. Tras el renacimiento nació como un meta buscador. A diferencia de la mayoría de los meta motores de búsqueda, Hotbot sólo extraía resultados de un motor de búsqueda a la vez, pero permitía a los buscadores seleccionar entre algunos de los motores de búsqueda más populares en la web. Actualmente, Dogpile, propiedad de Infospace, es probablemente el motor de búsqueda meta más popular del mercado, pero al igual que todos los otros motores de búsqueda meta, tiene cuota de mercado limitada.
Uno de los mayores problemas con la meta búsqueda en general es que la mayoría de los motores de búsqueda meta tienden a mezclar los anuncios de pago por clic en sus resultados de búsqueda orgánica, y para algunas consultas comerciales 70% o más de los resultados de búsqueda pueden ser resultados pagados. 
Vertical Search
Los principales motores de búsqueda lucharon por el contenido y el markeshare en verticales fuera del producto de búsqueda algorítmica principal. Por ejemplo, tanto Yahoo como MSN tenían servicios de respuesta a preguntas donde los seres humanos contestan las preguntas de los demás de forma gratuita. Google tiene una oferta similar, pero los que respondían las preguntas cobraban por su trabajo. 
Google, Yahoo y MSN también lucharon por convertirse en la plataforma de vídeo por defecto en la web, donde un player llamado YouTube tenía una posición muy fuerte. El resto de la historia todos lo conocemos. 
Yahoo y Microsoft se alienaron en la búsqueda de libros en un grupo llamado Open Content Alliance. Google, fue solo en ese vertical, y ofrecía una búsqueda exclusiva  Google Book.
Los tres principales motores de búsqueda proporcionaron un servicio de búsqueda de noticias. Yahoo! se asoció con algunos proveedores premium para permitir a los suscriptores incluir ese contenido en sus resultados de búsqueda de noticias. Google se asoció con la AP y varias otras fuentes de noticias para ampliar su base de datos de noticias durante más de 200 años. Y Topix.net fue un popular servicio de noticias que vendió el 75% de su propiedad a 3 de las mayores compañías de periódicos. Miles de weblogs se actualizaban diariamente reportando las noticias, algunas de las cuales compitieron con (y superando) a los principales medios de comunicación. Si eso no era suficiente opciones de noticias, los sitios de marcadores sociales como Del.icio.us frecuentemente actualizan listas recientemente populares, hay rastreadores de meme como Techmeme que rastrea y propaga la difusión de historias a través de blogs y sites como Digg que permiten a sus usuarios votar directamente en cada artículo para su exposición. Como en España Meneame.
Google también tiene un programa de búsqueda Académico cuyo objetivo es que la investigación académica sea más fácil.
En algunos portales verticales, como la búsqueda de tiendas, otros players como Paginas Amarillas tuvieron una participación significativa en el mercado, sobretodo por los acuerdos comerciales con los buscadores.
El 15 de noviembre de 2005 Google lanzó un producto llamado Google Base, que es una base de datos de casi cualquier cosa imaginable. Los usuarios pueden subir elementos y títulos, describirlos y etiquetarlos como mejor les parezca. Basado en las estadísticas de uso, esta herramienta puede ayudar a Google a comprender qué productos de búsqueda vertical deben crear o poner más énfasis. Ellos creen que la posesión de otros verticales les permitirá impulsar más tráfico de nuevo a su servicio de búsqueda principal. También creen que la publicidad específica medida asociada con la búsqueda puede ser transferida a otros medios. Por ejemplo, Google compró dMarc, una empresa de anuncios de radio. Yahoo! también ha intentado ampliar su alcance al comprar otras propiedades de alto tráfico, como el sitio de intercambio de fotos Flickr y el sitio de marcadores sociales del.icio.us.
Después de un par de años de pruebas, el 5 de mayo de 2010, Google dio a conocer un resultado de búsqueda de 3 columnas que pone de relieve muchas opciones de búsqueda vertical en el carril izquierdo.
SEM - Marketing en los motores de búsqueda
La comercialización del Motor de búsqueda es comercialización vía los motores de búsqueda, hechos con la optimización orgánica del motor de búsqueda, la publicidad de pago del Motor de búsqueda, y los programas de pago por inclusión.
Pago por inclusión
Como se mencionó anteriormente, muchos directorios web generales cobraban una tarifa fija única o una tasa anual por los sities de la web. Muchos motores de búsqueda de compras cobraban un coste fijo por clics y por ser incluido en sus bases de datos.
En cuanto a los principales motores de búsqueda, Inktomi popularizó el modelo de inclusión pagada. Ellos fueron comprados por Yahoo en diciembre de 2003. Después de que Yahoo cayó, Google puso en marcha su propia tecnología de búsqueda que siguió ofreciendo un programa de inclusión pagada en las SERPS, Yahoo Search Submit terminó a finales de 2009 .
Pago por clic
Los anuncios de pago por clic permiten a los motores de búsqueda vender tráfico orientado a los anunciantes con un coste por clic. Normalmente, los anuncios de pago por clic están orientados a palabras clave, pero en algunos casos, algunos motores también pueden agregar en segmentación local, orientación por comportamiento o permitir a los comerciantes pujar en los flujos de tráfico basados ​​en datos demográficos.
Los anuncios de pago por clic (adwords) suelen venderse en una subasta donde el mejor postor ocupa el primer lugar de esa palabra clave. Algunos motores, como Google y Microsoft, también determinan la tasa de clics de los anuncios en el coste del clic. Al hacerlo, se asegura que sus anuncios se hagan clic con más frecuencia y que sus anuncios sean más relevantes. Un anunciante que escribe un copy convincente, obtendrá un alto CTR con lo que se le permitirá pagar menos por cada clic para recibir tráfico.
En 1996, un joven de 18 años de edad llamado Scott Banister se le ocurrió la idea de cobrar a los anunciantes de búsqueda mediante el  clic con anuncios vinculados a la palabra clave de búsqueda. Lo promovió a los gustos de Yahoo !, pero su (falta de) visión fue corrompida por dinero fácil, por lo que no podía ver el potencial de búsqueda. La persona que finalmente corrió con la idea del Sr.Banister fue Bill Gross, de IdeaLab.
Overture (Anteriormente GoTo)
Overture, el pionero en la búsqueda pagada, fue lanzado originalmente por Bill Gross bajo el nombre de GoTo en 1998. Su idea era arbitrar flujos de tráfico y venderlos con un nivel de responsabilidad. La búsqueda de John Battelle tiene una sección entretenida sobre Bill Gross y la formación de la obertura. John también publicó esa sección en su blog.
Overture, el pionero en la búsqueda de pago, fue lanzado originalmente por Bill Gross bajo el nombre de GoTo en 1998. Su idea era arbitrar flujos de tráfico y venderlos con un nivel de responsabilidad. La búsqueda de John Battelle tiene una sección entretenida sobre Bill Gross y la formación de la Overture.
"Cuanto más [pensaba en ello], más me di cuenta de que el verdadero valor de Internet era su rendimiento de cuentas", dice Gross. "Las garantías de rendimiento tenían que ser el modelo para pagar por los medios de comunicación".
Gross sabía que ofrecer clics prácticamente libres de riesgo en un mercado sobrecalentado y voraz garantizó que GoTo despegara. Y aunque sería fácil afirmar que GoTo funcionó a causa de la burbuja de Internet, la compañía logró sobrevivir por una sencilla razón: funcionó.
Mientras que Overture fue exitoso, tuvo dos caídas importantes que les impidieron tomar la posición de mercado de Google:
Marca de destino: Google se ha permitido crecer hasta convertirse en un destino de búsqueda. Bill Gross decidió no crear Overture en esa línea, porque temía que le costaría las asociaciones de distribución. Cuando AOL seleccionó a Google como socio publicitario, a pesar de que Google también creó su propia marca, eso fue prácticamente las uñas del ataúd para que Overture fuera la primera plataforma de anuncios de búsqueda.
Eficiencia red publicidad Google AdWords aumenta la tasa de clics de los anuncios en sus costes publicitarios, lo que garantiza una mayor relevancia y una mayor eficiencia de la red de anuncios. Hasta septiembre de 2006, la plataforma Overture (conocida como Yahoo! Search Marketing) todavía no solucionaba ese problema.
Esas dos temas significaron que Overture dependía en gran medida de sus dos mayores socios de distribución: Yahoo! y Microsoft. Overture compró AltaVista y AllTheWeb para tratar de ganar un poco de apalancamiento, pero finalmente se vendieron a Yahoo! el 14 de julio de 2003 por  1,63  mil millones $.
AdWords de Google
Google AdWords se lanzó en el año 2000. La versión inicial fue un fracaso porque los precios de los anuncios estaba basado en un modelo de CPM plano. Algunas palabras clave eran demasiado caras e inasequibles, mientras que otras se vendían ineficientemente a un precio demasiado barato. En febrero de 2002, Google relanzó AdWords vendiendo los anuncios en una subasta similar a la de Overture, pero también agregó la tasa de clics de anuncios como un factor en las clasificaciones de anuncio.
Los afiliados y otros emprendedores de la web se fueron rápidamente a AdWords porque la orientación precisa y el gran alcance facilitaban la obtención de grandes beneficios desde la comodidad de su propia casa mientras se sentaban en ropa interior.
Con el paso del tiempo, AdWords se hizo más popular y los comercializadores más convencionales lo adoptaron, Google comenzó a cerrar algunos agujeros en su producto de AdWords. Por ejemplo, para luchar contra el ruido y mantener sus anuncios lo más relevantes posible, no permitieron la publicación de dos anuncios en un sitio web. Más tarde comenzaron a buscar en la calidad de la página de destino y establecer precios mínimos basados ​​en la calidad, lo que redujo los márgenes de muchos pequeños operadores de arbitraje y afiliados.
Google tiene la intención de tomar la segmentación de anuncios rastreables permitida por AdWords y extenderla a otros medios. Google ya ha probado anuncios impresos y de periódicos. Google permite a los anunciantes comprar anuncios gráficos o de vídeo en sitios web de contenido. El 17 de enero de 2006, Google anunció que compró dMarc Broadcasting, que es una compañía que utilizarán para ayudar a Google a vender anuncios de radio dirigidos.
El 15 de septiembre de 2006, Google se asoció con Intuit para permitir que las pequeñas empresas que utilizan QuickBooks puedan comprar AdWords desde dentro de QuickBooks. El objetivo es ayudar a que los anuncios locales sean más relevantes haciendo que más negocios pequeños utilicen AdWords.
El 20 de marzo de 2007, Google anunció que estaban realizando pruebas beta creando una red distribuida de publicidad por afiliación de pago por acción. El 13 de abril de 2007, Google anunció la compra de DoubleClick por 3.100 millones de dólares.
Yahoo! Search Marketing
Yahoo! Search Marketing es el nombre renombrado de Overture después de que Yahoo! los compró. A partir de septiembre de 2006, su plataforma es generalmente la misma que la antigua plataforma de Overture, con los mismos defectos: el CTR de anuncios no se tiene en cuenta en el coste de los clics, es difícil publicar anuncios locales y es generalmente torpe.
Microsoft AdCenter
En 2000, Microsoft lanzó un programa de anuncios orientado a palabras clave llamado palabras clave, pero lo cerró después de 2 meses porque temían que canibalizara sus ingresos publicitarios por banners.
Microsoft AdCenter fue lanzado el 3 de mayo de 2006. Mientras que Microsoft ha limitado la cuota de mercado, tienen la intención de aumentar su cuota de mercado mediante cocción de búsqueda en Internet Explorer 7.  En el frente de las características, Microsoft agregó focalización y segmentación demográficos. El algoritmo de anuncios de Microsoft incluye tanto el coste por clic como la tasa de clics de los anuncios.
Microsoft también creó la consola de juegos XBox y el 4 de mayo de 2006 anunció que compró una empresa de anuncios de video juegos llamada Massive Inc. Eventualmente, los anuncios de videojuegos se venderán desde Microsoft AdCenter.
El universo moderno de los motores de búsqueda
El Mercado de los buscadores de hoy está dominado por sólo cuatro competidores cuyo volumen de búsqueda combinada constituye aproximadamente el 98% del total del mercado mundial de motores de búsqueda.
  • Google ordena alrededor del 70% del mercado mundial de motores de búsqueda.
  • Bing viene en segundos con un poco más de 10% del mercado.
  • Baidu vienen en tercera con un poco menos de 10% del mercado.
  • Yahoo! entra en juego empatado en tercer lugar con Baidu.
Mientras que otros motores de búsqueda, como AOL y Ask, todavía se utilizan millones de veces cada día, su cuota de mercado combinada es significativa inferior al 1% del mercado mundial de motores de búsqueda.
¡¿Youtube?!
Una omisión notable cuando hablamos hoy en día de motores de búsqueda es las listas es YouTube. Hoy en día YouTube se ha convertido en el 2º buscador de información del planeta y aunque no es un motor de búsqueda en el sentido tradicional, cada vez más los usuarios buscan no solo vídeos sino información cómo vídeos. Información de productos, música, noticias y otros temas que se encuentran previamente principalmente a través de los motores de búsqueda. Si el volumen de búsquedas de YouTube se compara con la lista de motores de búsqueda, YouTube, propiedad de Google, en realidad puede ser como decíamos el segundo mayor motor de búsqueda en la web.
Solo para tus ojos
Un rápido crecimiento del segmento de mercado de los motores de búsqueda es el segmento de búsqueda privada. Este segmento se compone de motores de búsqueda como DuckDuckGo , Página principal de Ixquick , y Qrobe.it . Es atractivo para personas que piensan que la privacidad de sus datos es importante, que sus de  hábitos búsqueda no van a ser rastreados y luego vendidos a terceros para publicidad. Yo pienso que se han posicionado en esa idea por simplemente nicho de mercado. Mientras que estos motores de búsqueda siguen utilizando un modelo de búsqueda basado en la publicidad, si es verdad que no se recogen, almacenan o venden los datos de los usuarios.
Mientras que el promedio actual de DuckDuckGo es de alrededor de 10 millones de consultas por día palidece en comparación con los 3,5 mil millones de consultas cada día procesados por Google, que representa un aumento de 100 veces en el volumen total de búsquedas entre 2011 y 2016.
La sofisticación de motores de búsqueda
La tendencia en los últimos dos años en el desarrollo de la tecnología de búsqueda ha sido hacia una mayor sofisticación. Ejemplos de innovación de la investigación desde 2010 incluyen:
  • Un rendimientos más rápido de búsqueda gracias a googlesuggest y los resultados de búsqueda generados al instante, una innovación llamadabúsqueda instantánea .
  • El uso de rich snnipets y del marcado Schema.org para producir resultados de búsqueda ricos y segmentados, tales como evaluaciones de productos en base a un sistema de calificación de 5 estrellas, que se muestra a la derecha en la página de los resultados de búsqueda.
  • Control del SPAM, la duplicación de contenido, contenido de baja calidad, y sitios web que hacen uso excesivo de anuncios.
  • La capacidad de los motores de búsqueda para procesar la conversión de unidades, conversiones de moneda, cálculos matemáticos sencillos, definiciones, traducción de idiomas, y tareas similares, mostrando los resultados en la página de resultados de búsqueda. Bueno para el usuario malo para el SEO.
  • Los resultados con información enciclopédica directamente en los resultados de búsqueda, una característica llamada Knowledge Graph  .
Claramente, los motores de búsqueda ya no cumplen con decir simplemente donde se puede encontrar la información que está buscando. Ellos sirven la información hasta que ya la tienen en su poder, entonces ya la muestran directamente a los usuarios. En parte es gracias a nosotros que se la damos más estructurada cada vez con la excusa del hoy sin pensar en el mañana. Mientras eso sí, se muestran anuncios a los usuarios ofrecidos por los anunciantes y yo me digo:
¿Los que les hemos dado la información no tendríamos derecho a un porcentaje?
El futuro de las búsquedas en la Web
Hacia donde la búsqueda se dirige es una incógnita. ¿Búsqueda privada?, es verdad que entra con fuerza pero todavía representa sólo una pequeña fracción del mercado global. Pero es un retroceso claro en contra de las prácticas de publicidad y de los líderes de la industria tales como Google. Google, por su parte, ha crecido hasta convertirse en una empresa por valor de cientos de miles de millones de dólares y generó casi 75 mil millones de $ en ingresos solo en 2015. Al mismo tiempo, el número de dispositivos conectados a Internet, las familias y los usuarios sigue creciendo y la búsqueda representa el mecanismo fundamental utilizado para buscar información en la web.
Mientras que el futuro de la búsqueda puede ser una incógnita, de una cosa podemos estar seguros: mientras exista un cajón de búsqueda, no va a desaparecer pronto.
Publicado por en

No hay comentarios:

Publicar un comentario

Suscribirse a: Enviar comentarios (Atom)