Uma breve história da pesquisa e como o Google saiu no topo

Depois de meia dúzia (ou mais) tentativas malsucedidas ao longo dos anos para encontrar uma alternativa melhor, levei-me a tentar decifrar o que torna o Google melhor que os concorrentes neste espaço.

Depois de meia dúzia (ou mais) tentativas malsucedidas ao longo dos anos para encontrar uma alternativa melhor, levei-me a tentar decifrar o que torna o Google melhor que os concorrentes neste espaço.
Propaganda

Depois de tentar amar Bing Como Bing prevê se tornou tão bom Como Bing prevê se tornou tão bom Hora de sair do seu dia de trabalho e começar a jogar via Bing Previsões? Não é bem assim, mas vamos dar uma olhada em como o Bing se tornou tão bom em prever o futuro. Leia mais, flertando com a privacidade aumentada de DuckDuckGo 10 Respostas imediatas úteis de DuckDuckGo que poupam seu tempo e alguns cliques 10 Respostas instantâneas úteis de DuckDuckGo que poupam seu tempo e alguns cliques Instant Answers é uma coleção de guloseimas de DuckDuckGo que potencialmente tornam sua pesquisa on-line vida um pouco mais fácil. Aqui estão dez de uma lista enorme que você pode experimentar neste mecanismo de busca alternativo. Leia mais, e (obturador), mesmo tentando ver se o Yahoo foi melhor do que da última vez que usei (por volta de 2004), eu ainda não consigo encontrar uma opção melhor para a pesquisa on-line do que o campeão reinante, o Google.

A diferença está diminuindo, mas, em última análise, o Google ainda é o principal, devido à relevância dos resultados, à velocidade com que os sites são indexados e as pesquisas são executadas, e seu esforço constante para melhorar ainda mais.

Depois de meia dúzia (ou mais) tentativas sem sucesso ao longo dos anos para encontrar uma alternativa melhor 13 motores de busca alternativos que encontram o que o Google não pode 13 motores de busca alternativos que encontrar o Google não pode Google Search ainda não pode fazer tudo. Estes 13 motores de busca alternativos podem cuidar de alguns empregos de nicho para você. Leia mais, isso me levou a tentar decifrar o que torna o Google melhor que os concorrentes nesse espaço.

Aqui está o que eu encontrei.

Um breve histórico da tecnologia do mecanismo de pesquisa

Primeiro, acho que é sensato examinar algumas das tecnologias que impulsionam os mecanismos de pesquisa. Como funcionam os mecanismos de pesquisa? Como funcionam os mecanismos de pesquisa? Para muitas pessoas, o Google é a internet. É sem dúvida a invenção mais importante desde a própria Internet. E, embora os mecanismos de pesquisa tenham mudado muito desde então, os princípios subjacentes ainda são os mesmos. Leia mais e as empresas que nos trouxeram até aqui.

A criação de Archie (1990)

motor de pesquisa de archie

Archie é amplamente considerado o primeiro mecanismo de busca. Embora aparentemente primitivo agora, o Archie era uma ferramenta que indexava sites FTP publicamente acessíveis, na tentativa de permitir que os usuários encontrassem arquivos específicos. Isso era pré-world wide web, então você teria que acessar os servidores Archie usando um cliente local ou através do Telnet O que é o Telnet e quais são seus usos? [MakeUseOf explica] O que é o Telnet e quais são seus usos? [MakeUseOf Explains] O Telnet é um desses termos de tecnologia que você pode ouvir ocasionalmente, mas não em um anúncio ou lista de produtos de lavanderia que você pode comprar. Isso porque é um protocolo ou uma linguagem ... Read More, que é um protocolo de rede que permite a conexão de dois computadores na mesma rede.

Archie estimulou a inovação em tecnologias adicionais que funcionavam de maneira semelhante, como Veronica e Jughead, VLib, Gopher e outras. Essas tecnologias foram as pioneiras do setor de pesquisa, embora tenham sido rapidamente substituídas por tecnologias mais avançadas.

World Wide Web Wanderer (1993)

Criado em 1993, o World Wide Web Wanderer foi o primeiro bot criado para indexar sites e inseri-los automaticamente em um banco de dados. O Wandex, como veio a ser, começou como uma maneira de medir o tamanho da web contando servidores ativos em todo o mundo para medir o crescimento. Em vez disso, tornou-se o modelo para os web spiders modernos, responsáveis ​​pelo rastreamento da Web para indexar seu conteúdo.

Excite (1993)

excite-modern-day-homepage

Excite foi um projeto de seis estudantes de graduação da Universidade de Stanford que tentaram usar a análise estatística de relacionamentos em linguagem comum, a fim de melhorar a relevância na indexação. O Excite - então conhecido como Architext - usou jornalistas para escrever breves análises de sites para melhorar a usabilidade quando comparado a mecanismos e diretórios de busca baseados em links mais primitivos.

O boom do mecanismo de pesquisa (1994)

1994 foi provavelmente o maior ano na história dos mecanismos de busca. Dentro de um período de 12 meses, vimos o lançamento do Infoseek, AltaVista, WebCrawler, Yahoo! e Lycos.

  • Infoseek: Permitiu que os usuários enviassem suas páginas da Web em tempo real e as indexassem automaticamente com base nas categorias definidas pelo usuário.
  • AltaVista: o primeiro mecanismo de pesquisa a usar largura de banda ilimitada, permitir consultas de pesquisa em linguagem natural e o uso de modificadores de pesquisa para aprovar resultados.
  • WebCrawler: O primeiro rastreador que indexou páginas inteiras em oposição a apenas títulos ou títulos e descrições.
  • Lycos: O primeiro mecanismo de pesquisa para classificar por relevância. A Lycos também teve consistentemente o maior banco de dados de sites armazenados, e em seu pico (por volta de 1996), o serviço havia rastreado e indexado mais de 60 milhões de sites.

Os mecanismos de pesquisa durante esse período de tempo (e vários anos depois) fizeram uso intenso de metatags que continham título, descrição e elementos-chave adicionados a um site pelo webmaster. Essas tags, bem como a densidade de palavras-chave no texto de um site, foram os principais fatores de classificação que ajudaram as pessoas a identificar e indexar conteúdo adequadamente.

Ele também abriu a porta para o spam na web, pois os primeiros especialistas em SEO rapidamente aprenderam a manipular esse sistema colocando palavras-chave em tags e conteúdo de maneira não natural, na tentativa de jogar o sistema.

Perguntar / perguntar Jeeves (1997)

ask-homepage

Ask - e o serviço Ask Jeeves - usaram editores humanos para tentar listar consultas de pesquisa de usuários populares em listagens de sites de inclusão de parceiros e pagos. O serviço utilizou a automação na forma de um sistema de classificação chamado DirectHit, que tentou classificar os sites por popularidade, mas descobriram que isso era muito fácil de manipular e interrompeu o uso do mecanismo alguns anos depois.

MSN / Bing (1998/2009)

O MSN lançou seu próprio mecanismo de busca para aproveitar o sucesso de outros produtos da Microsoft e segue para a pesquisa online. O mecanismo de busca contava com Overture, Looksmart e outros diretórios de inclusão pagos para fornecer resultados de pesquisa até que o Google comprovasse o sucesso de seu modelo de backlink.

Essa prova de conceito do Google levou o MSN a adotar uma estratégia semelhante - embora não tão boa - em 2004.

Em 2009, o MSN foi renomeado como Bing e melhorou a interface do usuário, para incluir pesquisa em linha (sugestões que aparecem enquanto você digita), conteúdo que aparece na página de resultados de pesquisa (em vez de clicar em um link para um dos resultados da pesquisa ), e uma série de novos recursos projetados para tornar a pesquisa mais fácil e acessível.

Como o Google se tornou o melhor (e por que ainda é)

No final dos anos 90, os mecanismos de busca haviam se tornado quase inutilizáveis ​​devido à relevância (ou falta deles) dos resultados de pesquisa e à prevalência de spam na web. Antes de seu lançamento em 1998, e por meia década depois, os concorrentes realmente não tinham resposta para os problemas crescentes causados ​​pelo spam na web e pela manipulação de mecanismos de busca - que acabou se tornando conhecido como SEO (search engine optimization).

Digite o Google.

google-flat-logo

O Google começou como um projeto - conhecido como BackRub - por Larry Page e Sergey Brin em 1996. O objetivo deste projeto era revolucionar a pesquisa usando links como a principal métrica de classificação para melhorar a relevância. A teoria - conhecida como notação de citação - girava em torno da ideia de que cada site vinculado a outro site estava essencialmente expressando sua confiança no conteúdo oferecido em suas páginas. Esses links serviram como votos, e o texto âncora no link serviu como uma maneira de indexar sites com base no que os outros estavam emitindo para esses votos.

A tecnologia foi emocionante, e isso levou Brin e Page a tentar vendê-la para concorrentes no mundo de buscas por US $ 750 mil. Felizmente, ninguém estava interessado. De volta à prancheta, Page e Brin continuaram a melhorar a tecnologia e, em 2000, o Google era o maior mecanismo de busca do mundo.

Como o Google permanece no topo

A adaptabilidade pode ser a melhor maneira de descrever como o Google continua sendo o mecanismo de pesquisa mais usado no mundo. Como os profissionais de marketing e os especialistas em mecanismos de pesquisa aprendem a manipular o sistema, o Google o altera. Quando novas tecnologias - como as mídias sociais - começam a desempenhar um papel ativo em nossas conversas, o Google encontra uma maneira de integrá-las ao algoritmo para melhorar a relevância. Quando os hábitos de pesquisa mudam, o Google muda com eles.

O Google está constantemente assistindo, analisando e evoluindo. Ao utilizar as enormes quantidades de dados que eles coletam de cada um de nós usando seus produtos, eles são capazes de fornecer constantemente um produto melhor, mais relevante e fácil de usar do que qualquer um de seus concorrentes.

O que o futuro da pesquisa parece

motor de busca-lupa

Enquanto o Google está no topo e não parece haver nenhum concorrente no horizonte capaz de desbancá-los, as coisas mudam rapidamente na web. Aqui está o que o Google - e outros - estão fazendo para melhorar a relevância de nossos resultados de pesquisa agora e no futuro próximo.

Entendendo a Intenção do Usuário e a Semântica

Mecanismos de pesquisa, incluindo o Google, costumavam fornecer resultados com base em como as consultas correspondiam às páginas da Web. Agora, Bing, Google e Yahoo! todos estão tentando melhorar seus resultados com base na compreensão da intenção por trás deles, conhecida como busca semântica O que é o markup semântico e como ele mudará a Internet para sempre [tecnologia explicada] O que é o markup semântico e como ele mudará a Internet para sempre ] Consulte Mais informação .

Por exemplo, se um usuário pesquisar "Melhor marisco", os resultados de anos anteriores dependerão de qual site foi considerado o mais autoritário para essas palavras-chave. Agora, os mecanismos de pesquisa estão colocando uma ênfase maior em entender o que você está procurando especificamente, para que eles possam fornecer os resultados mais otimizados. Nesse caso, o usuário provavelmente está procurando os melhores restaurantes de frutos do mar nas proximidades ou receitas. Entender que trilhões de possíveis consultas de pesquisa é o local onde as coisas se complicam.

Maior ênfase na localização

O exemplo acima para uma consulta sobre frutos do mar é uma das principais razões pelas quais a localização está se tornando tão importante. Você provavelmente não está procurando restaurantes de frutos do mar em San Francisco, se você mora em Cingapura (mas se você é, basta adicionar "em São Francisco" à sua consulta). A pesquisa baseada em localização está mudando tudo, já que todos os principais mecanismos de pesquisa estão utilizando sua localização para fornecer resultados personalizados para suas pesquisas.

Experiência móvel aprimorada

Firefox Mobile

2015 foi a primeira vez na história que o tráfego móvel ultrapassou o de laptops e desktops, e ainda é uma tendência com rápido movimento ascendente. Na verdade, a maior parte do tráfego da web originado em smartphones é relacionado à pesquisa. Devido à mudança de tempo em que vivemos, é importante fornecer uma experiência móvel aprimorada para usuários móveis.

O Google está fazendo exatamente isso lançando um novo algoritmo móvel que oculta sites que não são exibidos corretamente em dispositivos móveis. Essa mudança algorítmica é apenas para o tráfego móvel, mas deve enriquecer a experiência dos usuários móveis e abrir caminho para mais inovação móvel.

Yahoo! é outro grande mecanismo de pesquisa com foco em dispositivos móveis. A CEO Marissa Mayer (ex-funcionária do Google) mudou o foco para o Yahoo! para priorizar o celular como principal meio de recuperar a relevância.

Gráfico de conhecimento

O Bing e o Google investem em grande parte na utilização de seus enormes bancos de dados de informações, a fim de fornecer informações rápidas para palavras-chave e frases específicas. Para melhorar a experiência do usuário, ambos tentam eliminar etapas adicionais nas quais o usuário deve seguir para encontrar informações e, em vez disso, confiar na tecnologia de conhecimento gráfico Um exame aprofundado do novo gráfico de conhecimento do Google Uma análise aprofundada do novo conhecimento do Google Gráfico Leia mais.

Por exemplo, filmes, nomes de celebridades ou consultas relacionadas à localização agora apresentam informações sobre a consulta na parte superior da página. Para pesquisas rápidas, isso pode economizar as etapas adicionais de ter que ir mais fundo nos resultados ou visitar vários sites para encontrar as informações.

Isso tem grandes implicações no celular, bem como na pesquisa por voz (como o Siri ou o Google Now), já que a maioria das pesquisas são tentativas rápidas de recuperar informações, em oposição a pesquisas exaustivas de pesquisa.

knowledge-graph-screenshot

Encontrando novas maneiras de melhorar os algoritmos

Os motores de busca estão constantemente em guerra uns com os outros, bem como os desconhecidos que se escondem ao virar da esquina. Na tentativa de ser o melhor, cada um deve entregar resultados altamente relevantes e rapidamente. Como tal, os algoritmos em todos os principais mecanismos de pesquisa estão constantemente mudando, na tentativa de ficar à frente da curva, e encontrar novas métricas que podem levar a melhores resultados.

Um dos exemplos mais empolgantes disso pode ser a pontuação de Confiança Baseada no Conhecimento. O Google pode Usar um Algoritmo para Determinar a Verdade? O Google pode usar um algoritmo para determinar a verdade? O Google está pesquisando se seu algoritmo pode incluir a verdade como um fator de classificação. O que isso significa para a web? Leia mais, com base em uma patente detida pelo Google. Embora o Google tenha negado qualquer intenção de usar essa patente em seu algoritmo de busca no futuro próximo, as implicações disso são enormes. Se você já recebeu informações incorretas depois de uma pesquisa on-line, esse novo sistema de pontuação pode mudar tudo isso classificando sites com base nos resultados do Google Knowledge Vault (lojas de fatos retiradas de conteúdo indexado) e como elas se equiparam.

Em última análise, tentar prever qual tecnologia de mecanismo de busca fora do próximo ou do próximo ano parece ser um exercício supremo de futilidade. Dito isso, ele deve continuar nos aproximando de uma era em que nos deparamos com a resposta a qualquer pergunta de maneira quase instantânea.

Existe um motor de busca melhor que o Google? O que faz melhor? Quais tecnologias ou mudanças relacionadas à pesquisa você está mais animada para ver em um futuro próximo? Som desligado nos comentários abaixo. Eu adoraria ouvir sua opinião!

Crédito da imagem: Mecanismo de busca via Shutterstock, Firefox Mobile por Johan Larsson via Flickr, Otimização de código do site via Shutterstock

In this article