Maxim Polyakov: de que são feitos os buscadores e como o Google se tornou o principal (e ainda é)
Miscelânea / / April 14, 2023
A única ameaça ao líder global é o surgimento de redes neurais.
Quanto maior a quantidade de informações na Web, mais precisamos dos mecanismos de busca. O primeiro lugar entre eles há muito tempo é firmemente ocupado pelo Google. Por que sua aparência revolucionou e o que esperar do desenvolvimento de ferramentas da web no futuro, disse o professor do MGIMO e gerente de mídia Maxim Polyakov. Lifehacker fez um resumo de sua palestra em uma conferência interdisciplinar Captura de tela_2023, que aconteceu em Moscou nos dias 25 e 26 de março.
Maxim Polyakov
Jornalista, media manager, professor do Departamento de Jornalismo Internacional do MGIMO.
Quando e por que os usuários precisavam dos mecanismos de pesquisa
O volume de informações no planeta Terra está aumentando constantemente. Durante séculos, os dados foram acumulados em dispositivos analógicos - primeiro em manuscritos e livros, depois - em discos de vinil, em filmes e videocassetes.
Em 1993 foram armazenamento de dados digitais. E desde então, a participação da informação digital vem crescendo. Em 2002, ocorreu uma virada: o volume de dados no digital passou a ser igual ao das fontes analógicas. A era digital começou. Desde então, o estoque de dados digitais cresceu exponencialmente e, com ele, o volume total de informações no planeta também aumentou.
Surge um problema: não está claro como encontrar rapidamente o que você precisa nessa enorme quantidade de informações. Isso é o que os motores de busca fazem.
Em 1998, quando o Google entrou no mercado pela primeira vez, havia vários serviços de busca na Internet. Por exemplo, os portais AltaVista e Lycos estavam disponíveis na Rússia e, no total, havia mais de uma dúzia desses recursos: Netscape, Ask Jeeves, AOL, MSN e outros. Google tornou-se um deles e derrotou os concorrentes.
As conclusões sobre como é melhor do que outros motores de busca, em 1999, foram feitas pelo cientista espanhol Ramon Salvera. No final dos anos 90, ele se deparou com uma dissertação interessante da Universidade de Stanford. Chamava-se "Research papers about Google and the Web Base" e foi publicado em 1997. Seus autores foram os estudantes de pós-graduação Sergey Brin e Larry Page.
Salvera leu a dissertação e testou a string de busca. E ele imediatamente escreveu um artigo para o jornal da cidade "Navarre Diary", que chamou de "A Revolução do Google".
Ramon e eu discutimos qual é o segredo do Google e compartilho com vocês as conclusões - a minha e a dele.
Maxim Polyakov
Como os mecanismos de busca funcionavam antes do Google
Digite na barra de pesquisa solicitar - por exemplo, "loja de ferragens". O algoritmo encontra documentos que contêm esta frase. Em seguida, o buscador conta quantas vezes as palavras-chave se repetem na página. Esses documentos, onde há mais referências desse tipo, recaem nas primeiras linhas da edição.
Importante: o mecanismo de busca não sabe que tipo de página são essas - talvez sites de lojas ou apenas recursos que escrevem sobre construção. Portanto, o algoritmo não pode determinar como os documentos úteis nos resultados da pesquisa serão úteis para o usuário. Como resultado, uma pessoa recebe uma longa lista de sites e tem que abrir cada página e procurar por muito tempo as corretas entre elas.
Como o Google mudou fundamentalmente as regras de pesquisa
A principal coisa que apareceu no Google é o PageRank, um novo algoritmo de busca. Brin e Page decidiram que não valeria a pena pesquisar na Internet documentos individuais por vez, mediante solicitação, e depois emiti-los em uma lista. Você precisa explorá-los todos de uma vez. Ao mesmo tempo, é importante selecionar da lista geral aqueles que serão mais significativos para o usuário.
O mais difícil é encontrar o critério certo que mostre a autoridade do documento. Para fazer isso, os autores desenvolveram uma fórmula especial e chamaram o valor resultante de PR - PageRank.
A descoberta revolucionária dos criadores do Google - a escolha dos critérios para avaliar a importância do documento. Eles se tornaram links.
A principal coisa que foi levada em consideração no novo algoritmo é quantas vezes outros recursos se referem ao documento. Aquele que é mencionado com mais frequência torna-se o primeiro no ranking e é reconhecido como o de maior autoridade. Por exemplo, se sete em cada dez sites referir-se a um, então o líder é ele.
Como resultado, vários nós são selecionados com o maior número de links. Além disso, a fórmula leva em consideração se nosso “número um” encontrado menciona algum documento. Se houver tais páginas, elas subirão imediatamente no ranking. Links de documentos no topo da lista sempre pesam mais do que links de fontes abaixo.
Eventualmente do utilizador vê sites nos resultados da pesquisa que são realmente úteis para ele. Ele não precisa perder tempo analisando páginas onde as palavras-chave são mencionadas - o Google já fez isso por ele.
O usuário não precisa de 20 minutos ou uma hora para selecionar o site desejado na lista. Isso se tornou uma das vantagens matadoras do Google. Este motor de busca, sem qualquer publicidade, espalhou-se instantaneamente pelo mundo, todos enviaram uns aos outros e disseram: "Bem, experimente, veja como funciona."
Maxim Polyakov
Como o Google chegou ao topo e por que detém a liderança
Os fundadores do Google criaram não apenas o algoritmo de busca. Eles desenvolveram a arquitetura da empresa e criaram os princípios básicos de seu trabalho.
Brin e Page registraram o Google em 1998 e começaram a construir seu futuro. corporação na garagem de Susan, amiga de Brin. No quadro branco, os caras escreveram: “Foco no usuário”. Um pouco mais tarde, eles formularam a missão da empresa.
Nosso objetivo é sistematizar todas as informações disponíveis no mundo e torná-las acessíveis e convenientes para o uso.
Sergey Brin e Larry Page
Para o Google, a prioridade desde o início foi quem define a consulta de pesquisa, e não as organizações que criaram os sites e aguardam novos clientes. Portanto, a empresa decidiu imediatamente: anúncio devem ser claramente separados dos resultados de pesquisa e uma pessoa não deve confundir resultados de pesquisa orgânica com anúncios pagos. Essa regra atraiu usuários e ajudou a aumentar a audiência.
É muito importante. As pessoas vêm apenas para uma pesquisa de alta qualidade. Não para encontrar um anúncio relevante para uma loja de ferragens, mas para encontrar uma loja real que seja necessária agora.
Maxim Polyakov
A empresa recebeu rapidamente o primeiro investimentos. O Google entrou entre os dez recursos mais populares da Internet no início de 2001 e subiu facilmente para a quinta linha. Em 2004, o projeto deixou de ser "garagem" e veio a público. Em 2006, a corporação comprou o YouTube e a empresa que desenvolveu o sistema operacional Android. Essas aquisições aceleraram o crescimento.
Em março de 2006, o Google subiu para o primeiro lugar entre todos os recursos da Internet. Em novembro de 2009, ele perdeu brevemente o campeonato para o Yahoo!, mas em janeiro de 2010 recuperou a posição e ainda permanece na liderança.
Hoje, o Google para usuários é várias plataformas:
- Algoritmo de busca.
- Serviço de publicidade contextual.
- Navegador.
- Sistema operacional para smartphones.
- Dezenas de serviços para usuários comuns e empresas: correio, mapas, documentos, planilhas e muito mais.
Uma razão importante para o sucesso da empresa é cultura corporativa.
Brin e Page, ao escolher um novo funcionário, propuseram a realização de um experimento mental: imagine que você tenha que passar seis horas com essa pessoa no aeroporto, porque voo atrasou. Quão confortável ele ficará?
Dessa forma, eles criaram um ambiente no qual as pessoas se encaixam. Foi necessário para o desenvolvimento da empresa e o surgimento de inovações.
Tudo isso levou ao fato de que hoje, entre todas as solicitações dos usuários aos mecanismos de pesquisa, o Google representa 92,21%. Isso é um monopólio global.
O que há de bom em "Yandex" - o principal concorrente do Google na Rússia
Existem apenas dois países nos quais o Google tem concorrentes sérios e a empresa não pode fazer nada a respeito. Esta é a China - 68,66% das pesquisas são feitas no portal Baidu local. E a Rússia - temos mais de 45% dos pedidos recebidos pelo "Yandex".
Este mecanismo de busca foi criado por Ilya Segalovich e Arkady Volozh em 1997 - ou seja, quase simultaneamente com o Google. Hoje Yandex é o site número 1 na Rússia.
Como o Google, é um sistema de plataforma. A plataforma combina vários serviços diferentes que cobrem as diferentes necessidades do cliente. Em primeiro lugar, aqui está também um motor de busca algoritmo. É muito bom, mas não se sabe tanto sobre como funciona quanto sobre o algoritmo do Google.
Recentemente, eles disseram: "Não sabemos como nosso algoritmo funciona - este é o Matrix Net, nossa rede neural, funciona com ele e se aprimora constantemente". Sabe-se que funciona bem, mas não sabemos em que consiste.
Maxim Polyakov
Além do mecanismo de busca, o Yandex possui uma plataforma de publicidade e navegador. Mais serviços adicionais: correio, mapas, disco, mercado e outros. O maior lucro hoje é trazido pelo Yandex Taxi e serviços de entrega.
O que muda o ChatGPT na nossa relação com os motores de busca
Em 2023, ou seja, agora, outra revolução está acontecendo. O Google ainda é o líder e, por algum tempo, manterá o primeiro lugar, mas não sabemos o que acontecerá a seguir.
Algumas coisas mudaram em 2023. Uma rede neural apareceu. O ChatGPT colocou em movimento uma indústria tão inabalável quanto a pesquisa e a publicidade contextual.
Maxim Polyakov
Em fevereiro, o CEO Microsoft Satya Nadella, durante um discurso no escritório de sua empresa, anunciou que uma nova era havia começado. Segundo ele, toda a história das tecnologias web é dividida em três etapas:
- Computador pessoal + servidor.
- Tecnologias móveis + sistemas de armazenamento em nuvem.
- Inteligência artificial.
Estamos no início de uma nova terceira era. Até a data de início é conhecida - Satya Nadella disse isso em 8 de fevereiro de 2023.
ChatGPT ganhou um milhão de usuários em 5 dias. Este é o aumento mais rápido na história da Internet. O líder anterior, Instagram*, levou 75 dias para alcançar o mesmo resultado.
A rede neural agora está integrada ao mecanismo de busca do Bing. A pergunta na barra de pesquisa soa assim: "Pergunte-me qualquer coisa" ou "Pergunte-me algo". O ChatGPT responde a perguntas complexas e o faz em detalhes. Além disso, é capaz de lidar com tarefas que antes eram usadas em Teste de Turing. Antes, ele sempre ajudava a distinguir uma pessoa de um algoritmo de máquina, mas agora tudo mudou.
Sergey Brin voltou ao Google após cinco anos de férias. Ele teve que voltar ao trabalho porque o surgimento de redes neurais na empresa declarou um nível de alerta vermelho. Google está tentando tornar ativo bardo - próprio chatbot. Acredita-se que seus parâmetros sejam cinco vezes maiores que os recursos do GPT. Mas essa rede neural ainda não está totalmente operacional.
O mundo virou para o outro lado e, como monopólio global, o Google provavelmente deixará de existir. Mas vamos ver. Vários cenários são possíveis.
Maxim Polyakov
* Atividades da Meta Platforms Inc. e suas redes sociais Facebook e Instagram são proibidas no território da Federação Russa.
Leia também🧐
- 8 mecanismos de busca melhores que o Google
- Onde você pode incorporar o ChatGPT e por quê: 5 opções
- Singularidade tecnológica: é verdade que a tecnologia logo sairá do nosso controle