Maxim Polyakov: waar zoekmachines van gemaakt zijn en hoe Google de belangrijkste werd (en nog steeds is)
Gemengde Berichten / / April 14, 2023
De enige bedreiging voor de wereldleider is de opkomst van neurale netwerken.
Hoe groter de hoeveelheid informatie op het web, hoe meer we zoekmachines nodig hebben. De eerste plaats onder hen is al lang stevig bezet door Google. Waarom het uiterlijk een revolutie heeft teweeggebracht en wat te verwachten van de ontwikkeling van webtools in de toekomst, zei MGIMO-professor en mediamanager Maxim Polyakov. Lifehacker maakte een samenvatting van zijn lezing op een interdisciplinaire conferentie Schermafbeelding_2023, die plaatsvond in Moskou op 25 en 26 maart.
Maxim Polyakov
Journalist, mediamanager, professor aan de afdeling Internationale Journalistiek van MGIMO.
Wanneer en waarom gebruikers zoekmachines nodig hadden
De hoeveelheid informatie op planeet Aarde neemt voortdurend toe. Eeuwenlang zijn gegevens verzameld op analoge apparaten - eerst in manuscripten en boeken, later - op vinylplaten, op film en videocassettes.
In 1993 waren er digitale gegevensopslag. En sindsdien is het aandeel van digitale informatie alleen maar gegroeid. In 2002 kwam er een keerpunt: de hoeveelheid data in digitale bronnen werd gelijk aan analoge bronnen. Het digitale tijdperk is begonnen. Sindsdien is de voorraad digitale data exponentieel gegroeid en daarmee ook de totale hoeveelheid informatie op de planeet.
Er doet zich een probleem voor: het is niet duidelijk hoe je snel kunt vinden wat je nodig hebt in deze enorme hoeveelheid informatie. Dat is wat zoekmachines doen.
In 1998, toen Google voor het eerst op de markt kwam, waren er verschillende zoekdiensten op internet. AltaVista- en Lycos-portals waren bijvoorbeeld beschikbaar in Rusland, en in totaal waren er meer dan een dozijn van dergelijke bronnen: Netscape, Ask Jeeves, AOL, MSN en andere. Google werd een van hen en versloeg concurrenten.
Conclusies over hoe het beter is dan andere zoekmachines, in 1999, werden gemaakt door de Spaanse wetenschapper Ramon Salvera. Eind jaren 90 stuitte hij op een interessant proefschrift van Stanford University. Het heette "Research papers about Google and the Web Base" en werd gepubliceerd in 1997. De auteurs waren afgestudeerde studenten Sergey Brin en Larry Page.
Salvera las het proefschrift en testte de zoekstring. En hij schreef meteen een artikel voor de stadskrant "Navarre Diary", dat hij "The Google Revolution" noemde.
Ramon en ik bespraken wat het geheim van Google is, en ik deel de conclusies met jullie - de mijne en de zijne.
Maxim Polyakov
Hoe zoekmachines werkten vóór Google
Voer in de zoekbalk in verzoek - bijvoorbeeld "ijzerhandel". Het algoritme vindt documenten die deze zin bevatten. Vervolgens telt de zoekmachine hoe vaak de zoekwoorden op de pagina worden herhaald. Die documenten, waar meer van dergelijke verwijzingen zijn, vallen op de eerste regels van de kwestie.
Belangrijk: de zoekmachine weet niet wat voor soort pagina's dit zijn - misschien winkelsites, of misschien alleen bronnen die over constructie schrijven. Daarom kan het algoritme niet bepalen hoe nuttig documenten in de zoekresultaten nuttig zullen zijn voor de gebruiker. Als gevolg hiervan ontvangt een persoon een lange lijst met sites en moet hij elke pagina lang openen en naar de juiste zoeken.
Hoe Google de zoekregels fundamenteel heeft veranderd
Het belangrijkste dat in Google verscheen, is PageRank, een nieuw zoekalgoritme. Brin en Page besloten dat het niet de moeite waard zou zijn om op verzoek achtereenvolgens op internet naar afzonderlijke documenten te zoeken en ze vervolgens in een lijst uit te geven. Je moet ze allemaal tegelijk verkennen. Tegelijkertijd is het belangrijk om uit de algemene lijst die te selecteren die het belangrijkst zijn voor de gebruiker.
Het moeilijkste is om het juiste criterium te vinden dat de autoriteit van het document zou aantonen. Om dit te doen, hebben de auteurs een speciale formule ontwikkeld en de resulterende waarde van PR - PageRank genoemd.
De revolutionaire ontdekking van de makers van Google - de keuze van criteria voor het beoordelen van het belang van het document. Het werden schakels.
Het belangrijkste waarmee in het nieuwe algoritme rekening is gehouden, is hoe vaak andere bronnen naar het document verwijzen. Degene die het vaakst wordt genoemd, wordt de eerste in de ranglijst en wordt erkend als de meest gezaghebbende. Bijvoorbeeld als zeven van de tien sites verwijzen naar een, dan is hij de leider.
Als gevolg hiervan worden verschillende knooppunten geselecteerd die de meeste koppelingen hebben. Verder houdt de formule er rekening mee of onze gevonden "nummer één" documenten vermeldt. Als er dergelijke pagina's zijn, stijgen ze meteen in de ranglijst. Documentlinks uit de top van de lijst wegen altijd zwaarder dan links uit onderstaande bronnen.
Eventueel gebruiker ziet sites in de zoekresultaten die echt nuttig voor hem zijn. Hij hoeft geen tijd te besteden aan het analyseren van pagina's waar trefwoorden worden genoemd - Google heeft dit al voor hem gedaan.
De gebruiker heeft geen 20 minuten of een uur nodig om de gewenste site uit de lijst te selecteren. Dit is een van de geweldige voordelen van Google geworden. Deze zoekmachine, zonder enige reclame, verspreidde zich onmiddellijk over de hele wereld, iedereen stuurde het naar elkaar en zei: "Probeer het eens, kijk hoe het werkt."
Maxim Polyakov
Hoe Google aan de top kwam en waarom het de leiding heeft
De oprichters van Google hebben niet alleen het zoekalgoritme gemaakt. Ze ontwikkelden de architectuur van het bedrijf en bedachten de belangrijkste principes van zijn werk.
Brin en Page registreerden Google in 1998 en begonnen aan hun toekomst te bouwen. corporatie in de garage van Susan, de vriendin van Brin. Op het whiteboard schreven de jongens: "Focus op de gebruiker." Even later formuleerden ze de missie van het bedrijf.
Ons doel is om alle beschikbare informatie in de wereld te systematiseren en toegankelijk en gebruiksvriendelijk te maken.
Sergey Brin en Larry Page
Voor Google was vanaf het begin de prioriteit degene die de zoekopdracht instelt, en niet de organisaties die de sites hebben gemaakt en wachten op nieuwe klanten. Daarom besloot het bedrijf onmiddellijk: reclame moet duidelijk gescheiden zijn van zoekresultaten en een persoon mag organische zoekresultaten niet verwarren met betaalde advertenties. Deze regel trok gebruikers aan en hielp het publiek te vergroten.
Het is erg belangrijk. Mensen komen alleen voor hoogwaardige zoekopdrachten. Niet om een relevante advertentie voor een bouwmarkt te vinden, maar om een echte winkel te vinden die nu nodig is.
Maxim Polyakov
Het bedrijf ontving al snel de eerste investeringen. Google kwam begin 2001 in de top tien van meest populaire internetbronnen en klom gemakkelijk naar de vijfde regel. In 2004 hield het project op een "garage" te zijn en ging het naar de beurs. In 2006 kocht het bedrijf YouTube en het bedrijf dat het Android-besturingssysteem ontwikkelde. Deze acquisities versnelden de groei.
In maart 2006 steeg Google naar de eerste plaats van alle internetbronnen. In november 2009 verloor hij kort het kampioenschap van Yahoo!, maar in januari 2010 herwon hij zijn positie en blijft hij nog steeds aan de leiding.
Tegenwoordig bestaat Google voor gebruikers uit verschillende platforms:
- Zoek algoritme.
- Service voor contextuele advertenties.
- Browser.
- Besturingssysteem voor smartphones.
- Tientallen diensten voor gewone gebruikers en bedrijven: mail, kaarten, documenten, spreadsheets en nog veel meer.
Een belangrijke reden voor het succes van het bedrijf is bedrijfscultuur.
Brin en Page stelden bij het kiezen van een nieuwe medewerker voor om een gedachte-experiment uit te voeren: stel je voor dat je zes uur met deze persoon op de luchthaven moet doorbrengen, want vlucht was vertraagd. Hoe comfortabel zal hij zijn?
Zo creëerden ze een omgeving waarin mensen bij elkaar passen. Het was nodig voor de ontwikkeling van het bedrijf en het ontstaan van innovaties.
Dit alles heeft ertoe geleid dat van alle verzoeken van gebruikers aan zoekmachines Google tegenwoordig 92,21% voor zijn rekening neemt. Dit is een wereldwijd monopolie.
Wat is er goed aan "Yandex" - de belangrijkste concurrent van Google in Rusland
Er zijn slechts twee landen waar Google serieuze concurrenten heeft, en daar kan het bedrijf niets aan doen. Dit is China - 68,66% van de zoekopdrachten vindt plaats op het lokale Baidu-portaal. En Rusland - we hebben meer dan 45% van de verzoeken ontvangen door "Yandex".
Deze zoekmachine is in 1997 gemaakt door Ilya Segalovich en Arkady Volozh - dat wil zeggen bijna gelijktijdig met Google. Tegenwoordig is Yandex de nummer 1-site in Rusland.
Net als Google is het een platformsysteem. Het platform combineert verschillende diensten die de verschillende behoeften van de klant dekken. In de eerste plaats is hier ook een zoekmachine algoritme. Het is erg goed, maar er is niet zoveel bekend over hoe het werkt als over het Google-algoritme.
Onlangs zeiden ze: "We weten helemaal niet hoe ons algoritme werkt - dit is Matrix Net, ons neurale netwerk, het werkt ermee en het verbetert zichzelf voortdurend." Het is bekend dat het goed werkt, maar we weten niet waar het uit bestaat.
Maxim Polyakov
Naast de zoekmachine heeft Yandex een advertentieplatform en browser. Plus aanvullende diensten: mail, kaarten, schijf, markt en andere. De grootste winst van vandaag wordt gemaakt door Yandex Taxi en bezorgdiensten.
Wat verandert ChatGPT in onze relatie met zoekmachines
In 2023, dat wil zeggen, op dit moment vindt er weer een revolutie plaats. Google is nog steeds de leider en zal nog een tijdje de eerste plaats behouden, maar we weten niet wat er daarna zal gebeuren.
In 2023 zijn er een aantal dingen veranderd. Er is een neuraal netwerk verschenen. ChatGPT heeft zo'n onwrikbare industrie als zoeken en contextueel adverteren in gang gezet.
Maxim Polyakov
In februari CEO Microsoft Satya Nadella kondigde tijdens een toespraak op het kantoor van zijn bedrijf aan dat er een nieuw tijdperk was aangebroken. Volgens hem is de hele geschiedenis van webtechnologieën verdeeld in drie fasen:
- Pc + server.
- Mobiele technologieën + cloudopslagsystemen.
- Kunstmatige intelligentie.
We staan aan het begin van een nieuw, derde tijdperk. Zelfs de startdatum is bekend - dat zei Satya Nadella op 8 februari 2023.
ChatGPT kreeg een miljoen gebruikers in 5 dagen. Dit is de snelste stijging in de geschiedenis van internet. De vorige leider, Instagram*, deed er 75 dagen over om hetzelfde resultaat te bereiken.
Het neurale netwerk is nu geïntegreerd in de Bing-zoekmachine. De vraag in de zoekbalk klinkt als volgt: "Vraag me alles", of "Vraag me iets." ChatGPT beantwoordt complexe vragen, en doet dat tot in detail. Bovendien is het in staat om te gaan met taken die voorheen werden gebruikt in Turing-test. Voordien hielp hij altijd om een persoon te onderscheiden van een machine-algoritme, maar nu is alles veranderd.
Sergey Brin keerde na vijf jaar vakantie terug bij Google. Hij moest weer aan het werk omdat de opkomst van neurale netwerken in het bedrijf een rood alarmniveau afkondigde. Google probeert actief te maken bard — eigen chatbot. Er wordt aangenomen dat de parameters vijf keer groter zijn dan de mogelijkheden van GPT. Maar dit neurale netwerk is nog niet volledig operationeel.
De wereld is de andere kant op gegaan en als wereldwijd monopolie zal Google waarschijnlijk ophouden te bestaan. Maar laten we eens kijken. Er zijn verschillende scenario's mogelijk.
Maxim Polyakov
*Meta Platforms Inc.-activiteiten. en zijn sociale netwerken Facebook en Instagram zijn verboden op het grondgebied van de Russische Federatie.
Lees ook🧐
- 8 zoekmachines die beter zijn dan Google
- Waar kun je ChatGPT insluiten en waarom: 5 opties
- Technologische singulariteit: is het waar dat technologie binnenkort uit de hand loopt