|
АБРАКАДАБРА (Тоже самое но в читаемом виде)
V etoy 4asti rasskazivaetsa ob algoritmax avtomatizacii i iskusstvennogo intellekta, primenaemix v poiskovoy sisteme.
Kak prodoljenie obsujdenia o ka4estve poiska, a bi xotel rasskazat' Vam podrobnee o nekotorix na6ix texnologiax.
Osnovnaa texnologia na6ey sistemi ranjirovania pri6la iz oblasti nauki «Informacionnogo poiska» (Information Retrieval ili IR). IR-soob6estvo issleduet poisk po4ti 50 let. Ono ispol'zuet statistiku osobennostey slov, takix, kak 4astota slov, dla ranjirovania stranic. IR zalojilo dla nas tverdiy fundament, i mi postroili na nem ogromnuu sistemu, ispol'zua ssilki, strukturu stranic i mnogie drugie nov6estva.
V poslednee desatiletie su6nost' poiska izmenilas' ot «dayte mne to, 4to a skazal» do «dayte mne to, 4to a xo4u». Ojidania pol'zovateley ot poiska spravedlivo virosli. Mi mnogo rabotaem nad udovletvoreniem ojidaniy kajdogo pol'zovatela, i dla eto nam neobxodimo kak mojno lu46e ponimat' stranici saytov, zaprosi i na6ix pol'zovateley. Za poslednee desatiletie mi doveli texnologii do ponimania etix trex komponentov (processa poiska) do sover6enno novix izmereniy.
Na protajenii vsey stat'i, kogda re4' budet idti o zaprosax v Google, oni budut zaklu4eni v kvadratnie skobki [ ], dla obozna4enia na4ala i konca zaprosa. (Stranici i rezul'tati poiska 4asto menautsa, poetomu, so vremenem, nekotorie primeri, ispol'zuemie zdes', budut rabotat' ne tak, kak opisano.)Ponimanie stranic
Za godi mi gluboko prodvinulis' v texnologii kraulinga i indeksirovania. V rezul'tate mi polu4aem o4en' bol'6oy i svejiy katalog. Krome razmerov i aktual'nosti, mi dobavili v na6 katalog i drugie ulu46enia. Odna iz klu4evix texnologiy, kotoruu mi razrabotali dla ponimania stranic, privazivaet logi4eski-vajnie ponatia k stranice, daje esli ona ix ne soderjit.
Dopustim, mi naydem oficial'niy sayt Sprovieri Gallery v Londone po zaprosu na ital'anskom [galleria sprovieri londra], xota na sayte net ni slova London, ni Londra. V S6A pol'zovatel', i6u6iy [cool tech pc vancouver, wa] naydet stranicu www.cooltechpc.com nesmotra na to, 4to nigde na stranice ne ukazano, 4to oni naxodatsa v Vankuvere. Drugie nami razrabotannie texnologii vklu4aut v seba raspoznavanie bolee vajnix i menee vajnix slov na stranice i svejest' informacii na sayte.Ponimanie zaprosov
Vajno ponimat', 4to i6ut na6i pol'zovateli (bol'6e, 4em prosto slova v ix zaprose). Mi dostigli nekotorix zametnix uspexov v etom napravlenii, vklu4au6ix v seba lu46uu v svoem rode sistemu raspoznavania tekstovogo soderjimogo, razvituu sistemu sinonimov i o4en' mo6nuu sistemu analizirovania.
Mnogie pol'zovateli vrema ot vremeni ispol'zuut na6u sistemu raspoznavania soderjimogo. Sisteme izvestno, 4to kto-to, vvoda6iy v stroke poiska [kofee annan], na samom dele i6et mistera Kofi Annana, i podskazivaet emu ob etom: Did you mean: kofi annan; togda kak esli kto-to i6et [kofee beans], to emu na samom dele nujni coffee beans (kofeynie bobi).
Sdelat' eto dla raznix azikov i s visokoy to4nost'u dovol'no slojno, no mi xoro6o spravlaemsa.
Sinonimi — eto fundament na6ey raboti po ponimaniu zaprosov. Eto odna iz samix slojnix problem, re6aemix nami v Google. Daje esli 4to-to o4evidno dla 4eloveka, eto mojet bit' nerazre6imoy problemoy dla avtomati4eskogo azikovogo obrabot4ika.
Kak pol'zovatel', a ne xo4u sli6kom mnogo dumat' o tom, kakie slova mne ispol'zovat' dla zaprosov. 4asto a daje ne znau, kakie slova pravil'nie. Zdes' vklu4aetsa v rabotu na6a sistema sinonimov. Ona mojet vipolnat' slojnie modifikacii zaprosov, to est' ona znaet, 4to slovo ‘Dr’, v zaprose [Dr Zhivago], ozna4aet Doctor, v to vrema kak v [Rodeo Dr] ono zna4it Drive. Pol'zovatel', kotoriy i6et [back bumper repair] polu4aet rezul'tati dla rear bumper repair. Dla [Ramstein ab] mi avtomati4eski polu4im rezul'tat dla Ramstein Air Base, a pri zaprose [ b&b ab] mi budem iskat' Bed and Breakfasts in Alberta, Canada.
Mi dostigli takogo urovna ponimania zaprosov dla prakti4eski sotni razli4nix mirovix azikov, etim a deystvitel'no gorjus'!
Drugaa texnologia, kotoruu mi ispol'zuem v na6ey sisteme ranjirovania — eto poisk idei. Obnarujenie glavnoy idei zaprosa pozvolaet vozvratit' namnogo bolee relevantnie rezul'tati. Naprimer, na6i algoritmi poymut, 4to v zaprose [new york times square church] pol'zovatel' i6et izvestnuu cerkov' na Times Square, a ne stat'i iz New York Times. No mi ne ostanavlivaemsa na poiske idey, mi dobavlaem pravil'nie idei, kogda, naprimer, kto-to i6et [PC and its impact on people], to na samom dele on i6et impact of computers on society (vlianie komp'uterov na ob6estvo), a pol'zovatelu, i6u6emu [rainforest instructional activities for vocabulary], nujni rain forest lesson plans. Na6i algoritmi analiza zaprosov imeut mnojestvo vstroennix sovremennix metodik, i, povtorus', mi delaem eto prakti4eski dla vsex azikov, s kotorimi mi rabotaem.Ponimanie pol'zovateley
Na6a rabota po ponimaniu namereniy pol'zovatela nacelena na vozvrat rezul'tatov, kotorie deystvitel'no xotat pol'zovateli polu4it', a ne prosto tex, kotorie oni napisali v svoem zaprose. Eta rabota na4inaetsa s sistemi lokalizacii mirovogo urovna. I dobavlaet na6u ulu46ennuu texnologiu individualizacii i neskol'ko drugix bol'6ix 6agov, takix kak Universal'niy Poisk, sdelannix nami v ponimanii namereniy pol'zovateley.
Na6 upor na princip «naibolee relevantnie zaprosu rezul'tati» otrajaetsa v na6ey rabote po lokalizacii. Odin i tot je zapros, napisanniy v razli4nix stranax, dast absolutno raznie rezul'tati. Pol'zovatel', i6u6iy [bank] v S6A, doljen polu4it' Amerikanskie banki, v to vrema kak pol'zovatel' v Velikobritanii i6et Bank Fashion line ili British financial institutions. Rezul'tati etogo zaprosa doljni soderjat' mestnie finansovie podrazdelenia v drugix anglogovora6ix stranax, takix kak Avstralia, Kanada, Novaa Zelandiy, UAR.
Nastoa6ee vesel'e na4inaetsa, kogda etot zapros vvoditsa v ne-anglogovora6ey strane, naprimer v Egipte, Izraile, Aponii, Rossii, Saudovskoy Aravii, 6veycarii. Takje, zapros [football] otnositsa k sover6enno razli4nim vidam sporta v S6A, Avstralii i Velikobritanii.
Eti primeri v osnovnom pokazivaut, kak mi polu4aem pravil'nie mestnie versii odinakovix smislovix zna4eniy v razli4nix stranax (finansovie podrazdelenia, sport i t.d.). Odnako, odin i tot je zapros mojno imet' sover6enno raznoe zna4enie v raznix stranax.
Naprimer, [Côte d'Or] eto geografi4eskiy region vo Francii, no eto krupniy proizvoditel' 6okolada v sosedney, frankogovora6ey Bel'gii; i da, eti ve6i mi toje polu4aem pravil'no.Personalizacia
Personalizacia — eto e6e odna sil'naa osobennost' na6ey poiskovoy sistemi, kotoraa podgonaet rezul'tati poiska dla kajdogo pol'zovatela.
Pol'zovateli, kotorie "zaloginilis'" vo vrema poiska i imeut vklu4enniy jurnal pose6eniy, polu4aut rezul'tati, kotorie bolee relevantni dla nix, 4em ob6ie rezul'tati Google. Naprimer, pol'zovatel', kotoriy imeet mnojestvo zaprosov, otnosa6ixsa k futbolu, polu4it bolee «futbol'nie» rezul'tati na zapros [giants], togda kak drugie pol'zovateli mogut polu4it' rezul'tati, otnosa6iesa k beysbol'noy komande. Analogi4no, esli vi stremites' polu4it' rezul'tati iz kakogo-to internet-magazina, vam lu46e iskat' tovar na etom sayte. Po na6im ocenkam, pol'zovateli, polu4au6ie personal'nie rezul'tati, naxodat ix bolee relevantnimi, 4em nepersonalizirovannie rezul'tati.
Drugoy slu4ay pol'zovatel'skix namereniy mojno rassmotret' na primere zaprosa [chevrolet magnum]. Magnum na samom dele delaetsa kompaniey Dodge, a ne Chevrolet. Poetomu, mi pokazivaem rezul'tati dla Dodge Magnum s pometkoy See results for: dodge magnum.
Na6a rabota nad Universal'nim Poiskom — eto e6ё odin primer na6ego tolkovania namereniy pol'zovatela dla predostavlenia im togo, 4to oni (inogda) na samom dele xotat. T.e., kto i6et [bangalore], polu4aut ne tol'ko nujnie veb-stranici, takje emu stanovitsa dostupna karta, video, jizn' na ulicax Bangalore i t.d., i plu4 ko vsemu e6e i novosti/blogi o Bangalore.
V zaklu4enie, pozvol'te mne korotko upomanut' poslednee ulu46enie, sdelannoe nami v mexanizme poiska: Cross Language Information Retrieval (CLIR). Eto pozvolaet pol'zovatelam sna4ala polu4it' informaciu ne na ix rodnom azike, a zatem, ispol'zua texnologiu perevoda Google, mi delaem informaciu dostupnoy. A nazivau eto ulu46enie «dayte mne to, 4to mne nujno, na lubom azike». Pol'zovatel', kotoriy i6et biografiu Toni Blera v Rossii, nabirau6iy [Toni Bler biografia] polu4aet predlojenie posmotret' rezul'tati, perevedennie s angliyskogo. Analogi4no, pol'zovatel', i6u6iy pesni iz fil'mov Disney v Egipte s zaprosom [أغاني أفلام ديزني], polu4it predlojenie posmotret' angliyskie rezul'tati.
Nam o4en' nravitsa CLIR, tak kak on deystvitel'no pomogaet nam v na6ey missii po organizacii informacii v mire i pridaniu ey universal'noy dostupnosti i pol'zi.
A mogu prodoljat' pokazivat' primeri sovremennix texnologiy, kotorie mi razrabotali, 4tobi sdelat' na6u sistemu ranjirovania nastol'ko xoro6ey, kakoy ona avlaetsa, no na samom dele re6enie problemi poiska e6e daleko za gorami. Mnogie zaprosi do six por ne polu4aut udovletvorau6ix rezul'tatov v Google, i nali4ie kajdogo takogo zaprosa — eto vozmojnost' ulu46it' i dopolnit' na6u sistemu ranjirovania. A uveren, 4to s takim koli4estvom texnologiy, razrabativaemix na6ey gruppoy, mi sdelaem bol'6ie ulu46enia v na6ix algoritmax ranjirovania v blijay6em budu6em.Zaklu4enie
A nadeus', 4to dve moi stat'i o ranjirovanii Google dali ponat', 4to mi jivem i di6im poiskom, i nam eto nravitsa bol'6e, 4em kogda-libo. Na6e staranie slujit' pol'zovatelam po vsemu miru besprecendentno. Mi gordimsa sami soboy, zapuskaa o4erednoy algoritm v na6u sistemu ranjirovania. Mi userdno rabotaem kajdiy den', 4tobi sdelat' ee e6e lu46e.
.codeisart.ru/texnologii-ranjirovania-google/
|
|
