Іздеу жүйелерінің даму перспективалары. Заманауи іздеу жүйелері, Яндекс нарығының көшбасшыларының бірінің даму тенденциялары - Аннотация

Ақпаратты іздестіру теориясы мен тәжірибесінің даму жылдарында жасалған әртүрлі технологиялар мен әдістер қазіргі заманғы ақпараттық іздеу жүйелерінде өзінің қолданылуын табады. Жақсарып келе жатқан классикалық IRS кітапханасымен қатар негізгі қозғаушы күшке айналған ғаламдық Интернет желісінің IRS саласында қарқынды даму жүріп жатыр. заманауи технологияларақпаратты іздеу. Ақпараттық ресурстардың үлкен көлемі ауқымды іздеу алгоритмдерін қажет етеді. Гипермәтін құжаттар жинақтарының семантикалық талдауына негізделген принципті жаңа іздеу үлгілерін пайдалануға мүмкіндік береді. Беттерді жаңартудың жоғары жылдамдығы, олардың еркін орналасуы және тұрақты қол жеткізу кепілдігінің жоқтығы ағымдағы ақпараттық ресурстарды үнемі қайта индекстеу қажеттілігіне әкеледі.

Ақырында, іздеу жүйесімен жиі жұмыс істеу дағдысы жоқ пайдаланушылардың гетерогенді құрамы оларды минималды бастапқы ақпаратпен жұмыс істейтін сұраныстарды құрастырудың тиімді жолдарын іздеуге мәжбүр етеді.

6.1. Сөздік ақпаратты іздеу жүйелері

Сөздік IRS - бұл ең жылдам және тиімді іздеу жүйелері, олар Интернетте ең көп таратуды алды. IRS сөздігінде қажетті ақпаратты іздеу түйінді сөздер арқылы жүзеге асырылады. Іздеу нәтижелері сөздікпен және IPL бойынша пайдаланушы құрастырған сұраныспен сол немесе басқа іздеу алгоритмінің жұмысы барысында қалыптасады.

IRS лексикасының құрылымы (13-сурет) келесі құрамдас бөліктерден тұрады: құжатты қарау құралы, пайдаланушы интерфейсі, іздеу жүйесі, іздеу суреттерінің мәліметтер базасы және индекстеу агенті.

Ақпараттық массив пайдаланушыға қолжетімді болуы мүмкін ақпараттық ресурстарды қамтиды. Бұған мәтіндік және графикалық құжаттар, мультимедиялық ақпарат және т.б. кіреді. Жаһандық ХҒС үшін бұл бүкіл Интернет, мұнда барлық құжаттар бірегей URL мекенжайымен сипатталады (URL - Uniform Resource Locator).

Іздеу жүйесінің интерфейсі пайдаланушының IRS-пен өзара әрекеттесу жолын анықтайды. Бұған сұрауларды жасау ережелері, іздеу нәтижелерін қарау механизмі және т.б. кіреді. Интернет іздеу жүйелерінің интерфейсі әдетте веб-шолғыш ортасында жүзеге асырылады. Аудио және бейне ақпаратпен жұмыс істеу үшін сәйкес бағдарламалық құрал қолданылады.

Іздеу жүйесінің негізгі қызметі – қабылданған іздеу үлгісін жүзеге асыру. Біріншіден, пайдаланушының IPL-де дайындалған сұрауы белгіленген ережелерге сәйкес ресми сұранысқа аударылады. Содан кейін іздеу алгоритмін орындау барысында сұраныс мәліметтер базасынан құжаттардың іздеу кескіндерімен салыстырылады. Салыстыру нәтижелері бойынша табылған құжаттардың соңғы тізімі жасалады. Әдетте ол құжаттың атауын, өлшемін, жасалған күнін және қысқаша аннотациясын, оған сілтемені, сондай-ақ құжат пен сұраныс арасындағы ұқсастық өлшемінің мәнін қамтиды.

13-сурет. IRS сөздігінің құрылымы.

Тізім реттелген (кейбір критерий бойынша реттелген, әдетте ресми сәйкестік мәні бойынша).

Құжаттарды іздеу суреттерінің деректер базасы индекстелген құжаттардың сипаттамаларын сақтауға арналған. IRS сөздік қорының типтік деректер қорының құрылымы нұсқаулардың 1-бөлімінде егжей-тегжейлі сипатталған.

Индекстеу агенті іздеу кескіндерін жасау үшін қолжетімді құжаттарды индекстейді. Жергілікті жүйелерде бұл операция әдетте бір рет орындалады: құжаттар массивін қалыптастыру аяқталғаннан кейін барлық ақпарат индекстеледі және іздеу суреттері мәліметтер базасына енгізіледі. Интернеттің динамикалық орталықтандырылмаған ақпараттық массивінде басқа тәсіл қолданылады. Өрмекші немесе тексеріп шығушы деп аталатын арнайы робот бағдарламасы желіні үздіксіз тексеріп отырады. Әртүрлі құжаттар арасындағы ауысулар олардағы гиперсілтемелер арқылы жүзеге асырылады. Іздеу жүйесінің дерекқорындағы ақпараттың жаңартылу жылдамдығы оның интернетті қарап шығу жылдамдығына тікелей байланысты. Мысалы, қуатты индекстеу роботы бірнеше апта ішінде бүкіл Интернетті тексере алады. Әрбір жаңа тексеріп шығу циклімен дерекқор жаңартылып, ескі жарамсыз мекенжайлар жойылады.

Кейбір құжаттар іздеу жүйелері үшін жабық. Бұл рұқсат рұқсат етілген немесе сілтеме бойынша емес, формадан сұрау арқылы жүзеге асырылатын ақпарат. Қазіргі уақытта Интернеттің жасырын бөлігін сканерлеудің интеллектуалды әдістері әзірленуде, бірақ олар әлі де кең таралған жоқ.

Гипермәтіндік құжаттарды индекстеу үшін агент бағдарламалары дереккөздерді пайдаланады: гипермәтіндік сілтемелер (href), тақырыптар (тақырып), тақырыптар (Н1, Н2 және т.б.), аннотациялар, түйінді сөздер тізімдері (кілт сөздер), суреттің жазулары. URL мекенжайлары мәтіндік емес ақпаратты (мысалы, ftp файлдары) индекстеу үшін пайдаланылады.

Жартылай автоматты немесе қолмен индекстеу мүмкіндіктері де қолданылады.

Бірінші жағдайда, әкімшілер индекстеу агенті біраз уақыттан кейін өңдейтін құжаттары туралы хабарламаларды қалдырады, екіншісінде әкімшілер ХҒС дерекқорына қажетті ақпаратты дербес енгізеді.

Толық мәтінді индекстеуді орындауда ХҒС санының артуы. Бұл жағдайда құжаттың бүкіл мәтіні іздеу кескінін құрастыру үшін пайдаланылады. Пішімдеу, сілтемелер және т.б. бұл жағдайда белгілі бір терминнің маңыздылығына әсер ететін қосымша факторға айналады. Тақырып термині сурет тақырыбына қарағанда көбірек салмақ алады.

Қазіргі заманғы ірі провайдерлер бір секунд ішінде жүздеген сұраныстарды өңдеуі керек. Сондықтан кез келген кідіріс пайдаланушылардың азаюына және нәтижесінде жүйенің танымал еместігіне және коммерциялық сәтсіздіктерге әкелуі мүмкін. Архитектуралық тұрғыдан алғанда, мұндай ХҒС бүкіл әлемде орналасқан жүздеген компьютерлерден тұратын үлестірілген есептеу жүйелері түрінде жүзеге асырылады. Іздеу алгоритмдері мен бағдарлама коды жоғары оңтайландырылған.

Құжат базасының үлкен көлемі бар ХҒС-да олардың жұмысын жеделдету үшін технологиялар қолданылады бөлу және кесу .

Бөлу дерекқорды анық маңыздырақ және аз сәйкес келетін бөліктерге бөлуден тұрады. Біріншіден, IPS дерекқордың бірінші бөлігіндегі құжаттарды іздейді. Егер құжаттар табылмаса немесе жеткіліксіз болса, онда іздеу екінші бөлімде жүргізіледі.

Қолдану кесу (Pruning - аббревиатура, жою) сұранысты өңдеу тиісті құжаттардың жеткілікті саны табылғаннан кейін автоматты түрде тоқтатылады.

Сондай-ақ кеңінен қолданылады шекті іздеу үлгілері , ол пайдаланушыға берілген құжаттардың сипаттамалары үшін шекті мәндерді анықтайды. Мысалы, құжаттардың өзектілігі әдетте кейбір өзектілік мәнімен шектеледі.

Пайдаланушының назарына сәйкестік мәні бар барлық құжаттар ұсынылады

Іздеу нәтижелерін күн бойынша саралау жағдайында шекті мәндер құжаттар өзгертілген күннің уақыт аралығын анықтайды. Мысалы, IRS соңғы үш жылда өзгермеген құжаттарды автоматты түрде қысқарта алады.

Сөздік түріндегі ХҒС негізгі артықшылығы оның толық дерлік автоматтандырылуы болып табылады. Жүйе іздеу ресурстарын дербес талдайды, олардың сипаттамаларын құрастырады және сақтайды, осы сипаттамалар арасында іздейді. Интернет-ресурстардың кең қамтылуы да осындай жүйелердің артықшылықтарының бірі болып табылады. Дерекқорлардың үлкен көлемі сөздік IRS-ті әсіресе жан-жақты іздеу, күрделі сұраулар немесе түсініксіз ақпаратты локализациялау үшін пайдалы етеді.

Сонымен қатар, жүйелік деректер қорындағы құжаттардың көптігі көбінесе тым көп құжаттардың табылуына әкеледі. Бұл табылған ақпаратты талдау кезінде көптеген пайдаланушылар үшін қиындықтар тудырады және жылдам іздеуді мүмкін емес етеді. Автоматты индекстеу әдістері нақты құжаттардың ерекшеліктерін және олардың арасындағы мерзімсіз құжаттардың санын ескере алмайды.

мұндай жүйе арқылы табылған жиі үлкен.

IRS сөздігінің тағы бір кемшілігі жүйеге сұраныстарды арнайы тілде құрастыру қажеттілігі болып табылады. Табиғи тілдермен IPL конвергенциясы тенденциясы болғанымен, бүгінгі күні пайдаланушы сұраныстарды құрастыруда белгілі бір дағдыларға ие болуы керек.

КОВРОВ АТЫНДАҒЫ МЕМЛЕКЕТТІК ТЕХНОЛОГИЯЛЫҚ АКАДЕМИЯ

Информатика бойынша ақпараттық-аналитикалық ақпарат

тақырыбы бойынша: «Заманауи іздеу жүйелері, Яндекс нарығының көшбасшыларының бірінің даму тенденциялары».

Аяқталды: 1 курс студенті

3 академиялық топ

Макаров Иван

Кіріспе. 3

Негізгі бөлім. 4

Қорытынды. он бір

Кіріспе.

Яндекс – ресейлік IT-компаниясы, сол атаудағы веб-іздеу жүйесі мен интернет-порталы бар. Яндекс іздеу жүйесі өңделген іздеулер саны бойынша әлемдегі сегізінші ірі іздеу жүйесі (1,290 миллиард, 2009 жылғы тамыздағы статистика) және қытайлық Baidu-дан кейінгі екінші үлкен ағылшын тіліндегі емес іздеу жүйесі.

Компанияның веб-сайты 1997 жылы 23 қыркүйекте ашылды. 2000 жыл – Яндекс компаниясының құрылған жылы. Яндекс негізін қалаушы - CompTek (Яндекс іздеу жүйесін әзірлеген және қолдаған фирма). Кәсіпорын 2002 жылы өзін-өзі қамтамасыз ету деңгейіне жетті, 2006 жылы тауар айналымы – 72,6 млн доллар, таза пайда – 29,9 млн, 2005 жылы – 35,6 млн доллар, таза пайда – 13,6 млн.

Компанияның негізгі және басым бағыты - іздеу жүйесін дамыту, бірақ жылдар бойы Яндекс мультипорталға айналды. 2009 жылы Яндекс коллекциясында 30-дан астам қызмет бар. Ең танымалдары: Yandex.News, Yandex.Photos, Yandex.Toys және т.б.

Компанияның бас кеңсесі Мәскеуде орналасқан. Компанияның кеңселері Санкт-Петербург, Екатеринбург, Одесса, Симферополь және Киевте орналасқан. 2008 жылдың маусым айының ортасында компания Яндекс зертханасының ашылғаны туралы хабарлады - АҚШ-та, Калифорнияда кеңсе.

Негізгі бөлім.

Компанияның құрылу тарихы.

Yandex.Ru іздеу жүйесі 1997 жылы 23 қыркүйекте Softool көрмесінде ресми түрде жарияланды. Сол кездегі Яндекс.Ru-ның басты ерекшелігі құжаттардың бірегейлігін (әртүрлі кодтаудағы көшірмелерді қоспағанда), сонымен қатар Яндекс.Ru іздеу жүйесінің негізгі қасиеттерін тексеру болды, атап айтқанда: орыс тілінің морфологиясын ескере отырып. (дәл сөз формасы бойынша іздеуді қоса алғанда), қашықтық (соның ішінде абзац ішінде, нақты сөз тіркесі) және табылған сұрау сөздерінің санын ғана емес, сәйкестікті бағалаудың мұқият әзірленген алгоритмі (сұрауға жауаптың сәйкестігі). мәтіндегі, сонымен қатар сөздің «қарсылығы» (оның берілген құжат үшін салыстырмалы жиілігі), сөздер арасындағы қашықтық және құжаттағы сөздің орны.

Біраз уақыттан кейін «Ертегілер» бөлімінде (орыс интернетінің мазмұнын бақылау) бірінші Рунет ертегісі пайда болды - «Веб - гуманизм немесе чернуха?» Ал «Сандар» бөлімінде - Runet көлемінің бірінші бағасы, 5 мың сервер және 4 ГБ мәтіндер.

Екі айдан кейін, 1997 жылдың қарашасында табиғи тілге сұраныс орындалды. Бұдан былай Яндекс.Ru-ға жай ғана «орыс тілінде» кіруге болады, мысалы: «компьютерді қайдан сатып алуға болады», «генетикалық түрлендірілген өнімдер» немесе «халықаралық кодтары» ұзақ сұраулар. телефон байланысы»Және нақты жауаптар алыңыз. Яндекс.Ru-да сұраныстың орташа ұзақтығы қазір 2,7 сөзді құрайды. 1997 жылы ол 1,2 сөз болды, содан кейін іздеу жүйелерін пайдаланушылар телеграфтық стильге үйренді.

1998 жылы Yandex.Ru «ұқсас құжатты табу» мүмкіндігін, табылған серверлер тізімін, белгілі бір күндер ауқымында іздеуді және іздеу нәтижелерін уақыт бойынша сұрыптауды қосты. соңғы өзгеріс... Осы жыл ішінде ресейлік интернеттің «көлемі» екі есе өсті, бұл іздеу жүйелерін оңтайландыру қажеттілігіне әкелді. Сол кезде де, қазір де (көлемі 200 ГБ) Yandex.Ru-да іздеу жылдамдығы секундты құрайды.

1999 жылы Рунет мәтіндер көлемі бойынша да, пайдаланушылар саны бойынша да үлкен тәртіппен өсті. Бұл Yandex.Ru үшін де қарқынды даму жылы болды. Жаңа іздеу роботы Runet сайттарын қарап шығуды оңтайландыруға және жылдамдатуға мүмкіндік берді. Бүгінгі таңда Yandex.Ru іздеу базасы ең жақын бәсекелестерінен екі есе үлкен.

Жаңа робот пайдаланушыларға жаңа мүмкіндіктерді ұсынуға мүмкіндік берді - мәтіннің әртүрлі аймақтарында іздеу (тақырыптар, сілтемелер, аннотациялар, мекенжайлар, суреттерге жазулар), сайттар тобына іздеуді шектеу, сілтемелер мен суреттер бойынша іздеу, сияқты сондай-ақ орыс тіліндегі құжаттарды бөлектеңіз. Каталог санаттарында іздеу жүргізілді және Рунетте алғаш рет «цитата индексі» түсінігі енгізілді - берілгенге сілтеме жасайтын ресурстар саны.

Жыл бойына Рунеттің сандық және сапалық талдауы бойынша жұмыс жалғасты. Интернетті пайдаланушылардың мүдделерінің өзгеру динамикасын көрсететін NINI-индекс («Интернет халықтарының мүдделерінің сәйкессіздігі» индексі) ашылды. Іздеу форумы және жаңа қызмет ашылды - сұрауға жазылу, яғни сіз Yandex.Ru сайтында сұрауыңызды қалдыра аласыз және осы сұрауға сәйкес жаңа және/немесе өзгертілген құжаттардың пайда болуы туралы электронды пошта арқылы үнемі ақпарат ала аласыз. . Оқу жылының басында мат пен порнографиядан іздеу нәтижелерін сүзгіден өткізетін Яндекс отбасы ашылды.

«Яндекс» сөзінің шығу тегі.

Бүгінгі күні «Яндекс» - бұл Интернет қолданушысының күнделікті қолданатын сөзі. Интернетте сіз жиі «Яндекс жойылды ма?», «Жалғыздық - бұл Яндекс сізді туған күніңізбен бірінші болып құттықтаған кезде», «Яндекске барлық сұрақтар». Көпшілікке бұл әрқашан осылай болған сияқты. Айтпақшы, бұл дұрыс - Яндекс шынымен де желіге қол жеткізу таңдалған техникалық мамандардың көптігі болмаған кезде жаппай Интернетпен бір мезгілде пайда болды. Бірақ «Яндекс» деген сөздің өзі жасанды, өз авторлары мен өз тарихы бар.

1993 Аркадий Волож, болашақ бас директор болашақ компанияЯндекс пен компанияның болашақ технологиялық директоры Илья Сегалович дамыды, кейінірек белгілі болғандай, негізгі технология – орыс тілін ескере отырып, құрылымсыз ақпаратты іздеу.

Әзірлеуге қандай да бір жолмен атау керек болды. Илья технологияның мағынасын сипаттайтын сөздерден әртүрлі туынды сөздерді бағанға қалай жазғанын есіне алады. Орыс тіліндегі іздеу («іздеу») тым диссонанс болып көрінетіні және оның негізінде сәтті комбинация жасай алмайтыны тез белгілі болды. Көрсеткіш сөзі орындырақ болды. Яндекс атаулар тізімінде осылай пайда болды - тағы бір индекстеу. Бұл нұсқа Ильяға да, Аркадийге де ұнады – айтылуы оңай, жазылуы жеңіл. Сонымен қатар, Аркадий тақырыпта «I» әрпін ұсынды - атап айтқанда, орысша - орысша және түсінікті болу үшін оны қалдырыңыз. «Яндекс» сөзі осылай ойлап табылды. Бағдарлама файлы, сәйкесінше, yandex.exe деп аталды.

1996 жылы іздеу алғаш рет көпшілікке мазмұндық өнімнің бөлігі ретінде емес, технология ретінде ұсынылған кезде (бұған дейін өнертабыстың халықаралық классификаторы мен Киелі кітаптың компьютерлік анықтамалығы болған) бағдарламалар желісі деп аталды. Яндекс және бұл атау iNDEX тілі ретінде түсіндірілді. Жолдағы алғашқы бағдарламалар Яндекс.Сайт (бір жеке сайт арқылы іздеу – бұл өнім қазір Яндекс.Сервер деп аталады) және Yandex.Dict (AltaVista-ның морфологиялық префиксі, сол кезде қандай да бір жолмен жұмыс істеуді білетін жалғыз іздеу жүйесі) болды. кириллица) ...

Бірақ, әрине, «Яндекс» сөзі 1997 жылдың қыркүйегінен бастап, www.yandex.ru іздеу жүйесі іске қосылғаннан кейін кеңінен тарады. Содан бері жүйені пайдаланушылар бізге өз түсіндірмелерін ұсынды. Мысалы, Тиома Лебедев, бірінші нұсқаны салуға дайындалуда басты бетЯндекс сайты былай деді: «Ой, түсіндім, егер индекс сөзінде бірінші «I» орыс тіліне аударылса, ол «Мен» болады, яғни ол «Яндекс» болып шығады. Авторлар бұл туралы ойланбағанын мойындады, бірақ жақсы интерпретация қабылданады. Содан кейін Интернеттегі біреу Интернеттің екі жағын, INdex пен YANDEX-ті көріп, басқа нұсқаны ұсынды. Бұл сөздің туындылары қазірдің өзінде пайда болды, мысалы, Яндекс қызметкерлері жиі «Яндексоидтар» деп аталады, ал азырақ - «Яндекс қызметкерлері».

«Яндексті» іздеңіз.

Яндекс іздеу жүйесі Runet, Uanet және Kaznet (2009 жылдың 14 қазанынан бастап) құжаттарын орыс және ағылшын тілдерінің морфологиясын ескере отырып, орыс, украин, белорус, румын, ағылшын, неміс және француз тілдерінде іздеуге мүмкіндік береді. сөйлемдегі сөздердің жақындығы. 2006 жылдың басынан бастап Mail.ru порталында Яндекс іздеуі орнатылды.

HTML веб-беттерінен басқа, Яндекс PDF (Adobe Acrobat), Rich Text Format (RTF), екілік Microsoft Word, Microsoft Excel, Microsoft PowerPoint, SWF (Macromedia Flash), RSS (блогтар мен форумдар) форматындағы құжаттарды индекстейді.

Яндекстің айрықша ерекшелігі - іздеу сұрауын дәл баптау мүмкіндігі. Бұл икемді сұрау тілі арқылы жүзеге асырылады. Мәселен, мысалы, алып тастау операциясы үшін сіз қолданыс аясын көрсете аласыз: A ~~ B сұрауы А бар, бірақ С жоқ құжаттарды (беттерді) табады және A ~ B сұрауы - В сөзі болатын құжаттар бір сөйлемде А сөзімен бірге болмайды. Сол сияқты & операторы комбинацияларды іздейді кілт сөздерсөйлемде және бүкіл құжатта &&.

Оператор! белгілі бір сөздің морфологиясын өшіруге мүмкіндік береді, eh !! омонимиямен байланысты кейбір мәселелерді болдырмайтын қалыпты форманы көрсетуге мүмкіндік береді. Мысалы, сұрау !! Иванов Иванов пен Ивановты табады, бірақ Иван емес.

Әдепкі бойынша, Яндекс іздеу нәтижесінің әрбір бетінде 10 сілтемені көрсетеді; іздеу нәтижелерінің параметрлерінде бет өлшемін 20, 30 немесе 50 табылған құжатқа дейін үлкейтуге болады. Кейде бұл беттердегі сайттардың реті әртүрлі болуы мүмкін, себебі бұл нәтижелерге арналған дерекқорлар бір уақытта жаңартылмайды.

Сұрау үшін көптеген сілтемелер табылса, нәтижелер беті іздеу ауқымын аймақ бойынша (яғни IP ауқымы бойынша) немесе күні бойынша шектеуді ұсынады. Егер қандай да бір сөз немесе сөз үшін ештеңе табылмаса, оны ұқсас сөздермен ауыстыру ұсынылады (ұсынылған нұсқалар ұқсас сөздерді табу жиілігіне байланысты, кейде күлкілі жағдайлар туындайды). Сондай-ақ, қате пернетақта орналасуында терілген сөздерді түзету ұсынылады.

Кейде іздеу нәтижелерінің өзектілігіне жауапты Яндекс алгоритмдері өзгереді, бұл іздеу сұрауларының нәтижелерінің өзгеруіне әкеледі. Ең соңғы ресми жарияланған өзгерістер 2004 жылдың наурызында, 2005 жылдың сәуірінде және 2007 жылдың қаңтарында болды; бейресми ақпарат бойынша, олардың саны әлдеқайда көп (мысалы, соңғысы 2007 жылдың тамыз-қыркүйек айларында).

Атап айтқанда, бұл өзгерістер іздеу спамына қарсы бағытталған, бұл кейбір сұраулар үшін маңызды емес нәтижелерге әкеледі (жиілігі - сұраулардың бүкіл тобы үшін). Автоматты түрде тексерілмейтін іздеу спамына қарсы мәселені жартылай автоматты және қолмен модерациялау («ақ оптимизаторлар» деп аталатындар көмегімен), сондай-ақ «зиянды» сайттарды индекстеуден тікелей бас тарту қолданылады.

Меншік иелері, басқару және өнімділік.

Компанияның 30%-дан астамы, өз деректері бойынша, ru-Net Holdings және Baring Vostok Capital Partners инвестициялық қорларына, 15%-ы Tiger Technologies қорына, 30%-ға жуығы компанияның құрылтайшыларына және 20%-ы менеджерлерге тиесілі. және басқа да миноритарлық акционерлер.

2009 жылдың қыркүйек айының ортасында Яндекстің бас компаниясы, голландиялық Yandex N. V. компаниясы Сбербанкке символдық 1 еуроға аударылған басым акцияны шығарғаны белгілі болды. Акция беретін жалғыз құқық – компания акцияларының 25%-дан астамын сатуға вето қою.

Басқару: Ркадий Волож – бас директор, Илья Сегалович – техникалық директор, Елена Колмановская – бас редактор, Алексей Третьяков – коммерциялық директор, Светлана Кондрашова – жарнама жөніндегі директор.

Яндекстің барлық қызметтері.

Ақпаратты іздеу:

Search және ya.ru

Каталог – дәйексөз индексі бойынша сұрыпталған веб-сайттар каталогы. Оны каталог редакторлары қолмен толтырады, ақылы тіркелу мүмкіндігі бар.

Жаңалықтар - Интернеттегі негізгі ақпарат құралдарынан алынған күннің басты жаңалықтары. Жаңалықтарды іздеуге, сондай-ақ берілген іздеу сұрауы бойынша жаңалықтарға жазылуға болады.

Yandex.XML - бұл қызметті пайдалана отырып, сіз Яндекске xml форматында автоматты іздеу сұрауларын жасай аласыз.

Блогтар мен форумдарда іздеу - RSS-презентациясы бар ресурстарды іздеу, сонымен қатар ағымдағы сұраулардың рейтингі, танымал санаттар мен жаңалықтар.

Нарық – тауарлар мен қызметтерді сату бойынша ұсыныстарды іздеу, үлгілерді таңдау.

Медитативтік іздеу – іздеу түймесі бар, бірақ іздеу жолағы жоқ әлемдегі жалғыз іздеу қызметі.

Сөздіктер – энциклопедиялар, анықтамалықтар, сөздіктер-аудармашылар.

Суреттер - кескіндерді іздеу.

Бейнелер - бейнелерді іздеу.

Карталар - Еуропа мен Ресейдің карталары, Ресей Федерациясының ірі қалаларының карталары (үйге дейін дәл), картадан іздеу, сонымен қатар кейбір қалалардың көшелерін «кезбе» мүмкіндігі. [Дереккөз?]

Мекенжайлар – фирмалар мен ұйымдардың атаулары бойынша байланыс ақпаратын іздеу.

Плакат – қолжетімді іс-шаралар туралы ақпарат: кино, театр, концерттер, спорт, клубтар және т.б.

Ауа райы - ауа райы болжамы.

Телебағдарлама – орталық, облыстық және спутниктік арналартеледидар.

Сабақ кестесі – пойыздар мен ұшақтардың жүру кестесі.

Жекелендірілген:

Yandex.Video - бейнехостинг және бейне іздеу.

Пошта – электрондық пошта.

Ya.ru – блог жүргізу қызметі.

Yandex.Photos - фотохостинг.

Спамнан қорғау - спамды сүзу.

Адамдар - жеке Интернет беттеріне арналған тегін хостинг, сонымен қатар файлдарды сақтау қызметі.

Яндекс ақшасы - төлем жүйесіИнтернетте тауарлар мен қызметтерді төлеуге мүмкіндік береді.

Бетбелгілер - Yandex-пен біріктірілген бетбелгілерді сақтау жүйесі. Бар ".

Жазылымдар – жаңалықтарға жазылу.

Арна - онлайн RSS оқырманы

Yandex.Direct - бұл әр клик үшін төлейтін контекстік жарнама жүйесі.

Кубок - бұл Интернетте тұрақты іздеу жарысы.

Қалалар - Ресей қалаларының интернет-индекстері.

Тариф – интернет-провайдерлердің тарифтерін іздеу.

Ашық хаттар

Көктем – философиялық эсселердің автоматты түрде қалыптасуы.

Интернет - Интернетке қосылу жылдамдығын өлшейді.

Айна - негізгі Linux дистрибутивтерінің айнасы, сонымен қатар FreeBSD және басқа жобалар.

Яндекс. Жергілікті желі - Яндекстің барлық қызметтерін федералды тариф бойынша емес, жергілікті тариф бойынша пайдалану мүмкіндігін береді.

Metrica - трафикті өлшеуге, пайдаланушы әрекетін талдауға және жарнамалық науқандардың тиімділігін бағалауға мүмкіндік береді.

Бағдарламалық қамтамасыз ету өнімдері:

Корпоративтік пайдалануға арналған Spamoborona спам сүзгісі (ақылы).

Компьютерде Yandex Desktop Search файлдарын іздеуге арналған бағдарлама.

Jabber негізіндегі Ya. Online жедел хабар алмасу бағдарламасы. Ол сонымен қатар Яндекс-тен жаңа хабарламалар туралы хабарландырулар алуға мүмкіндік береді. Пошта, Odnoklassniki.ru және ВКонтакте сайттарындағы жаңа оқиғалар туралы.

Punto Switcher — автоматты орналасу ауыстырғышы.

үшін виджеттер операциялық жүйелер Mac OS X және Windows Vista, сонымен қатар Opera браузері үшін: Іздеу, Трафик, Сағат, Жаңалықтар.

Yandex ICQ — таңбалары бар және Яндекстің кейбір қызметтерін біріктіретін ICQ клиентінің арнайы нұсқасы.

Қызықты фактілер.

1) Яндекс.Ru-дағы сұраныстың орташа ұзақтығы қазір 2,7 сөзді құрайды. 1997 жылы ол 1,2 сөз болды, содан кейін іздеу жүйелерін пайдаланушылар телеграфтық стильге үйренді.

2) Яндекс www.yandex.ru сайтынан бұрын пайда болды. Яндекс сөзі 1993 жылы ойлап табылды және ол 1996 жылы жалпыға бірдей айтылды және ол кезде компанияны немесе іздеу жүйесін білдірмейді, бірақ өз серверіндегі іздеу технологиясы және Altavista.com іздеу жүйесіне морфологиялық префикс болды.

3) Яндекс технологиясының мүмкіндіктерін көрсету үшін www.yandex.ru іске қосылды, ешкім жарнамадан ақша табуды ойлаған жоқ.

4) «Барлығы бар» ұраны 2000 жылы ойлап табылған. Сол жылы Яндекс ресейлік теледидарда өзінің алғашқы веб-сайт жарнамасын іске қосты.

5) Яндекстің өзіне сәйкес, оның аудиториясының 80 пайызға жуығы Ресейден, 3 пайызға жуығы Еуропадан, 1 пайыздан сәл астамы АҚШ-тан.

6) Яндекстің кейбір техникалық қолдау қызметкерлері Платон Щукиннің ұжымдық бүркеншік атымен жұмыс істейді.

Қорытынды.

Енді бізде бар толық ақпаратЯндекс туралы. Біз оны кім басқарып отырғанын, оның қалай жұмыс істейтінін ішкі жағынан білеміз, компанияның даму тарихы қандай және т.б. Енді біз Яндекс неліктен ресейлік және әлемдік нарықта көшбасшы екенін оңай түсінеміз. Менің ойымша, Яндекстің табысқа жетуінің басты себебі - іздеу жүйесі орыс тілінің қиындықтарымен күресуде тамаша жұмыс істейді. Сондықтан ағылшын тіліне арналған іздеу жүйелері орыс тіліндегі құжаттарды да индекстей алмайды. Менің көретін екінші артықшылығым - Яндекс пайдаланушыларды өз қызметтерін пайдалануға шақыратын шығармашылық, мейірімді, күлкілі ұрандар. Яндекс іздеу жолының жанында орналастыратын тақырыптық суреттер ресейлік пайдаланушыға әлдеқайда қолжетімді.

Көшбасшылар, трендұсыныстар санының өсуі жалғасады. Бүгін жиналғандар нарықэлектрондық төлем жүйелер... Көбірек бір нәрсекезең: Paycash ең үлкенімен келісімге отырды іздеу жүйесі жүйесі ...

Заманауи іздеу жүйелері қуатты аппараттық және бағдарламалық жүйелер болып табылады, олардың мақсаты пайдаланушылардың сұранысы бойынша деректерді беру үшін Интернетте құжаттарды индекстеу болып табылады.

Сапалы және сәйкес ақпаратты қамтамасыз ету үшін іздеу жүйелері рейтинг формулаларын үнемі жетілдіріп отыруы керек. Пайдаланушылар үшін іздеу нәтижелерінің ең жоғары сапасын қамтамасыз ету және онымен оңтайландырушылардың манипуляцияларын болдырмау - бұл іздеу жүйелерін дамытудың негізгі мақсаттары.

Іздеу жүйелері енді ғана пайда бола бастаған уақытта олардың рейтингтік алгоритмдері өте қарапайым болды. Осының арқасында ең тапқыр SEO сайттары өздерін қызықтыратын сұраулар үшін SERP-те көрінетіндей етіп жарнамалай бастады. Нәтижесінде, бұл көбінесе пайдаланушыға пайдалы ақпаратты жеткізбейтін ресурстардың бірінші болып, осылайша пайдалы сайттарды екінші жоспарға шығаруына әкелді.

Осы әрекеттерге жауап ретінде іздеу жүйелері өздерінің рейтингтік алгоритмдерін жетілдіре отырып, формулаларға жаңа айнымалыларды енгізіп және барлық жаңа факторларды ескере отырып, өздерін қорғай бастады. Уақыт өте келе, бұл SEO және іздеу жүйелері арасындағы күреске көшті жаңа деңгейжәне неғұрлым жетілдірілген алгоритмдердің, соның ішінде машиналық оқытуға негізделген алгоритмдердің пайда болуына ықпал етті.

Іздеу жүйесін дамыту кезеңдері:

Диаграммадан көріп отырғаныңыздай, іздеу жүйелерінің және олардың алгоритмдерінің дамуы шеңбер бойымен жүреді. Кейбіреулер жаңа алгоритмдерді жасайды, басқалары оларға бейімделеді. Бұл процесс тоқтайды ма деп айту қиын, бірақ өз басым ол тоқтамайды деп сенемін. Жақында іздеу жүйесін рейтинг алгоритмдері әртүрлі факторлардың маңыздылығын өзгертіп қана қоймай, сонымен қатар сапалы түрде өзгергеніне қарамастан, бұл оңтайландырушыларды қорқытпайды: олардың арсеналы үнемі көбірек жаңа әдістермен толықтырылып отырады.

Іздеу жүйелері алгоритмдерін қаншалықты жиі өзгертеді?

Рунеттің негізгі іздеу жүйесіне жүгінейік - Яндекс. Ондағы рейтингтік формулалардағы сапалы және іргелі өзгерістер орта есеппен жылына бір рет болады. Жақында Яндекс Калининград деп аталатын жаңа іздеу платформасын ұсынды. Оның мәні әрбір пайдаланушының іздеу тарихы мен қалаулары негізінде жеке нәтижелерді қалыптастыруда жатыр.

Сонымен қатар, әрбір іздеу жүйесінде, соның ішінде Яндексте, автоматты немесе жартылай автоматты режимде белгілі бір факторлардың әсері бағаланбайды, ал басқалары, керісінше, өсетін кезде рейтинг формулаларында үнемі «бұралулар» бар екенін ұмытпаңыз. Мұның бәрі бір ғана мақсатпен жасалады - максималды арттыру іздеу нәтижелері, оны пайдаланушылардың қажеттіліктерін қанағаттандырмайтын сайттардан босату және сол арқылы оның өзектілігін арттыру.

Google іздеу жүйесіндегі өзгерістерге қарап, рейтинг формуласының да үнемі өзгеріп отырғанын көруге болады және Google-дың өзі жыл сайын жүздеген шағын өзгерістер туралы хабарлайды. Бірақ егер біз рейтинг формуласы туралы емес, Google-ға сапасыз сайттардан іздеу нәтижелерін тазартуға көмектесетін сүзгілер туралы айтатын болсақ, онда Panda немесе Penguin сияқты алгоритмдердің жаңа нұсқалары 3-6 ай сайын пайда болады.

Жоғарыда қойылған сұрақтың жауабы келесідей болуы мүмкін: іздеу жүйелері рейтингтік алгоритмдерін үнемі жетілдіріп отырады және күрт өзгерістер орта есеппен 6-12 ай сайын орын алады.

Қандай іздеу жүйесінің алгоритмдері жылжытуға нақты қауіп төндіреді?

Мен «кездесу» деп жауап бергім келеді - жоқ, бірақ бәрібір оны анықтайық. Бұл үшін біз сұрақ қоюымыз керек - іздеу жүйелері іздеу жүйесін жылжытуға кедергі жасауды мақсат ете ме?

Мен олай ойламаймын. Мұның бірнеше себептері бар:

1. Оңтайландырушылар іздеу жүйелеріне алгоритмдерін жақсартуға көмектеседі, бұл сайып келгенде жақсы іздеу нәтижелеріне әкеледі. Өйткені, егер оптимизаторлар болмаса, іздеу жүйелері 2000 жылы өз дамуын тоқтатқан болар еді.

2. SEO болмаса, көптеген коммерциялық сұраулардың нәтижелері рефераттар мен пайдасыз ақпараттық мақалалар жинағы сияқты болар еді.

Егер іздеу жүйесін жылжыту принципі болмаса, іздеу жүйелері қазіргідей қарқынды өсіп, дамудың мағынасы жоқ еді.

Осылайша, біз келесі қорытындыға келеміз:

Іздеу жүйелері мен SEO бір-бірімен тығыз және ажырамас байланысты. Сондықтан, олар белгілеген ережелерді сақтай отырып, сіз алгоритмдерден мүлдем қорықпайсыз, өйткені SEO SEO сияқты жойылуды мақсат етпейді.

Іздеу жүйесінің қызметтерін дамыту

Іздеу жүйелері туралы айтатын болсақ, Яндекс, Google немесе Bing-тің пайдаланушыларға көмектесуге арналған өз қызметтері бар екенін ұмытпаңыз. Іздеу нәтижелерінен басқа, эволюция жылдарында іздеу жүйелері іздеу нәтижелеріне қанағаттануды арттыру үшін өз пайдаланушыларының мінез-құлқын зерттеді.

Бұл үшін Яндекс іздеу жүйесі деп аталатын механизмді ойлап тапты. Пайдаланушыға өз сұрағына тез жауап алуға көмектесетін «сиқыршылар». Мәселен, мысалы, «ауа райы болжамы» сұрауын енгізген кезде Яндекс ағымдағы күндегі ауа-райы туралы ақпаратты іздеу нәтижелерінің бетінде тікелей көрсетеді, осылайша пайдаланушыны іздеу нәтижелері бойынша шарлау қажеттілігін сақтайды.

Басқа іздеу жүйелері, мысалы, Google, әрі қарай жүріп, «Сиқыршылардың» орнына қызықтырақ шешімді ұсынды - «Білім графигі».

«Білім графигі»(Ағылшын тілінен білім графигі) Google-дың смарт іздеу жолындағы алғашқы қадамы. Осы жаңалықтың арқасында іздеу жүйесі іздеу нәтижелерінде стандартты сілтемелерді ғана емес, сонымен қатар пайдаланушы сұрақтарына тікелей жауаптарды, сұрау объектісі туралы қысқаша ақпаратты және оған қатысты фактілер туралы ақпаратты көрсетеді. Техникалық тұрғыдан алғанда, «Білім графигі» әртүрлі нысандарды: жеке тұлғаларды, оқиғаларды, өмір сфераларын, заттарды, категорияларды біріктіретін семантикалық желі болып табылады. Ақпараттық база«білім графигі» үшін тұтас сызықкөздер: Freebase ашық семантикалық дерекқоры, Wikipedia, CIA ашық деректер жинағы және басқа көздер.

Қандай қорытынды жасауға болады, сіз сұрайсыз ба?

Жауап қарапайым: іздеу және іздеу қызметтеріжәне барлық қажетті ақпаратты SERP-те (іздеу нәтижелері) тікелей алуға мүмкіндік беретін және басқа сайттарға бару қажеттілігін жойып, пайдаланушы сұрақтарына жылдам және өзекті жауаптар бағытында дамуын жалғастырады.

Іздеу жүйелері пайдаланушының сұрағына осы жерде және қазір жауап беруге ұмтылу арқылы іздеу жүйесін оңтайландыруды бұза алады, осылайша жаһандық білім базасына айналады. Бірақ мұндай қорқыныштар негізсіз, өйткені жаһандық білім базасы болу үшін олар ақпарат қажет және оны іздеу жүйелерінің бір орында тұрмайтындығына, бірақ жұмыс істейтініне қатысатын бірдей оңтайландырушылар жұмыс істейтін сайттардың өзі сақтайды. үнемі дамып отырады.

Көріп отырғаныңыздай, SEO да, іздеу жүйелері де бір-бірінсіз өмір сүре алмайтын бір тізбектегі сілтемелер. Сондықтан SEO-ның жақын арада өлімі туралы ойлар негізсіз. Бұл мүмкін іздеу жүйесін оңтайландыруол уақыт өте келе дамиды, мысалы, кеңес беру, бірақ ол, әрине, өлмейді. Барлығыңызға ТОП-қа сәтті көтерілуіңізді тілеймін!

Индексті іздеу үшін пайдаланушы сұрауды құрастырып, оны іздеу жүйесіне жіберуі керек. Сұрау өте қарапайым болуы мүмкін, кем дегенде бір сөзден тұруы керек. Көбірек салу үшін күрделі сұрауіздеу шарттарын нақтылау және кеңейту үшін логикалық операторларды пайдалану қажет.

Ең жиі қолданылатын логикалық операторлар:

• ЖӘНЕ – «AND» операторы арқылы қосылған барлық өрнектер ізделетін беттерде немесе құжаттарда болуы керек. Кейбір іздеу жүйелерінде ЖӘНЕ орнына + операторы қолданылады.
• НЕМЕСЕ - "OR" операторы арқылы қосылған өрнектердің кем дегенде біреуі ізделетін беттерде немесе құжаттарда болуы керек.
• ЕМЕС - "NOT" операторынан кейінгі өрнек немесе өрнектер ізделетін беттерде немесе құжаттарда көрсетілмеуі керек (болмауы керек). Кейбір іздеу жүйелері ЕМЕС орнына «-» операторын пайдаланады.
• АРТЫСЫНДА – өрнектердің бірі екіншісінен кейін бірден жүруі керек.
• ЖАҚЫНДА – өрнектердің бірі екіншісінен алшақ, көрсетілген сөздер санынан аспауы керек.
• Дәйексөздер – тырнақшаға алынған сөздер құжатта немесе файлда болатын сөз тіркесі ретінде қарастырылады.

Іздеу жүйелерінің даму перспективалары

Логикалық операторлар берген іздеу сөзбе-сөз болып табылады - машина сөздерді немесе сөз тіркестерін дәл енгізілгендей іздейді. Енгізілген сөздер анық емес болса, бұл мәселе болуы мүмкін. Мысалы, «Bed» ағылшын сөзі төсек, гүлзар, балық уылдырық шашатын жер және т.б. Егер пайдаланушы осы мағыналардың біреуіне ғана қызығушылық танытса, оған басқа мағыналары бар сөз бар беттер қажет емес. Қажетсіз мәндерді жоюға бағытталған әріптік іздеу сұрауын құруға болады, бірақ іздеу жүйесінің өзі тиісті көмек көрсете алса жақсы болар еді.

Іздеу жүйесінің нұсқаларының бірі - концептуалды іздеу. Бұл іздеудің бір бөлігі пайдалануды қамтиды статистикалық талдауосы пайдаланушыны қызықтыруы мүмкін басқа беттерді табу үшін пайдаланушы енгізген сөздер немесе сөз тіркестері бар беттер. Түсінікті, тұжырымдамалық іздеу әрбір бет туралы қосымша ақпаратты сақтауды қажет етеді және әрбір іздеу сұрауы көбірек есептеуді қажет етеді. Қазіргі уақытта көптеген әзірлеу топтары іздеу жүйесінің осы түрінің өнімділігі мен өнімділігін жақсарту бойынша жұмыс істеуде. Басқа зерттеушілер табиғи тілдегі сұраулар деп аталатын басқа салаға назар аударды.

Табиғи тілдегі сұраулардың идеясы пайдаланушыға логикалық операторларды немесе күрделі сұрау құрылымдарын қадағаламай-ақ, олардың жанында отырған адамнан сұрайтындай сұрауды құрастыру болып табылады. Бүгінгі таңда ең танымал табиғи тілде іздеу сайты AskJeeves.com болып табылады, ол кілт сөздерді анықтау үшін сұрауды талдайды, содан кейін олар осы іздеу жүйесі құрастырған сайттар индексінде іздеу үшін пайдаланылады. Аталған сайт қарапайым іздеу сұрауларымен ғана жұмыс істейді, бірақ жоғары бәсекелес ортадағы әзірлеушілер өте күрделі сұрауларды өңдей алатын табиғи тілдегі іздеу сұраулары бар машинаны жасауда.

Кіріспе

3.1 Гофер

3.2 WAIS

3.4 AltaVista

3.5 OpenText

3.6 Ақпарат іздеу

4. Роботтарды іздеу

5.1 Rambler

5.2 Яндекс

5.3 Апорт

6.1 Google

6.2 Yahoo

7.1 Baidu іздеу жүйесі

8. Іздеу жүйелерінің даму перспективалары

Қорытынды

Әдебиеттер тізімі

Кіріспе

Интернеттегі әрбір пайдаланушы көптеген әртүрлі және қызықты ақпаратты таба алады, сонымен қатар желінің барлық бай мүмкіндіктерін пайдалана алады. Эссенің таңдалған тақырыбы бүгінгі күні өте өзекті, өйткені іздеу жүйелері өте жиі келуге байланысты бүгінгі күні алмастырылмайды дүниежүзілік желі... Интернет ресурстары көптеген мамандық иелерінің күнделікті жұмысының құралына айналды. Интернеттегі ақпараттың қарқынды өсуі оны әртараптандырылған деректер мұхитына айналдырды, олардың маңыздылығы олардың көлеміне пропорционалды өседі. Мамандардың айтуынша, интернет арқылы берілетін ақпарат көлемі жарты жыл сайын екі есе өседі. Интернетте күн сайын миллиондаған жаңа құжаттар пайда болады және іздеу жүйелері болмаса, олардың басым көпшілігі талап етілмейтіні, оны ешкім таба алмайтыны және бұл үлкен ақпараттың бәрі ешкімге пайдасыз болатыны заңдылық. . Ғаламдық желілердің ақпараттық ресурстарында шарлауды жеңілдететін, қажетті ақпаратты тез және сенімді түрде табуға мүмкіндік беретін құралдарды жасау қажеттілігі туындады. Интернетте арнайы іздеу құралдары пайда болды. Бірнеше жыл бұрын мұндай пікір болды: Интернетте бәрі бар, бірақ ол жерден ештеңе табу мүмкін емес. Дегенмен, іздеу каталогтарының, іздеу жүйелерінің және іздеу бағдарламаларының барлық түрлерінің пайда болуымен және қарқынды дамуымен жағдай өзгерді және қазір Интернетте шұғыл қажет ақпаратты кейде үстелде жатқан кітаптан тезірек табуға болады.

Өкінішке орай, іздеу жүйелері көбінесе ресурстарды дәл және әділ түсіндіре алмайды. Нәтижесінде іздеудің бірінші позициялары көбінесе шешілетін мәселеден «алыс» сайттар болып табылады. Бұл жағдайда нақты пайда әкелетін ресурстар іздеуден «шамадан тыс».

іздеу жүйесі интернет роботы

Бұл жағдайдың себебі қарапайым және іздеу жүйелері арқылы нәтижелерді алу және ұсыну технологиясында жатыр. Бір қызығы, бұл іздеу жүйелерінің кінәсі емес, өйткені олар іздеу индекстерін құру ережелерін жасыруға міндетті. Бұл іздеуді ұйымдастырған кезде технологияның өзі кінәлі.

Іздеу жүйесі – жартылай құрылымдық ақпараттар жинағына қол жеткізуді қамтамасыз ететін бағдарламалық құрал. Жартылай құрылымдық деректерге назар аударыңыз, яғни. реляциялық кесте түрінде көрсетуге болмайтын деректер іздеу жүйесін ДҚБЖ-дан ажыратады.

В бұл анықтамаіздеу жүйесі әртүрлі түрдегі ақпаратты білдіреді, яғни. мәтін, аудио, бейне, суреттер және т.б. Дегенмен, бұл іздеу жүйесінің толық функционалдығын сипаттау үшін өте қолайлы мәтіндік деректер екенін атап өткен жөн, өйткені мультимедиялық ақпаратты іздеу алгоритмдері ең алдымен мәтінді іздеу алгоритмдеріне негізделген.

Іздеу жүйесінің негізгі міндеті - пайдаланушының өзіне қажетті ақпаратты іздеуге кететін уақытын барынша азайту. Мәселе мынада, пайдаланушы қандай ақпарат өзекті деп санайды? Кейбір жағдайларда сәйкес ақпаратты дерекқордағы сұрауға қатысты барлық ақпарат ретінде анықтауға болады. Дәстүрлі түрде іздеу жүйесіне екі негізгі сипаттама қолданылады: дәлдік пен толықтық, дәлірек айтқанда, олардың тәуелділігі. Пайдаланушы жүйеге сұрау салған сайын, осылайша іздеуді бастайды, іздеу жүйесінің жинағындағы барлық құжаттар төрт бөлікке бөлінеді. Дәлдік іздеудің бір аспектісін анықтайды, яғни іздеу жүйесі пайдаланушының сәйкес мазмұнды іздеуге жұмсайтын уақытын қаншалықты азайтуға қабілетті. берілген өтінішақпарат. Толықтық басқа аспектіні анықтайды - жүйе берілген сұрауға қатысты ақпаратты қаншалықты жақсы таба алады. Әрбір табылған құжат сәйкес келетін және әрбір сәйкес құжат табылған кезде оңтайлы сұрауларды таңдауға болады.

Интернетті пайдалану кезінде іздеу жүйелері өте маңызды рөл атқарады. Интернетте ақпараттың көптігі сонша, оны іздеу қазірдің өзінде жеке тапсырмаға айналады және көп уақытты алады. Іздеу жүйелері шынымен бар бірнеше беттердің орнына сұрау бойынша мыңдаған сілтемелер береді қажетті ақпарат... Дүниежүзілік желіні пайдаланушылар кеңістіктік деректерді талдау мүмкіндігінің артықшылықтарын түсіне отырып, көптеген мемлекеттік, коммерциялық және академиялық ұйымдарда шоғырланған жер бедерінің цифрлық кескіндерін және басқа да кеңістіктік ақпараттарды жылдам және оңай іздеуге және қол жеткізуге мүмкіндік беретін құралды қажет етеді.

1. Іздеу жүйелерінің даму тарихы

Желінің ақпараттық ресурстарына қол жеткізуді ұйымдастырудың алғашқы жолдарының бірі ресурстарға сілтемелер тақырыптар бойынша топтастырылған сайт каталогтарын құру болды. Мұндай бірінші жоба 1994 жылы сәуірде ашылған Yahoo веб-сайты болды. Yahoo каталогындағы сайттардың саны айтарлықтай өскеннен кейін, каталогта ақпаратты іздеу мүмкіндігі қосылды. Бұл, әрине, толық мағынада іздеу жүйесі емес еді, өйткені іздеу аймағы Интернеттің барлық ресурстарымен емес, каталогтағы ресурстармен ғана шектелді.

Сілтеме каталогтары бұрын кеңінен қолданылған, бірақ бүгінде танымалдылығын жоғалтты. Мұның себебі өте қарапайым - тіпті үлкен көлемдегі ресурстарды қамтитын қазіргі заманғы каталогтар Интернеттің өте аз ғана бөлігі туралы ақпаратты береді. DMOZ желісінің ең үлкен каталогы (немесе Open Directory жобасы) 5 миллион ресурстар туралы ақпаратты қамтиды, ал іздеу базасы google жүйелері 8 миллиардтан астам құжаттан тұрады.

Бірінші толыққанды іздеу жүйесі 1994 жылы пайда болған WebCrawler жобасы болды.

1995 жылы Lycos және AltaVista іздеу жүйелері пайда болды. Соңғысы көптеген жылдар бойы Интернетте ақпаратты іздеу саласында көшбасшы болды.

1997 жылы Сергей Брин мен Ларри Пейдж Google-ді әлемдегі ең танымал іздеу жүйесін құрды.

1997 жылдың қыркүйегінде Интернеттің орыстілді бөлігінде ең танымал Яндекс іздеу жүйесі ресми түрде жарияланды.

Қазіргі уақытта 3 негізгі халықаралық іздеу жүйесі бар - Google, Yahoo және MSN Search, олардың жеке мәліметтер базасы мен іздеу алгоритмдері бар. Басқа іздеу жүйелерінің көпшілігі (олардың ішінде көп) тізімде көрсетілген 3 нәтижені бір немесе басқа түрде пайдаланады. Мысалы, AOL іздеу (search.aol.com) және Mail.ru Google-ды пайдаланады, ал AltaVista, Lycos және AllTheWeb Yahoo-ны пайдаланады.

Яндекс – Ресейдегі негізгі іздеу жүйесі, одан кейін Rambler, Google.ru, Aport, Mail.ru және KM.ru орналасқан.

AltaVista -іздеу жүйесі. «AltaVista» атауы сөзбе-сөз аударғанда «жоғарғы көрініс» дегенді білдіреді.

Бастапқыда AltaVista іздеу жүйесі іздеу технологияларын жасауда нағыз жаңашыл болды. 1995 жылы Alta Vista Digital Equipment Corporation (DEC) зерттеу зертханасының жабдықтарының бірі ретінде құрылды. Пайда болғаннан кейін AltaVista іздеу жүйесі пайдаланушылар арасында тез танылды және өз түрлерінің арасында көшбасшы болды. AltaVista көптеген тілдерге, соның ішінде қытай, жапон және корей тілдеріне қолдау көрсетеді. Шынында да, 1997 жылы Интернеттегі бірде-бір іздеу жүйесі сирек тілдерді айтпағанда, бірнеше тілмен жұмыс істемеді.

1998 жылы Compaq компьютерлік корпорациясы DEC (AltaVista-мен бірге) сатып алды. Ал 1999 жылдың басында AltaVista тәуелсіз бөлімше мәртебесін алды. Сол жылы Microsoft корпорациясы MSN сайтында пайдалану үшін AltaVista іздеу жүйесін лицензиялады. Көптеген қызығушылық танытқан адамдар үлкен көлемдегі ақпаратты индекстеу қызметтерін және үлкен дерекқорларда лезде іздеу мүмкіндігін пайдалана бастады. Сонымен қатар, іздеу жүйесінің мекенжайы өзгеріссіз қалды - altavista. digital.com.

Жиын мекенжай жолағы altavista.com AltaVista Technology сайтында хитке әкелді. Нәтижесінде, іздеу жүйесінің танымалдығы AltaVista Technology сайтына келушілердің үлкен ағынына және іздеу жүйесіне арналған әлеуетті пайдаланушылардың жоғалуына әкелді. Сайып келгенде, altavista.com сайтын Compaq 1998 жылдың тамызында 3,35 миллион долларға сатып алды (бүгінгі күнге дейін осындай ең үлкен мәміле). Осыған қарамастан, Compaq ешқашан іздеу жүйесінен пайда таба алмады. Сондықтан, 1999 жылдың маусымында Compaq және CMGI корпорациясы арасында стратегиялық желілік альянс құру туралы келіссөздер басталды, оның аясында AltaVista CMGI-ге сатылды. 1999 жылы 19 тамызда CMGI Compaq компаниясынан AltaVista 83% сатып алғанын жариялады.

2003 жылдың ақпанында AltaVista-ны Yahoo 2003 жылдың шілдесінде сатып алған Overture Services, Inc. 2011 жылдың мамыр айынан бастап AltaVista-ға ауысты іздеу технологиясы Yahoo.

AltaVista іздеу жүйесі интернет-дүкен, радиостанция, форумдар, чат бөлмелері, жеке фотоальбомдар және т.б. кіретін әмбебап портал болуға ұмтылды. Бірақ, үлкен ақша құюына байланысты, басқа алып порталдармен бәсекелестікке және сол бәсекелестердің жарияланған сынына байланысты, 2001 жыл компания үшін портал мәртебесіне шағымданудан бас тарту және «тамырға оралу» ұранымен өтеді. .

Компания өз қызметін басқа бағытқа бұрды. Қазір www.altavista.com жеке Интернет пайдаланушыларына өзінің іздеу жүйесін алға жылжытады және бизнеске іздеу технологияларын, соның ішінде интранеттерде пайдалану үшін лицензия береді. AltaVista іздеу жүйесінің тұтынушылық нұсқасын қаржыландырудың негізгі көзі жарнамалық кірістер болды, соның ішінде ең танымалдан. Мысалы, қазір нақты іздеу нәтижелері сілтемеден кейін орналастырылады, ол үшін AltaVista тиісті ресурстың иесі төлейді.

Портал болу әрекетімен қатар AltaVista іздеу технологияларын жетілдіруді жалғастырды.

Сондай-ақ AltaVista үшін тағы бір табыс көзі корпоративтік ішкі іздеу жүйелерін дамыту болып табылады.

Бәсекелестерден айқын артта қалғанына қарамастан, www.altavista.com өз мүмкіндіктеріне толықтай сенімді. Біз Alta Vista жоспарланғанның барлығын орындап, «тамырына оралады» деп үміттенеміз ... AltaVista (www.altavista.com) іздеу жүйесі барлық интернет пайдаланушыларының жүрегін ерте жаулап алды. Оның тарихы жақсы технологияны анық емес орналасумен біріктірудің классикалық мысалы болып табылады.

2. Іздеу жүйелері қалай жұмыс істейді

Кейде іздеу жүйелері деп аталатын іздеу және құрылымдау құралдары адамдарға қажетті ақпаратты табуға көмектесу үшін қолданылады. Интернеттегі құжаттар туралы ақпаратты жинау үшін агенттер, өрмекшілер, сканерлер және роботтар сияқты іздеу құралдары қолданылады. Бұл Интернеттегі беттерді іздейтін, осы беттердегі гипермәтіндік сілтемелерді шығаратын және мәліметтер қорын құру үшін тапқан ақпаратты автоматты түрде индекстейтін арнайы бағдарламалар. Әрбір іздеу жүйесінде құжаттарды табу және өңдеу жолын реттейтін өз ережелері бар. Кейбіреулер тапқан әрбір беттегі әрбір сілтемені бақылайды, содан кейін өз кезегінде әрбір жаңа беттегі әрбір сілтемені зерттейді және т.б. Кейбір адамдар графикалық және дыбыстық файлдарға, анимация файлдарына әкелетін сілтемелерді елемейді; басқалары WAIS дерекқорлары сияқты ресурстарға сілтемелерді елемейді; басқаларға алдымен ең танымал беттерді шолу ұсынылады.

Агенттер іздеу жүйелерінің ең ақылдысы болып табылады. Олар тек іздеумен ғана шектелмейді: олар сіздің атыңыздан транзакцияларды да орындай алады. Қазірдің өзінде олар белгілі бір тақырыптағы сайттарды іздей алады және олардың қатысуы бойынша сұрыпталған сайттардың тізімін қайтара алады. Агенттер құжаттардың мазмұнын өңдей алады, тек беттерді ғана емес, ресурстардың басқа түрлерін тауып, индекстей алады. Сондай-ақ оларды бұрыннан бар дерекқорлардан ақпаратты алу үшін бағдарламалауға болады. Агенттер индекстейтін ақпаратқа қарамастан, олар оны іздеу жүйесінің дерекқорына қайтарады.

Интернетте ақпаратты жалпы іздеу паук деп аталатын бағдарламалар арқылы жүзеге асырылады. Өрмекшілер табылған құжаттың мазмұнын хабарлайды, оны индекстейді және жиынтық ақпаратты шығарады. Олар сондай-ақ тақырыптарды, кейбір сілтемелерді қарап, индекстелген ақпаратты іздеу жүйесінің дерекқорына жібереді.

Тексерушілер тақырыптарға қарап, тек бірінші сілтемені қайтарады.

Роботтарды әртүрлі ұя салу тереңдіктерінің әртүрлі сілтемелерін, индексті және тіпті құжаттағы сілтемелерді тексеру үшін бағдарламалауға болады. Табиғатына байланысты олар ілмектерде тұрып қалуы мүмкін, сондықтан сілтемелерді орындаған кезде оларға маңызды веб-ресурстар қажет, дегенмен роботтардың иелері олардың индекстелуін қаламайтын сайттарды іздеуіне жол бермеуге арналған әдістер бар.

Агенттер ақпараттың әртүрлі түрлерін шығарып, индекстейді. Кейбіреулер, мысалы, кездескен құжаттағы әрбір сөзді индекстейді, ал басқалары әрқайсысында тек ең маңызды 100 сөзді индекстейді, құжаттың өлшемін және ондағы сөздердің санын, тақырыбын, тақырыптары мен тақырыпшаларын және т.б. индекстейді. Құрылған индекс түрі іздеу жүйесі қандай іздеуді орындай алатынын және алынған ақпараттың қалай түсіндірілетінін анықтайды.

Агенттер сонымен қатар Интернетті шарлай алады және ақпаратты таба алады, содан кейін оны іздеу жүйесінің дерекқорына орналастырады. Іздеу жүйесінің әкімшілері агенттердің қай сайттарға немесе сайт түрлеріне кіріп, индекстеу керектігін анықтай алады. Индекстелген ақпарат іздеу жүйесінің дерекқорына жоғарыда сипатталғандай жіберіледі.

Адамдар ақпаратты жібергісі келетін бөлімге арнайы пішінді толтыру арқылы ақпаратты тікелей индекске жібере алады. Бұл деректер дерекқорға тасымалданады.

Біреу Интернетте қолжетімді ақпаратты тапқысы келгенде, олар іздеу жүйесінің бетіне кіріп, қажетті ақпаратты егжей-тегжейлі көрсететін пішінді толтырады. Мұнда негізгі сөздерді, күндерді және басқа критерийлерді қолдануға болады. Іздеу пішініндегі критерийлер агенттер интернетті шарлау кезінде тапқан ақпаратты индекстеу кезінде пайдаланатын критерийлерге сәйкес келуі керек.

Дерекқор толтырылған пішінде берілген ақпарат негізінде сұрау тақырыбын шығарып алады және деректер қоры дайындаған сәйкес құжаттарды шығарады. Мәліметтер қоры құжаттар тізімінің көрсетілетін ретін анықтау үшін рейтинг алгоритмін пайдаланады. Ең дұрысы, пайдаланушының сұрауына ең сәйкес келетін құжаттар тізімде бірінші орынға қойылады. Әртүрлі іздеу жүйелері әртүрлі рейтинг алгоритмдерін пайдаланады, бірақ өзектілікті анықтаудың негізгі принциптері төмендегідей:

Құжаттың мәтіндік мазмұнындағы (яғни html кодындағы) сұрау сөздерінің саны.

Бұл сөздер орналасқан тегтер.

Құжаттағы іздеу сөздерінің орны.

Құжаттағы сөздердің жалпы санында сәйкестігі анықталатын сөздердің үлесі.

Бұл принциптерді барлық іздеу жүйелері қолданады. Төменде келтірілгендерді кейбіреулер пайдаланады, бірақ өте танымал (мысалы, AltaVista, HotBot).

Уақыт – деректер қорында бет қанша уақыт тұрады іздеу сервері... Алғашында бұл өте мағынасыз қағида сияқты көрінеді. Бірақ, егер сіз Интернетте бір айға дейін өмір сүретін қанша сайт бар екенін ойласаңыз! Егер сайт бұрыннан бар болса, бұл иесінің осы тақырыпта өте тәжірибелі екенін білдіреді және пайдаланушы бірнеше жыл бойы әлемге үстел тәртібі ережелері туралы хабар тарататын сайтқа қолайлырақ. бір апта бұрын дәл осындай тақырыппен пайда болған.

Дәйексөз индексі - қанша сілтеме осы бетіздеу жүйесінің базасында тіркелген басқа беттердің ықтимал нұсқалары.

3. Салыстырмалы шолусілтеме іздеу жүйелері

3.1 Гофер

Gopher Интернетте кеңінен таралған және бүкіләлемдік тордың ізашары болды. Кейбір мәліметтерге сәйкес, 1995 жылға дейін Gopher Интернеттегі ең жылдам дамып келе жатқан технология болды. Жарамды серверлер санының өсуі барлық басқа сервер түрлерінің өсуінен асып түсті. 1993 жылы дүние жүзінде бір жарым мыңнан астам гофер-серверлер болды.Шын мәнінде бұл бір уақытта таратылған іздеу және құжаттарды жіберу жүйесі болды. Сонымен қатар, бұл мүмкіндіктер заманауи іздеу жүйелері сияқты қосымша қызметтер ретінде енгізілмеді, бірақ жүйеге оның негізгі функциялары ретінде енгізілген.

Көмегімен арнайы бағдарламаВероника, іздеу тікелей Gopher жүйесінде кілт сөздерге негізделген арнайы сұрау тілі арқылы жүзеге асырылды. Бұл жүйе GOPHER (RFC-1436) пайда болғанға дейін ғана жұмыс істемеді, бұл таратылған репозиторийлерде сақталған құжаттарды іздеу және жеткізу жүйесі. Жүйе Миннесота университетінде жасалған (бұл штаттың елтаңбасында хомяк, ағылшын тілінде гофер бейнеленген). Gopher пайдаланушыға қызықты тақырыпты немесе мақаланы таңдай алатын мәзірлер тізбегін ұсынады. Іздеу нысаны мәтін немесе екілік файл болуы мүмкін (тіпті көптеген репозиторийлерде мәтіндік файлдармұрағатталған, демек, екілік пішінде), графикалық немесе дыбыстық кескінде сақталады. Gopher сонымен қатар WWW, Wais, Archie, Whois сияқты басқа іздеу жүйелеріне шлюздерді және telnet немесе FTP сияқты желілік утилиталарды ұсынады. Gopher-де FTP-ге қарағанда көбірек каталог мүмкіндіктері бар. Қол жеткізу жаһандық желі Gopher клиент-сервер үлгісін пайдаланады. Gopher жүйесі қазір ескірген, оның көптеген серверлері WEB-ге біріктірілген. Бірақ gopher заманауи WWW интерфейстерінің прототипі болып табылады және бұл оны қызықты етеді.

3.2 WAIS

WAIS - Интернеттегі ең күрделі іздеу жүйелерінің бірі. Онда тек анық емес жиынды іздеу және ықтималдық іздеу жүзеге асырылмайды. Көптеген іздеу жүйелерінен айырмашылығы, жүйе кірістірілген логикалық сұрауларды құруға, әртүрлі жақындық өлшемдері бойынша формальды сәйкестікті есептеуге, сұраныс пен құжат терминдерін өлшеуге, сонымен қатар сұранысты өзектілігі бойынша түзетуге мүмкіндік береді. Жүйе сонымен қатар терминдерді қысқартуды, құжаттарды өрістерге бөлуді және бөлінген индекстерді жүргізуді пайдалануға мүмкіндік береді. Бұл нақты жүйе Британника энциклопедиясын Интернетке енгізу үшін негізгі іздеу жүйесі ретінде таңдалғаны кездейсоқ емес.

WAIS таратылған ақпараттық жүйесі дәстүрлі ақпараттық іздеу жүйелерінің (АХЖ) желілік аналогы ретінде ойластырылған, ол желі пайдаланушыларына ХҒС үшін дәстүрлі ақпаратты іздеу тілін пайдалана отырып, толықмәтінді мәліметтер базасында іздеуге мүмкіндік береді, оның іздеу нұсқаулары кілт сөздер мен кілт сөздерге негізделген. / немесе 0R немесе ЖӘНЕ логикалық операторлары арқылы қосылған олардың қысқартулары.

Түпнұсқа WAIS жүйесін төрт компания әзірледі: Dow Jones and Co. (бизнес деректер базасы); Think Machines Corporation (ақпаратты іздеу жүйелері); Apple Computer (пайдаланушы интерфейсі) және KPMG Peat Maverick (көп пайдаланушы тәжірибесі). WAIS-тің бірінші прототипі пайдаланушылардың да, дерекқор әкімшілерінің де пайдалануына үлкен шектеулері бар жартылай коммерциялық жартылай зерттеу жүйесі болды. WAIS прототипі табиғи ағылшын тілін жақсы түсінді және оны жүйенің іздеу рецептеріне аударды. Шындығында, WAIS операциялық бөлмелер үшін FreeWAIS нұсқасының пайда болуымен ғана кеңінен қолданыла бастады. UNIX жүйелері... Бүгін бар көп саны WAIS енгізулері, негізінен коммерциялық және жүйе ақпаратты іздеу қозғалтқышының өзіндік стандартына айналды. Интернет желілері.

WAIS көмегімен пайдаланушыларға қажетті материалдарды табу үшін көп уақыт жұмсаудың қажеті жоқ.

Интернетте 300-ден астам WAIS кітапханасы бар. Бірақ ақпаратты негізінен академиялық ұйымдардың еріктілері беретіндіктен, материалдың көп бөлігі зерттеу және информатика саласында.

3.3 WWW

WWW – гипермәтінмен жұмыс істеу жүйесі. Бұл ең қуатты іздеу құралы. Гипермәтін әртүрлі құжаттарды алдын ала анықталған сөздер жиынтығы негізінде біріктіреді. Мысалы, мәтінде жаңа сөз немесе ұғым кездескен кезде гипермәтінмен жұмыс істейтін жүйе осы сөз немесе ұғым толығырақ қарастырылатын басқа құжатқа өтуге мүмкіндік береді.Ол жиі WAIS дерекқорларына интерфейс ретінде пайдаланылады. , бірақ гипермәтіндік сілтемелердің болмауы WWW мүмкіндіктерін Gopher сияқты қарапайым шолумен шектейді.

Пайдаланушы өз тарапынан WWW гипермәтінмен жұмыс істеу мүмкіндігін өзінің деректері мен WAIS және WWW деректері арасындағы байланыстыру үшін пайдалана алады, осылайша пайдаланушының жеке жазбалары ақпаратқа біріктірілгендей болады. жалпы қолжетімділік... Шындығында, бұл, әрине, болмайды, бірақ солай қабылданады.

3.4 AltaVista

Бұл жүйеде индекстеуді робот жүзеге асырады. Бұл жағдайда роботтың келесі басымдықтары бар:

бет басындағы негізгі сөз тіркестері;

кездесетін/сөздердің/ сөз тіркестерінің саны бойынша тірек тіркестер;

Егер бетте тегтер болмаса, ол сипаттаманың орнына индекстейтін және көрсететін алғашқы 30 сөзді пайдаланады (тег сипаттамасы)

AltaVista бағдарламасының ең қызықты ерекшелігі - оның кеңейтілген іздеуі. Көптеген басқа жүйелерден айырмашылығы, AltaVista жалғыз ЕМЕС операторын қолдайтынын бірден атап өткен жөн. Сонымен қатар, құжат мәтінінде терминдер қатар орналасуы керек кезде контекстік іздеу мүмкіндігін жүзеге асыратын NEAR операторы да бар. AltaVista негізгі сөз тіркестері бойынша іздеуге мүмкіндік береді, ал оның жеткілікті үлкен фразеологиялық сөздігі бар. Басқа нәрселермен қатар, AltaVista-да іздеу кезінде сөз пайда болатын өрістің атын көрсетуге болады: гипермәтіндік сілтеме, апплет, сурет атауы, тақырып және басқа да бірқатар өрістер. Өкінішке орай, рейтинг процедурасы жүйенің құжаттамасында егжей-тегжейлі сипатталмаған, бірақ рейтинг қарапайым іздеу үшін де, кеңейтілген сұрау үшін де қолданылатынын көруге болады. Шындығында бұл жүйені логикалық іздеуді кеңейтілген жүйе ретінде жіктеуге болады.

3.5 OpenText

Ақпараттық жүйе OpenText - ең коммерциялық болып табылады ақпараттық өнімжеліде. Барлық сипаттамалар ақпараттық нұсқаулықтардан гөрі жарнамаға көбірек ұқсайды. Жүйе логикалық қосқыштарды пайдаланып іздеуге мүмкіндік береді, бірақ сұраныс көлемі үш терминмен немесе сөз тіркесімен шектеледі. Бұл жағдайда біз кеңейтілген іздеу туралы айтып отырмыз. Нәтижелерді беру кезінде құжаттың сұранысқа сәйкестік дәрежесі және құжаттың көлемі хабарланады. Жүйе сонымен қатар дәстүрлі логикалық іздеу стилінде іздеу нәтижелерін жақсартуға мүмкіндік береді. OpenText рейтингтік механизмі болмаса, дәстүрлі ақпаратты іздеу жүйесі ретінде жіктелуі мүмкін.

3.6 Ақпарат іздеу

Бұл жүйеде индексті робот жасайды, бірақ ол бүкіл сайтты емес, тек көрсетілген бетті индекстейді. Бұл ретте роботтың келесі басымдықтары бар:

тақырыптағы сөздер