Кришнамурти Б., Рексфорд Дж. Web-протоколы. Теория и практика

Подождите немного. Документ загружается.

Часть

Компоненты программного обеспечения

Web

кси-сервером к более старой версии, прежде чем прокси-сервер осуществит его пе-

ресылку.

Прокси-сервер не имеет права изменять семантику запроса. В противном случае

клиент, сделавший запрос, может получить не тот ответ, который ожидал, либо по-

лучить его в формате, который не сможет обработать. Например, Web-сервер и

прокси-сервер могут использовать определенный способ кодирования ответа (до-

пустим, новый алгоритм сжатия). Однако прокси-сервер может изменить ответ,

чтобы клиент смог его понять. Номер версии клиента дает прокси-серверу инфор-

мацию об его функциональных возможностях. Таким образом, прокси-серверу воз-

можно придется осуществить декомпрессию сжатого сообщения перед передачей

сообщения клиенту.

По сравнению с клиентом, прокси-сервер взаимодействует с гораздо большим

числом серверов и по природе своей деятельности с большей вероятностью обра-

щается к одному и тому же Web-сайту много раз. Можно избежать многочислен-

ных обращений к DNS для преобразования доменного имени одного и того же сай-

та в IP-адрес, если это уже недавно было сделано от имени другого клиента. Заме-

тим, что обращения к DNS выполняются прокси-сервером только в том случае,

если он является последним в цепочке прокси-серверов между пользовательским

агентом и Web-сервером; в противном случае он просто пересылает запрос следую-

щему прокси-серверу в цепочке.

В качестве Web-клиента прокси-сервер принимает решения об открытии и о

поддержании соединений со многими серверами. Стандартный клиент, действую-

щий от имени одного пользователя, должен поддерживать одновременно неболь-

шое число соединений. Действуя от имени нескольких клиентов, прокси-сервер

должен иметь возможность открывать и поддерживать большое число соединений

одновременно. Прокси-серверу приходится выделять значительные ресурсы для

обслуживания состояний от имени этих соединений, загружать ресурсы с множест-

ва серверов и буферизировать данные. Если ответ генерируется динамически, про-

кси-сервер должен буферизировать ответ на длительное время, прежде чем он смо-

жет закончить пересылку ответа.

3.4.5.

Пример использования прокси-сервера

Мы рассмотрим использование прокси-сервера, взяв за основу пример из вто-

рой главы (раздел 2.3). Клиент загружает документ с несколькими встроенными

изображениями. Теперь предположим, что браузер был настроен для работы через

прокси-сервер.

Допустим, что изображение fool.gif находится в кэше браузера, а изображение

foo2.gif

—

в кэше прокси-сервера. Прокси-сервер может воспользоваться своей

стратегией актуализации содержимого кэша, чтобы решить, может ли кэширован-

ная копия foo2.gif быть возвращена клиенту без повторной ее проверки на исход-

ном сервере. Если прокси-сервер считает, что ответ не является больше актуаль-

ным, он может обновить кэшированный ответ, отправив модифицировагнхый за-

прос исходному серверу. Модифицированный запрос к исходному серверу требует,

чтобы содержимое ресурса было возвращено только в том случае, если ресурс был

изменен с того момента, как он был кэширован прокси-сервером. Если прокси-сер-

вер отправляет запрос и получает новую копию ресурса, ему нужно кэшировать от-

вет и переслать ответ клиенту. Что касается клиента, то он получает ресурс foo2.gif

от прокси-сервера. Клиент не имеет понятия о действиях, предпринятых про-

кси-сервером для получения ресурса. Таким образом, при запросе ресурса foo2.gif

прокси-сервер действует как Web-клиент.

Глава

Прокси-серверы

Теперь предположим, что ресурс foo3.gif не содержится в кэше прокси-сервера.

Прокси-сервер в этом случае действует как Web-клиеит и отправляет запрос ис-

ходному серверу, где размещен данный ресурс. Если пользователь обращается к ре-

сурсу amex.cgi, заполняя форму, или выбирает ресурс mp.tv, эти запросы также

пересылаются через прокси-сервера. Прокси-сервер открывает отдельное соедине-

ние с соответствующим исходным сервером в каждом из этих случаев. Ресурс

amex.cgi может потребовать значительного времени на обработку. При этом про-

кси-сервер должен будет поддерживать соединения с исходным сервером и с кли-

ентом открытыми.

3.5.

Цепочки прокси-серверов и иерархии

На первых порах применения прокси-серверов при взаимодействии между

пользовательскими агентами и серверами на пути между ними присутствовал

единственный прокси-сервер. В скором времени на пути между пользовательским

агентом и исходным сервером стали появляться несколько прокси-серверов. При-

чиной этому послужила структура организаций, использующих Web. Например,

в университете может быть прокси-сервер, через который проходят все Web-тран-

закции, но на некоторых факультетах университета могут быть свои собственные

прокси-серверы. Выход университета в Internet может осуществляться через про-

вайдера, также имеющего собственный прокси-сервер. Наконец, выход в Internet

исходного сервера может также осуществляться через прокси-сервер. В результате

этого пользовательский запрос и ответ исходного сервера проходят через несколь-

ко прокси-серверов, образующих цепочку. В настоящее время в Web вполне обыч-

на ситуация, когда запрос проходит через группу связанных между собой про-

кси-серверов. Агент пользователя может быть непосредственно настроен для взаи-

модействия с прокси-сервером для всех своих операций с Web. На рис. 3.4

представлена конфигурация такой системы.

Клиент

Прокси-

сервер-1

Прокси-

сервер-2

Прокси-

сервер-п

Исходный|

сервер

Рис.

3.4. Цепочка прокси-серверов в Web

Как видно из рис. 3.4, сообщение от агента пользователя может проходить через

несколько прокси-серверов, прежде чем достигнет исходного сервера. Часто реаль-

ная структура может отличаться от простой линейной структуры, представленной

на рис. 3.4. Так, промежуточные серверы могут иметь другие серверы, подключен-

ные к ним с обеих сторон. Довольно распространенной является структура, когда

группа серверов внутри организации образует иерархию. Например, региональный

прокси-сервер может быть связан с другими региональными прокси-серверами, ко-

торые, в свою очередь, могут быть связаны с национальными прокси-серверами.

Отметим, что в этом случае, в отличие от структуры на рис. 3.4, представляющей

собой линейную цепочку, позади регионального или национального прокси-серве-

ра могут располагаться другие прокси-серверы. Подобная иерархическая структура

прокси-серверов широко распространена и очень полезна в странах, где стоимость

доступа к Internet высока. Ограничив в разумных пределах число подключений на

региональном или национальном уровне, организации могут существенно сокра-

тить время ожидания пользователей и стоимость соединений. Группа прокси-сер-

92 Часть II. Компоненты программного обеспечения Web

веров может обслуживать больший объем кэшей для хранения ответов. Однако

при наличии нескольких прокси-серверов при исполнении запроса возникает необ-

ходимость поиска нужного кэша.

3.6. Настройка прокси-сервера

в главе 2 (раздел 2.4) мы узнали, что пользователь может настроить браузер и за-

дать различные физические и семантические параметры. В случае использования

прокси-серверов пользователи обычно не могут влиять на его настройки. Например,

пользователь обычно не может изменять специфические для прокси-сервера пара-

метры, такие как размер кэша или частоту обновления содержимого. В браузере

можно задать, следует ли использовать прокси-сервер в качестве промежуточного

компонента. Клиент может обойти прокси-сервер и выбрать режим, при котором все

запросы направляются исходному серверу непосредствегню, хотя этому может поме-

шать присутствие межсетевых экранов. Многие браузеры могут быть настроены на

использование прокси-сервера. В некоторых организациях пользователям разреша-

ется изменять настройки по умолчанию с помощью выбора, использовать ли про-

кси-сервер вообще, исгюльзовать онределехнхый прокси-сервер для всех запросов

или для всех запросов за исключением тех, которые адресуются определенным

Web-серверам. Последняя из этих опций предоставляет пользователю наибольшие

возможгюсти. Пользователь может разрешить использование прокси-сервера для

сайтов, которые не нарушают его конфиденциальности, или для популярных сайтов,

ресурсы которых могут содержаться в кэше прокси-сервера. Для других доменов

пользователи могут обходить прокси-сервер. Большинство пользователей не изменя-

ют настройки но умолчанию, а мгюгие пользователи могут даже не знать, что у них

есть возможность изменять настройки но умолчанию. Для некоторых организаций

попытки пользователей изменить настройки браузера, связанные с прокси-сервером,

могут оказаться тщетными. Администраторы организации могут использовать стра-

тегию, благодаря которой все пользовательские запросы должны обязательно прохо-

дить через прокси-сервер.

Серьезные проблемы возникают при настройке мобильных клиентов, когда при

настройке необходимо указывать один из нескольких прокси-серверов. В связи

с этим последнее время ведутся работы по созданию средств для автоматического

поиска нужного прокси-сервера. Вместо того чтобы просто найти прокси-сервер,

задействуется более совершенный механизм, который позволяет найти информа-

цию о настройках, которая, в свою очередь, позволяет использовать наиболее под-

ходящий в данный момент прокси-сервер. Эта работа пока находится на стадии

экспериментов [CGC^OOJ, использует протокол Dynamic Host Configuration Proto-

col [Dro97] и связана применением DNS [Мос87а].

3.7. Проблемы, связанные

с конфиденциальностью

в главе 2 мы обсуждали проблемы, связанные с конфиденциальностью, приме-

нительно к браузерам. Прокси-серверы играют более важную роль с точки зрения

безопасности. Являясь промежуточным звеном для множества пользователей, про-

кси-сервер осведомлен о многих деталях их поведения:

Глава

Прокси-серверы

• ресурсах, к которым осуществляется доступ;

• частоте доступа;

• заголовках и теле запроса;

• заголовках и теле ответа.

Эта осведомленность потенциально несет угрозу для безопасности пользователя.

Однако прокси-сервер часто воспринимается как

доверенный

промежуточный ком-

понент, если пользователи настроили свои браузеры для доступа через прокси-сер-

вер.

Пользователям известгю, кто ответственен за собранную информацию. Как мы

увидим в разделе 3.8, существуют ситуации, в которых у пользователей отсутствует

информация о том, что их запросы и ответы проходят через прокси-серверы. В таких

случаях иеосведомленгюсть о наличии промежуточного звена вызывает необходи-

мость задуматься, кто имеет доступ к информации о работе пользователя.

Прокси-серверам известен IP-адрес клиента. Если клиентом является однополь-

зовательский компьютер, или если в пользовательских запросах присутствует одно

и то же значение поля User-Agent, прокси-сервер может определить, что группа за-

просов исходит от одного и того же пользователя. Прокси-сервер не всегда может

точно знать, кто осуществляет доступ к Web-ресурсам через него. Если прокси-сер-

вер расположен перед многопользовательским компьютером, он не всегда в состоя-

нии точно установить, какой пользователь отправил запрос. В многопользователь-

ской среде для идентификации пользователя может быть использована другая ин-

формация, например, системная информация о времени входа пользователя

в систему и выхода из нее. Подобные приемы часто используются в случаях рас-

следования преступлений. Полиция в ряде штатов США использует журналы ре-

гистрации для отслеживания пользователей. Другой уязвимой с точки зрения безо-

пасности информацией является перечень ресурсов, к которым осуществлялся дос-

туп. Выборочный просмотр ресурсов, к которым обращался пользователь, может

создать «портрет» пользователя. Люди, осуществляющие поиск информации по

определенным темам, связанным с определенными заболеваниями, либо посещаю-

щие Web-сайты по трудоустройству, должны в определенной степени считаться

с риском, что об их проблемах и намерениях станет известно другим лицам.

Содержимое запроса может также содержать дополнительную информацию о

пользователе, такую как день рождения или номер его кредитной карты. Эта ин-

формация извлекается из форм, заполняемых повсеместно при регистрации для

участия в конференциях и списках рассылки, покупке товаров, заказе авиабилетов.

Очевидным решением, все чаще используемым многими Web-сайтами, является

использование шифрования на основе протокола SSL, в этом случае прокси-сервер

используется в качестве туннеля. Аналогичным образом, содержимое ответа также

несет информацию о пользователе.

3.8.

Другие виды прокси-серверов

Мы рассмотрели различные роли прокси-серверов, в которых значение данного

термина было достаточно прояснено. Однако имеются и другие виды прокси-сер-

веров. Мы рассмотрим два из них: обратные прокси-серверы и

перехватываюище

прокси-серверы. Мы обсудим причины, по которым такие прокси-серверы находят

применение, а также выясним, чем они отличаются от традиционных прокси-серве-

ров,

рассмотренных ранее в этой главы. Важно отметить, что хотя термины обрат-

ный и перехватывающий прокси-сервер используются достаточно часто, эти про-

94 Часть П. Компоненты программного обеспечения Web

кси-серверы не всегда соответствуют спецификации протокола HTTP. Что еще бо-

лее важно, их поведение пока не стандартизовано.

3.8.1.

Обратные прокси-серверы или серверы-заместители

Изначально прокси-серверы размещались как можно ближе к пользователю. Ад-

министраторы конфигурировали прокси-серверы для локальных сетей или пользо-

вателей небольших организаций. По мере роста популярности Web ряд Web-сайтов

начал притягивать к себе большое число пользователей. Чтобы уменьшить нагрузку

на серверы, прокси-серверы пришлось размещать ближе к исходным серверам. Та-

кие прокси-серверы получили название обратных прокси-серверов, поскольку они

располагались на другом конце цепочки запрос-ответ по сравнению с традиционны-

ми прокси-серверами, располагающимися ближе к пользователю. Другой нричигюй,

по которой прокси-серверы стали размещать перед исходным сервером (или груп-

пой серверов, обслуживающих сайт), стдло желание сделать исходные серверы «не-

видимыми» для входящих запросов. Обратные прокси-серверы защищают исходный

сервер от прямых атак извне. Промежуточный компонент перед исходными сервера-

ми может также оказать помощь в распределении нагрузки между гругнюй серверов,

обслуживающих активно посещаемый сайт. Прокси-сервер в этом случае переадре-

сует запросы на другие компьютеры. Обратный прокси-сервер представляется кли-

енту как исходный сервер. Обратный прокси-сервер действует как внешний интер-

фейс для одного или нескольких исходных серверов, которые могут находиться за

сетевым экраном. Клиентский запрос передается обратному прокси-серверу, кото-

рый пересылает его исходному серверу. Обратный прокси-сервер может также иметь

кэш. При пересылке запроса обратный прокси-сервер действует как туннель; т.е.

биты, передаваемые в обоих направлениях, остаются без изменений. Извне можно

видеть лишь один IP-адрес обратного прокси-сервера.

Заметим, что хотя термин «обратный прокси-сервер» стал достаточно популярным,

в действительности необходимости в применении отдельного термина нет. С точки

зрения клиента он взаимодействует с исходным сервером. Обратный прокси-сервер

является лишь шлюзом, а взаимодействие между обратным прокси-сервером и внут-

ренним исходным сервером (серверами) скрыто от клиента. Фактически обратный

прокси-сервер может не использовать HTTP для взаимодействия с исходным серве-

ром (серверами), находящимися позади него. Для обратных прокси-серверов в настоя-

щее время используется и новый термин

—

сервер-заместитель.

3.8.2. Перехватывающие прокси-серверы

Если прокси-сервер явно предназначен для размещения перед Web-клиептом

(т.е.

агентом пользователя, трактующим прокси-сервер как сервер), то все запросы

и ответы к клиенту и от клиента будут проходить через прокси-сервер. Вне зависи-

мости от конфигурации локальной сети, прокси-сервер пропускает через себя все

передаваемые между Internet и клиентом пакеты. У клиента отсутствует возмож-

ность миновать прокси-сервер и напрямую связаться с исходными серверами. Во

многих организациях данная конфигурация используется по умолчанию. Однако

в том случае, если у пользователей имеется несколько способов выхода в Internet

или обхода прокси-сервера, прокси-сервер не сможет пропускать через себя все за-

просы и ответы.

Глава

Прокси-серверы

Часть трафика, 0т1юсящаяся к Web, может быть извлечена путем просмотра се-

тевого трафика. Прокси-сервер, который либо напрямую просматривает сетевой

трафик и перехватывает Web-трафик, либо получает перенаправленный трафик от

элементов сети, осуществляющих перехват трафика, называется

перехватывающим

прокси-сервером. Перехватывающий прокси-сервер затем предпринимает попытку

сформировать ответ на запрос локально, либо переадресовывает запрос. Чтобы пе-

рехватывающий прокси-сервер пропускал все запросы и ответы, он должен быть

установлен таким образом, чтобы через него проходил единственный путь выхода

в Internet от пользователей. Для использования перехватывающего прокси-сервера

необходимо, чтобы на маршрутизаторе было предусмотрено отслеживание сетевого

трафика. Поскольку перехват выполняется на более низком уровне стека протоко-

лов,

весьма затруднительно реализовать обход перехватывающего прокси-сервера

для определенных запросов. Клиенты не могут принимать решение о переадреса-

ции каких-либо своих запросов и ответов. Как следствие, никакой настройки кли-

ентов не требуется.

В разделе 3.2 мы познакомились с термином «прозрачный прокси-сервер». Про-

зрачность прокси-сервера определяется тем, что происходит с сообщениями, а не

тем, является ли наличие прокси-сервера невидимым для клиента или для пользо-

вателя. Перехватывающие прокси-серверы изначально назывались прозрачными

прокси-серверами. Позднее была внесена ясность, и перехватывающие прокси-сер-

веры получили наименование, которое более к ним подходит.

3.9. Резюме

Прокси-сервер представляет собой популярный и полезный промежуточный

компонент Web, который дает возможность большому числу клиентов позади него

осуществлять совместный доступ к Internet. Прокси-серверы осуществляют фильт-

рацию запросов и ответов, а также в некоторой степени обеспечивают конфиденци-

альность пользователей. Кэширование помогает значительно уменьшить время

ожидания для клиентов. Прокси-серверы гарантируют неизменность семантики пе-

ресылаемых запросов/ответов, выступая в роли клиента или сервера. Поскольку

практически все популярные провайдеры используют прокси-серверы, большая

часть запросов к Web-серверам исходит от прокси-серверов. В Web достаточно

часто используются иерархические структуры прокси-серверов на местном, регио-

нальном и национальном уровнях.

Web-серверы

Web-сервер

—

это программа, которая создает и возвращает ответы на запросы

Web-pecypcoB клиентами. Эта глава описывает работу Web-серверов, завершая тем

самым обзор программных компонентов Web: клиентов, инициирующих запросы,

прокси-серверов, которые действуют как промежуточные звенья, и Web-серверов,

создающих ответы. Обработка клиентского запроса включает в себя несколько

ключевых действий: синтаксический анализ сообщения-запроса, проверку полно-

мочий, связывание URL в запросе с ресурсом в файловой системе сервера, по-

строение сообщения-ответа и возврат сообщения-ответа клиенту, обратившемуся

с запросом. Сервер может генерировать сообщение-ответ различными способами.

В простейшем случае сервер лишь извлекает файл, ассоциированный с URL, и воз-

вращает содержимое клиенту. В других случаях сервер может вызвать сценарий,

который связывается с другими серверами или базами данных для построения со-

общения-ответа.

Эта глава начинается с рассмотрения отличий между

Web-сайтом

и Web-cepee-

ром.

Затем поясняется, как сервер обрабатывает клиентский запрос. При этом за-

трагиваются проблемы аутентификации и способы динамического формирования

запросов. HTTP представляет собой протокол, не сохраняющий состояния, поэто-

му серверу нет необходимости сохранять информацию между последовательными

запросами. Будет описано, как сервер может сохранять некоторую информацию

с целью снижения нагрузки при обработке будущих запросов. Чтобы обслуживать

несколько клиентов одновременно, серверу нужно иметь эффективный способ пе-

реключаться между обработкой различных запросов. Мы обсудим и сравним два

основных подхода: серверы с

управлением

по

событиям

и серверы с управлением по

процессам,

а также различные гибридные подходы. Системные ресурсы, которые

требуются серверу, зависят от степени популярности Web-сайта. Мы кратко оста-

новимся на проблемах установки нескольких серверов на одном компьютере,

управления копиями одного сайта на нескольких компьютерах. С целью проиллю-

стрировать работу реального Web-сервера в конце главы приводится практический

пример на базе Web-сервера Apache.

4.1.

Web-сайты и Web-серверы

Web-сайт состоит из набора Web-страниц, связанных с именем хоста, тогда как

Web-сервер представляет собой программу, которая обрабатывает клиентские за-

просы на Web-ресурсы. В этом разделе мы рассмотрим функциональные возмож-

ности различных видов Web-сайтов и обсудим основные принципы работы Web-

серверов. Мы также поясним различие между Web-сайтом и Web-сервером и меж-

ду Web-сервером и платформой, на которой последний функционирует.

98 Часть П. Компоненты программного обеспечения Web

4.1.1,

Web-сайт

Действия пользователя при работе в Web заключаются в загрузке Web-страниц

с различных Web-сайтов. Web-сайты существенно отличаются друг от друга но

предоставляемой информации. Ниже приводится классификация Web-сайтов.

• Университетский Web-сайт. Университет может иметь свой Web-сайт, кото-

рый предоставляет информацию об учебных и научно-исследовательских про-

граммах, содержит фотографии и контактную информацию. Основной уни-

верситетский сайт может быть связан с Web-сайтами факультетов. Эти

Web-сайты могут содержать списки рабочих и домашних телефонов, инфор-

мацию об определенных учебных курсах, а также личные домашние страницы

преподавателей и студентов.

• Web-сайт фирмы-производителя. Компания может иметь Web-сайт, описы-

вающий ее продукцию и оказываемые услуги. На сайте могут также быть по-

мещены подробные описания продукции, информация о ценах, а также сред-

ства для размещения заказов. Подобная информация может представлять со-

бой всего лишь преобразованные печатные материалы в виде набора статиче-

ских файлов и изображений. В качестве дополнения сайт может давать поль-

зователям возможность размещать заказы на товары и услуги путем взаимо-

действия с базой данных, которая содержит информацию о наличии и количе-

стве товаров, а также о заказах потребителей. Кроме того, сайт может давать

возможность пользователям осуществлять поиск в базе да1Н1ых.

• Корпоративная интрасеть. Многие компании имеют внутренние Web-сайты,

которые недоступны для посторонних лиц. Эти сайты обычно предоставляют

доступ к каталогам, внутренним базам данных. Для доступа к информации,

как правило, требуется указать имя пользователя и пароль. До появления

Web доступ к таким базам данных для сотрудников был затруднен. Доступ

к базам данных через внутренние Web-сайты способствует повышению эф-

фективности ведения бизнеса и дает возможность быстрого и удобного полу-

чения информации.

• Web-сайты бизнес-бизнес (В2В). Компании, которые зависят друг от друга

по роду своей деятельности, также могут использовать Web-сайты для коор-

динации совместных действий, поскольку при этом достигается высокая эф-

фективность при меньших затратах, чем в случае взаимодействия посредством

традиционного документооборота, телефона или факса. Например, одна ком-

пания (допустим, производитель автомобилей) может размещать на Web-сай-

те другой компании заказы (например, на комплектующие). Выполнение по-

добных транзакций между компаниями через Web упрощает процесс разме-

щения заказов и отчетность.

• Различные мероприятия. Некоторые Web-сайты посвящены разовым меро-

приятиям, таким как спортивные состязания или национальные выборы. Эти

сайты обычно существуют относительно недолго, а содержимое их быстро из-

меняется. Рассмотрим Web-сайт, посвященный Олимпийским играм. За не-

сколько недель до начала соревнований на сайт обращается небольшое число

пользователей. Затем на сайте размещается информация о месте и времени

проведения соревнований, а также об их участниках. После начала Олимпий-

ских игр на сайте размещается актуальная динамически генерируемая инфор-

мация о спортивных событиях. В это время сайт пользуется чрезвычайной по-

пулярностью. Возможны всплески числа запросов непосредственно перед или

Глава

Web-серверы

сразу после популярного соревнования. Запросы могут приходить от пользо-

вателей со всего мира и в любое время суток.

• Портал. Портал представляет собой централизованное хранилище обновляе-

мой информации, к которой более или менее регулярно обращается большое

число пользователей. Например, портал может предоставлять доступ к гюво-

стям, информации о погоде, программах телевидения. Возможна настройка спо-

соба представления информации пользователями. Например, пользователя мо-

жет интересовать погода в Токио, результаты последних бейсбольных матчей,

текущие цены на определенные акции. Кроме того, портальный сайт предостав-

ляет гиперссылки, организованные но категориям, обеспечивая удобный доступ

пользователей. Разработчики портала разбивают эти ссылки но категориям и

проверяют их.

• Поиск. Пользователю может понадобиться найти информацию, которая не

подпадает под имеющиеся на сайте категории. Поисковая система дает воз-

можность пользователю ввести запрос и возвращает перечень гипертекстовых

ссылок на Web-страницы, которые содержат введенные пользователем слова.

В противоположность Web-сайтам, которые предоставляют доступ к внутрен-

ним базам данных, поисковая машина осуществляет запросы к индексирован-

ному множеству Web-pecypcoB, которое собирают и обновляют специальные

программы-снайдеры, о чем говорилось во второй главе (раздел 2.7). Главная

задача поисковой системы

—

создавать содержательные ответы на пользова-

тельские запросы.

• Шлюз к другим сервисам. Многие Web-сайты предоставляют доступ к дру-

гим сервисам, например, к группам новостей, электронной почте, доскам объ-

явлений, дискуссионным группам, службам мгновенных сообщений. Напри-

мер,

Web-сайт новостной сети дает возможность пользователям подписывать-

ся на группы новостей, читать и публиковать в них статьи. Это требует хране-

ния на сайте информации о группах новостей и статьях, прочитанных каждым

пользователем. Аналогично, Web-сайт может обеспечивать внешний интер-

фейс для электронной почты, который предоставляет возможность пользова-

телям читать, хранить, создавать и отправлять сообщения. Дискуссионные

группы предоставляют пользователям возможность общаться друг с другом.

Сетевые газеты могут предоставлять читателям форумы для обсуждения и об-

мена мнениями о последних событиях.

Степень загрузки Web-сайта может определяться различными факторами, в том

числе популярностью сайта, разнообразием состава пользователей, количеством и

объемом Web-pecypcoB, динамически генерируемым содержанием, а также необхо-

димостью ограничить доступ для определенных пользователей.

4.1,2.

Web-сервер

—

это программа, которая обрабатывает НТТР-занросы на опреде-

ленные ресурсы. Создание и передача Web-страницы может потребовать обраще-

ния к нескольким серверам, выполнения сценариев и запросов к базам данных.

Рассмотрим классический пример, когда пользователь обращается к Web-сайту

www.bar.com. Ресурс http://www.bar.com/foo.html может содержать несколько

встроенных изображений, которые автоматически загружаются браузером. Эти

встроенные изображения не обязательно размещены на www.bar.com. Например,

HTML-файл http://www.bar.com/foo.html может иметь встроенное изображение