SEOSERVISE - Защита информации.

 
   
 

Главная


 


Несколько слов о заголовке HTTP - ответа Каждый ответ HTTP состоит из двух частей: заголовка ответа и собственно дан­ ных. Обычно данные имеют формат HTML , однако они могут представлять собой также изображение GIF или какой-либо другой объект. При исследовании узла крау-лером интенсивно используются заголовки HTTP -ответа. Рассмотрим заголовок отве­ та более подробно. Возможно, свое название такие программы получили по аналогии с краудерами из фанта­ стических романов — основным средством передвижения исследователей космоса. Краулер (от англ. "гусеница", "гусеничная машина") — общее название машин, предназначенных для передвижения в пустынях. — Прим. ред. Первым элементом заголовка HTTP -ответа является код ответа, содержащийся в первой строке заголовка. В приведенном выше фрагменте в качестве кода ответа указано значение 200. Оно говорит о том, что HTTP -запрос успешно обработан сер­ вером и был сгенерирован соответствующий ответ. Если код ответа свидетельствует об ошибке, то она произошла при обращении к запрашиваемому ресурсу. Код отве­ та 404 означает, что запрашиваемый ресурс отсутствует. Код ответа 403 свидетельст­ вует о том, что ресурс существует, но доступ к нему заблокирован. Другие коды от­ вета HTTP могут служить признаком того, что ресурс был перемещен или для дос­ тупа к нему требуются дополнительные привилегии. Программа-краулср должна уделять внимание этим кодам ответов и учитывать их при определении своего даль­ нейшего перемещения. Следующим важным фрагментом информации, содержащимся в заголовке HTTP - ответа, является поле Content - Type . В этом поле описывается тип передаваемых данных, размещаемых в ответе HTTP после заголовка. В процессе исследования узла значение этого поля также анализируется краулером. Извлекать гиперссылки из GIF -файла не имеет смысла. Так что особое внимание необходимо уделять данным типа text / html .

 

 

 

 

 

 
 

1 |2 |3 |4 |5 |6 |7 |8 |9 |10 |11 |12 |13 |14 |15 |16 |17 |18 |19 |20 |21 |22 |23 |24 |25 |26 |27 |28 |29 |30 |31 |32 |33 |34 |35 |36 |37 |38 |39 |40 |41 |42 |43 |44 |45 |46 |47 |48 |49 |50 |51 |52 |53 |54 |55 |56 |57 |58 |59 |60 |61 |62 |63 |64 |65 |66 |67 |68 |69 |70 |71 |72 |73 |74 |75 |76 |77 |78 |79 |80 |81 |82 |83 |84 |85 |86 |87 |88 |89 |90 |91 |92 |93 |94 |95 |96 |97 |98 |99 |100 |