. , , ,

,,,

- — ,

 

Rambler

: ĸ .

150

: . .


- 2004

 

 

Ņ.3

ⅅ....3

.3

.3

腅..4

腅..4

.4

ⅅ...4

.5

-...5

.5

..5

..5

ꅅ...5

ꅅ..6

, Rambler ?..6

, robots.txt, robots.txt...7

robots.txt8

robots.txt8

: User-agent..8

腅..9

META- "Robots".9

󅅅.9

.9

充..16

 

:

           : ;

           : ;

           : , ;

           : .

:

           , Rambler ;

           ;

           .

, . . , , , ( ). .

, , , Not nOt . , , .

, , , , , (n-1)*2, n - . , "" , "-", ". ", " ".

, , . , . , , ( ). ( ) .

, AND ( ) , , . , ' AND ' , '', ''.

, , OR ( ) , . ' OR ' , '' '' ( ).

NOT ( -) , , . , ' NOT ' , '' ''.

, AND: , . , ' ' ' AND AND '. OR ( : ).

:

AND

&

OR

|

NOT

!

, , . AND NOT , AND NOT, OR. .

. , , , .

, ( ). , ' "" ' , '... ...', , '.. , ...'.

, . .

, , , . , , .

' | ' ' AND OR ' , , " , '' '', , ' ( | )' ' AND ( OR )', " , '' '' ''".

('*', '?'), " " " " . , .

, , . . , , - "" , , .
, '' , '' . , , , ( ). .

. - , .

, '' , '', '', '' ''. , .

-

. - - , , , . . , .

, , . - , 40 . , , , . , ' ' , '' '' 40 .

'(, )', - , - , (, ). , '(2, )' , '' '' ( 2, .. 1)

, , , . .

, Top100, TopShop, TopList, SpyLog, HotLog. , , , ${counter=ID}, counter - (top100, topshop, toplist, spylog hotlog), ID - ( ).

: , - ( Top100 - 193680), ${top100=193680}.

Internet (Netscape Internet Explorer 4) Rambler. ?

.

" Rambler". JavaScript. , , , Rambler. . 96

, :

Netscape

'View' 'Show Personal Toolbar'

Internet Explorer

'View' ( '') 'ToolBars' (' '). 'Links' ('')

, Rambler ?

1.          Rambler. , . http://www.rambler.ru/doc/add_site_form.shtml.

2.          Rambler , :

: .ru, .su
: .ua
: .by
: .kz
: .kg
: .uz
: .ge

.

(, .com, .org, .net), , search.support@rambler-co.ru , . .

3.          Top100 . , , , , . , 100 - !

4.          " " "" . . , .

5.          Macromedia Flash. , c , , . , flash- . , , , , , . , flash-, HTML- .

6.          <meta name="keywords"...> <meta...>, <meta name="robots"...>. , , ( , ). , - , , . ( ). , . , , , , .

7.          . HTML- ( ):

<title>
<h1>...<h4>
<b>, <strong>, <u>

, , Rambler . , .

8.          , . , . Rambler , ( "") .

HTML- <noframes> . , , (, Lynx) .

9.          200 . . , - ; .

10.        <a href=".../imagemap ...">, <map name="name">. , imagemap, .

11.        / . , '' 'p', '' - 'c'. , . .

'-' . ; , . , .

12.        () , . . . HTTP - robots.txt HTML- <meta name="robots" ...>.

, , , , <noindex> ... </noindex>. , , .

13.        , , ( !) .

, HTML :

<a href="directory" ...>
<a href="directory/" ...> ("" href)

. , . .

14.        , . - , .

robots.txt

robots.txt

, , - -. , , , , , . StackRambler.

- web- ( , http://www.rambler.ru/), , robots.txt ( - http://www.rambler.ru/robots.txt).

, robots.txt. / - .

, robots.txt ( meta- Robots, . ) "" - - , , .

robots.txt

robots.txt . , , . robots.txt, robots.txt ( www.hostsite.ru/~user1/) : "" . , robots.txt "" . robots.txt () , - (URI) . robots.txt.

:
http://www.w3.org/robots.txt
http://w3.org/robots.txt
http://www.w3.org:80/robots.txt
( .)

:
http://www.yoursite.ru/publick/robots.txt
http://www.yoursite.ru/~you/robots.txt
http://www.yoursite.ru/Robots.txt
http://www.yoursite.ru/ROBOTS.TXT

robots.txt

robots.txt , , , , .

#
User-agent:  *
Disallow: /

#
User-agent: StackRambler
Disallow:

: User-agent

robots.txt . User-agent, , Disallow.

. , User-agent, User-agent .

User-agent:  *. , Disallow , , User-agent.

: Disallow

, User-agent, Disallow. Disallow .

"Disallow: /dir" , ( ) "/dir". : "/dir.html", "/dir/index.html", "/directory.html".

"/dir", : "Disallow: /dir/". , - , "/". , "Disallow:" , .

: "Disallow:  *", "Disallow: *.doc", "Disallow: /dir/*.doc" , , , ! Disallow, robots.txt , .

, Allow robots.txt . , , "" . , .

, User-agent.

Disallow , - User-agent - User-agent.

"#" .

META- "Robots"

robots.txt, , <meta name="Robots" content="..."> web-. , .

content. :

           NOINDEX - ;

           NOFOLLOW - , ;

           INDEX - ;

           FOLLOW - .

           ALL - INDEX, FOLLOW

           NONE - NOINDEX, NOFOLLOW

: <meta name="Robots" content="INDEX, FOLLOW">.

, :

<META name="ROBOTS" content="index, nofollow">

, .

content , .. ; , content "none, nofollow".

650 . , ( Rambler'a) . , 15 .

,

, , . , , , . , , , , , , . , .

, , , . , , . , ? , , ? ? ? ? ? ? , , ?

, , , , . , , .

- , , . , 100 , " ", 70 , 0,7. , , , , .

. , . .

-, URL , . , . , , , - , , . . , , URL 10 10 . : , , .

50 . 70 , -. , . , . , , .

, , () . , , , , , . . , 70 , 71 (70 + ). , , .

("") . . ; URL 404 ( ), . : , , URL, .

. . , -, , "" . , . . , . .

- , . , " " 150 , 70 " ", (" "), 70/150 (~0,5). , , "" , .

. . - , , . . , , , "": , . , . "" - "" "" ; "" - "" "" .

( ), . "", , "". , , - . , "" ("", ""), "" . .

. , , ( , ). .

- . , C++, /, /-. ++ , , +, , ; , , .

. . "" . , , , .

() . , :

           () - " " , , ;

           - " " , ;

           - , , , .., (" ", " "). , - . , , , . , .. .

           - , , . , , . , "" 5 , "" - 650, .

           ( ) - 10 100 , , 10 20 ;

           - Top100 . .

           - , , . , " " , .

, , . , . , , , , -, , , . , : , , , .

OR () , NOT (-), , , . . (, ), , : (2, ). , , .

. , , . , . , , , , , .

- , , , . , . . , " ", , .

8 , . 7 : , , , , , , . . web- . - " " - , 100 .

. , , - , - .. . . , . .

7 . 10, 20 40 , . . . , . , . "" , .

" " : . , 100. 100 , , -, , - . , 100, . , , . , . , "" .

" " . , . , . " " , 100, , . , , 100. , , , , , , , .

. 60 . . : , , . 1.

Cisco 6000 series. Cisco - frontend (1.1 - 1.3, . 1.3). Frontend, , , proxy-, (2.1 - 2.8, . 2.2). frontend , (3.1 - 3.2, . 3.1) 100 (4.1 - 4.2, . 4.1). proxy , , , - backends (5.1. - 5.7., . 5.1.2, 5.2.11, 5.3.1 ..) " " (6.1 - 6.2, . 6.1).

77 backend'. 11 , . , , , backend' (5.1.1 - 5.1.11 ), - backend' (5.2.1 - 5.2.11) .. Proxy- backend . backend' . .

, backend', proxy-. " ". Proxy , : , , , backend'. , 5.3.1, - 6.1, - 5.5.2 .. proxy- . frontend.

proxy-, frontend 100, , . Frontend , html , ( ) html Cisco, .

. , , . , , . . 45 backend'. , , backend' 77, .

- "", . . . , "".

. , , . (++, /) ( ++ , . , , , , ..) -. - - , . , - , , . , -, , , .

. . , . , . , . .

, -, . , . , .

. -, , . , , . .

, . , , . . .

- . . , , , . , , , . .

, . , . ( " " - " ", " ", " "), ( "gjujlf" - ""), ( "" - "", "", "" ..)

. , . , . , , .

, , , . , , " ". , - , .

Rambler.

 

 

 

! , , , .
. , :