Мы знали на протяжении долгого времени: всемирная паутина большая. В 1998 Google проиндексировал 26 миллионов страниц, а в 2000 уже одно миллиард. За прошлые восемь лет, мы слышали много больших чисел о том, сколько же на самом деле страниц в сети. Недавно, даже наши поисковые инженеры узнав, насколько большая сеть в наши дни, остановились, испытывая благоговейный трепет -- когда наши системы, которые обрабатывают страницы сети, чтобы найти новый контент, достигли нового рубежа: 1 триллион (1,000,000,000,000) уникальных URL в сети.
ну большая часть это доры с 50к страниц с бесполезным контентом. так что думаю реальная часть, где есть инфа нормальная а не набор символов, существенно меньше