Индексатор ссылок в google

Fanatic

В момент, когда гугл чудит с апи, публикую свой скрипт индексации, которым пользуюсь уже лет 5. Работает под гугл но может быть использован в любой поисковой системе.

Индексатор способен обрабатывать безлимитное число ссылок или работать с динамическими ссылками.

Итак, приступим:

1. Для индексатора используем любую отработку либо любые сайты, в которые можно вставить указанный ниже код.

2. Создадим 3 текстовых файла с именами link.txt, link2.txt, key.txt. В первых двух файлах будут ссылки для индексации, в третьем ключи которые будут использованы для заглавий страниц самого индексатора. В случае использования заголовки могут быть тематическими для повышения пробива индексации.

3. В индексаторе у Нас используются разделение ссылок по расширению для простоты и скорости работы скрипта. Для этого Мы используем два реврайта nginx:

rewrite ^/(.*).video$ /index.php;

rewrite ^/(.*).html$ /index2.php;

Все ссылки с расширением .video будут обрабатываться файлом index.php, файлы с расширением .html обрабатываются файлом index2.php

4. В файле index.php размещен скрипт перенаправления, который берет ссылки из файла link.txt с первой по последнюю строку по очереди. Если строки закончились, начинает сначала.

В файле index2.php размещен похожий скрпит, который создает ссылки на файлы с расширением .video, который обрабатывается файлом index.php. Файл index2.php предназначен для внутренней и внешней линковки. Внешние ссылки, в данном случае, берутся из файла link2.txt.

Файл key.php имеет идентичный скрипт, но предназначен для работы с заглавиями, которые Мы используем для заглавий страниц индексатора в файле index2.php.

Логика работы скрипта примитивна и проста. Бот приходит на страницу дора и получает указанное в переменной $RowCount количество ссылок, которые будут отображаться на html страницах индексатора. В примере это будет 150 внешниех анкорных ссылок с двухсимвольными анкорами и 150 внутренних ссылок на страницы с расширением .video. В скрипт нет другой перелинковки. На доменах используется гугл бот который приходит сам основываясь на том что было на домене ранее. Если на домене были доры то, как правило, бота там еще долго будет хватать для подобных манипуляций. Время от времени саму ферму можно пинать внешними ссылками.

Особенность фермы в том, что файлы link.txt, link2.txt, key.txt могут содержать любое количество строк (сколько места на диске хватит). Индексатор для каждого текстового файла использует файл кеша, в котором хранит строку, с которой работает в конкретный момент. При изменении текстового файла необходимо удалять файлы кеша, которые создаются в процессе работы скрипта.

Еще одна особенность фермы в том что она может держать 5-10 млн гуглоботов на VDS за 5 баксов.

Можно создать подобных скриптов сколько угодно и дергать из них строки добавляя их в файл index2.php

Удачных тестов.

Ссылка на сам скрипт