Поисковые роботы в статистике посещений.

5 комментариев

Определение робота поисковой системыВ заметке «Определение пауков ПС на PHP» я уже выкладывал элементарный скрипт, которым можно отсечь роботов от людей в статистике посещений сайта, и актуальный список ботов Яндекса.

Теперь вниманию читателей (и себе на память, как обычно) предлагаю законченное решение — PHP-скрипт, анализирующий активность кроулеров ПС на сайте. Кстати, кроме аналитики такой скрипт может быть полезен, если какой-нибудь особо активный бот мешает нормальной работе сайта.

Скрипт написан на PHP (возможна работа как в режиме модуля Апача, так и в FastCGI), полностью валиден (в рамках соответствия стандартам xHTML1/Strict и CSS/3), имеет гибкую систему настроек и панель управления. Скрипт также может отображать историю активности ботов конкретной поисковой машины.

Скачать скрипт и получить инструкции по его установке можно на сайте его разработчика — Usings.ru, там же есть и демо-версия статистики, генерируемой скриптом.

Жилинский Владимир.



INDEK.Биржа.

9 комментариев

INDEK.БиржаINDEK.Биржа — это новая биржа покупки/продажи ссылок для продвижения сайтов и их монетизации.

Интерфейс и схема работы этой биржи процентов на 80 повторяет уже известную биржу Sape, так что разобраться с подключением площадок и созданием кампаний будет довольно просто. Естественно, выходя на уже существующий рынок, создатели этой биржи приготовили несколько бонусов.

Преимущества INDEK.Биржи для вебмастера (размещение ссылок на своих сайтах и получение дохода):

  • Комиссия системы 10%, при добавлении качественных сайтов снижается на 70%.
  • Продажа ссылок со страниц до пятого уровня вложенности.
  • Партнёрская программа с двумя уровнями (доход от реффералов и их реффералов).
  • Более безопасный и надёжный код для размещения ссылок на динамических и статических сайтах.
  • Цены на обычные и контекстные ссылки можно выставлять отдельно.
  • Количество мест для ссылок можно выставлять для каждой страницы индивидуально.
  • Бонусы за добавленные сайты с высоким тИЦ – от 100 рублей за тИЦ 10 до 1500 рублей за тИЦ 500, которые можно потратить на покупку ссылок.
  • Помощь в легализации доходов.

Преимущества INDEK.Биржи для оптимизатора (покупка ссылок на продвигаемые сайты):

  • Основное: поиск, позволяющий покупать ссылки одновременно для любого количества URI за один запрос.
  • Увеличение скорости работы интерфейса в несколько раз за счёт кеширования и Ajax.
  • Поиск и  покупка блочных и контекстных  ссылок одновременно.
  • Интеллектуальный интерфейс покупки ссылок.
  • Поиск и покупка блочных и контекстных ссылок одновременно.
  • Панель быстрого доступа для веб-мастеров и оптимизаторов.
  • Удобные способы ввода и вывода средств – от WM и Robox до безнала и наличных.
  • Улучшенный интерфейс, в котором устранены недостатки существующих систем. При этом основные функции сохранены для более лёгкого перехода с других бирж.

Оптимизаторы восприняли новую биржу довольно скептически, что для них вообще характерно, но мне кажется, что попробовать вполне можно — бонусы за сайты с тИЦ неплохие, а ссылок много не бывает.

Содержание рекламных материалов может не отражать точку зрения автора.
Жилинский Владимир.



Curl based HTTP Client vs. Snoopy.

11 комментариев

Началось всё с того, что мне захотелось получать некоторые данные не прямым запросом, а через прокси. Переписывать много кода пришлось бы в любом случае, но на популярные грабли наступать не хотелось.

Задачу «отправить POST- или GET-методом данные и получить результат через прокси» взялись выполнить два PHP-класса.

PHPCurl HTTP Client — простая, но эффективная ООП-оболочка над библиотекой Curl. Содержит все методы, необходимые для получения данных со страниц, подмены referrer, авторизации, отправки POST-запросов, управления cookies и т.д.

Snoopy the PHP net client — PHP-класс, эмулирующий работу веб-браузера. Он автоматизирует получение содержимого страниц или, например, отправку форм. Запросы формирует функцией fsockopen().


Функции этих классов очень похожи. Оба они умеют получать содержимое страниц, отправлять любые значения полей User-agent и Refferer, передавать данные POST- и GET-методами, передавать Cookies, и ещё куча мелких бонусов у каждого класса.

Но работают они кардинально по-разному: одна использует системную библиотеку, а вторая PHP-функцию, поэтому я решил сделать замеры скорости для этих классов на одинаковой задаче.

Задача получилась такая: подключить класс, установить User-agent и Refferer, получить страницу с чужого сайта, вывести прошедшее время, повторить всё 100 раз.

Увы, результаты презентативными не оказались: классы показали одинаковую работу в одинаковое время с крошечным отрывом Snoopy в пределах погрешности. Так что можно пользоваться любым из них.

Жилинский Владимир.




© 2007-2010 Блог интернет-разработчика, автор — Zhilinsky.ru.
При использовании информации ссылка на источник обязательна.