Поисковые роботы в статистике посещений.

5 комментариев

Определение робота поисковой системыВ заметке «Определение пауков ПС на PHP» я уже выкладывал элементарный скрипт, которым можно отсечь роботов от людей в статистике посещений сайта, и актуальный список ботов Яндекса.

Теперь вниманию читателей (и себе на память, как обычно) предлагаю законченное решение — PHP-скрипт, анализирующий активность кроулеров ПС на сайте. Кстати, кроме аналитики такой скрипт может быть полезен, если какой-нибудь особо активный бот мешает нормальной работе сайта.

Скрипт написан на PHP (возможна работа как в режиме модуля Апача, так и в FastCGI), полностью валиден (в рамках соответствия стандартам xHTML1/Strict и CSS/3), имеет гибкую систему настроек и панель управления. Скрипт также может отображать историю активности ботов конкретной поисковой машины.

Скачать скрипт и получить инструкции по его установке можно на сайте его разработчика — Usings.ru, там же есть и демо-версия статистики, генерируемой скриптом.

Жилинский Владимир.



INDEK.Биржа.

9 комментариев

INDEK.БиржаINDEK.Биржа — это новая биржа покупки/продажи ссылок для продвижения сайтов и их монетизации.

Интерфейс и схема работы этой биржи процентов на 80 повторяет уже известную биржу Sape, так что разобраться с подключением площадок и созданием кампаний будет довольно просто. Естественно, выходя на уже существующий рынок, создатели этой биржи приготовили несколько бонусов.

Преимущества INDEK.Биржи для вебмастера (размещение ссылок на своих сайтах и получение дохода):

  • Комиссия системы 10%, при добавлении качественных сайтов снижается на 70%.
  • Продажа ссылок со страниц до пятого уровня вложенности.
  • Партнёрская программа с двумя уровнями (доход от реффералов и их реффералов).
  • Более безопасный и надёжный код для размещения ссылок на динамических и статических сайтах.
  • Цены на обычные и контекстные ссылки можно выставлять отдельно.
  • Количество мест для ссылок можно выставлять для каждой страницы индивидуально.
  • Бонусы за добавленные сайты с высоким тИЦ – от 100 рублей за тИЦ 10 до 1500 рублей за тИЦ 500, которые можно потратить на покупку ссылок.
  • Помощь в легализации доходов.

Преимущества INDEK.Биржи для оптимизатора (покупка ссылок на продвигаемые сайты):

  • Основное: поиск, позволяющий покупать ссылки одновременно для любого количества URI за один запрос.
  • Увеличение скорости работы интерфейса в несколько раз за счёт кеширования и Ajax.
  • Поиск и  покупка блочных и контекстных  ссылок одновременно.
  • Интеллектуальный интерфейс покупки ссылок.
  • Поиск и покупка блочных и контекстных ссылок одновременно.
  • Панель быстрого доступа для веб-мастеров и оптимизаторов.
  • Удобные способы ввода и вывода средств – от WM и Robox до безнала и наличных.
  • Улучшенный интерфейс, в котором устранены недостатки существующих систем. При этом основные функции сохранены для более лёгкого перехода с других бирж.

Оптимизаторы восприняли новую биржу довольно скептически, что для них вообще характерно, но мне кажется, что попробовать вполне можно — бонусы за сайты с тИЦ неплохие, а ссылок много не бывает.

Содержание рекламных материалов может не отражать точку зрения автора.
Жилинский Владимир.



uBot – учим блог говорить.

13 комментариев

uBotНовый сервис uBot предоставляет весьма оригинальную функцию — конвертирование ваших RSS-лент (текст) в MP3-подкасты (звук).

В принципе, различные text2speech (TTS) API известны уже давно, но в данном случае речь идёт о чтении текста на русском языке, что весьма смело с учётом его особенностей.

С помощью юБота можно превратить свой блог в «боткаст» — то же самое, что и подкаст, но текст читает не человек, а автоматизированная TTS-система. Больше боткаст от уже привычных подкастов ничем не отличается. Для стандартного движка standalone-блогов (WordPress)  у юбота есть плагин, добавляющий к каждому посту кнопку «прослушать».

Послушав боткаст на основе своего блога могу сказать следующее — русскоязычные TTS очень продвинулись со времён «Говорилки». Звук уже воспринимается без особого напряжения и его смысл, как правило, понятен.

Сложно воспринимаются, разве что, специализированные термины и англоязычные вставки. И интонация голоса у TTS такая, как будто зачитывается план захвата мира методом угона у NASA боевого спутника.

Ещё у юБота есть некая партнёрская программа, позволяющая делать в боткасты рекламные вставки и получать за это некое вознаграждение. Но я совершенно не понял её принципов — информация об этом на сайте весьма расплывчата.

Хочется, честно говоря, придумать способ скормить сервису OPML-файл и получить на выходе некое блог-радио, которое неспеша читало бы содержимое моего гугл-ридера. Можно, конечно, приспособить какой-нибудь агрегатор или, например, Yahoo Pipes, но лучше бы это была функция от разработчиков. Слушать ленты по одной — не так уж удобно, смысл RSS как раз в миксе.

В качестве примера работы сервиса можете послушать меня в новом формате боткаста.

Мне интересно: есть ли среди читателей люди, для кторых такой формат подачи был бы полезен? Напишите мне в комментариях: стоит ли тратить место на странице под кнопку прослушивания, или это никому не нужно?

Жилинский Владимир.



Мониторинг и анализ доступности сайтов.

16 комментариев

МониторингЯ собрал в один список все известные мне сервисы, позволяющие следить за правильной работой сайта и сообщать владельцу, если что-то не работает или работает не правильно — этот процесс обычно называют мониторингом.

В моём списке сервисы упорядочены по увеличению Alexa Traffic Rank основного домена, то есть от самого популярного к самому альтернативному (кроме первого сервиса).

1. Webpinger.ru — многофункциональный сервис для мониторинга сайтов и серверов. Сообщает о проблемах уведомлениями на электронную почту, ICQ и SMS. Поддерживает основные виды протоколов (http, https, ftp, pop, smtp, socket, dns). Большое число точек мониторинга по всему миру, их количество постоянно растет. Частота проверок от 5 до 60 минут. Подключение 10 первых сайтов бесплатное, большой выбор систем оплат за подключение платного тарифа.

2. Яндекс Метрика умеет проверять доступность сайтов и уведомлять об этом по SMS и e-mail. Хотя, говорят, не очень ровно и не очень вовремя. Необходима установка счётчика на страницы сайта.

3. Pingdom.com — очень популярный англоязычный сервис мониторинга сайтов. Базовый тариф стоит $9.95 в месяц и позволяет контролировать 5 сайтов из множества точек и получать 20 SMS-уведомлений за оплаченный период.
Доступные протоколы мониторинга: HTTP/HTTPS, Ping, TCP/UDP, DNS, POP3/IMAP/SMTP, проверка содержимого страницы.

4. Host-Tracker.com — тоже популярный сервис, но с русскоязычным интерфейсом и бесплатным тарифом. Количество точек для мониторинга — 47. Позволяет бесплатно мониторить 2 сайта с интервалом проверки доступности 30 минут и получать еженедельные отчёты на e-mail.
Более продвинутый мониторинг стоит $5 в месяц (оплатить можно почти всем, даже Яндекс.Деньгами) и позволяет проверять каждые 10 минут до 5 сайтов, формировать отчёты, проверять содержимое страниц и получать до 10 SMS-уведомлений в месяц. Поддерживает отправку уведомлений в ICQ и Jabber.

5. Siteuptime.com позволяет бесплатно проверять 1 сайт. В конце месяца высылает отчёт, имеет много точек мониторинга и замеряет время отклика страницы. На бесплатном тарифе интервал мониторинга может быть 30 или 60 минут, протоколы — HTTP, POP3, SMTP, FTP, SSL, DNS, TCP, Ping, Content, HTTP Password Protection.

6. Site24×7.com — сервис довольно удобный, но тоже платный. Есть бесплатный сильно ограниченный тариф с интервалом мониторинга раз в 60 минут, но с возможностью замеров скорости отклика.

7. Internetseer.com — бесплатный тариф позволяет проводить мониторинг доступности раз в час, остальное — за деньги.

8. Hyperspin.com (они же Wembot.com и Rootinternet.co.uk) — платные сервисы. Полный набор стандартных возможностей (ping, HTTP, HTTPS, FTP, SSH, SMTP, DNS, POP3, IMAP, MySQL, уведомления по e-mail и SMS, 13 точек мониторинга). Расчёт стоимости происходит индивидуально, например, мониторинг 1 сайта по 1 порту раз в 15 минут стоит $2 в месяц, а отправка 1 SMS-уведомления — $0.20.

9. Mon.itor.us — невероятно мощный и функциональный сервис мониторинга сайтов, сервисов и сетей. Куча возможностей по опросу (HTTP, HTTPS, FTP, SIP,IMAP, SMTP, POP3 на любом порту, любой TCP или UDP порт, DNS, Ping) и отчетности, мониторинг из 3 точек, опрос каждые 30-45 минут, предупреждения высылаются на e-mail, ICQ, YIM, MSN, GTalk, SMS. Можно скачать и установить программу-агент (под Windows), который помимо мониторинга процессов, памяти и жестких дисков самой машины может выступать в роли еще одной точки опроса (HTTP и Ping).
Имеет платную премиум-часть — Monitis.com.

10. Montastic.com — бесплатный, простой и эффективный. Позволяет проверять до 100 сайтов, имеет 2 точки мониторинга и интервал проверок около 10 минут. Умеет формировать отчёт в виде RSS-канала.

11. BasicState.com — довольно полезный, и при этом бесплатный сервис. Каждые 15 минут он пытается определить IP-адрес сайта по DNS (resolve), установить HTTP-соединение и получить данные. При возникновении ошибки сервис отправляет уведомление об ошибке, этапе на котором она произошла и её характере. Позволяет мониторить неограниченное количество сайтов.

12. AreMySitesUp.com на бесплатном тарифе обещает проверять сайт раз в 60 минут или быстрее и сообщать в случае проблем, по возможности с анализом их причин.

13. UptimeInspector.ru — платный сервис с большим количеством услуг и сложной схемой подсчёта их стоимости.

14. Verinet.ru — на бесплатном тарифе мониторит 1 сайт раз в 30 минут и отправляет уведомления на e-mail и ICQ. Платные тарифы от $1 в месяц.

 

Кроме онлайн-сервисов для мониторинга состояния сайтов, сетей и сервисов можно воспользоваться десктопными приложениями. Стандартом де-факто тут является Nagios, альтернативой — Zabbix. Определённо, стоит упомянуть и о Monit.

Если вы знаете ещё аналогичные сервисы — пишите в комментарии, пополним список.

Жилинский Владимир.



Скидки на Semonitor от Majordomo.

11 комментариев

Скидки на Semonitor от MajordomoSemonitor – это популярный пакет программ, используемый многими SEO-специалистами. Эти программы позиционируются как мощные и простые в использовании инструменты, избавляющие оптимизатора от рутинной работы.

C 19 мая до 19 июня для всех клиентов хостнига Majordomo действуют хорошие скидки:

  • Версия Standard – 1500 руб. (скидка 500 руб.)
  • Версия Professional – 2750 руб. (скидка 750 руб.)
  • Версия Expert – 3500 руб. (скидка 1000 руб.)

Узнать, чем отличаются эти версии и купить необходимую можно на сайте Semonitor.

Логотип Majordomo красуется теперь и в самой программе при её запуске рядом со ссылкой на учебник по поисковой оптимизации.

Кстати, с помощью моего сервиса для анализа показателей сайтов (проверка тИЦ, PR, числа страниц в индексе, наличия в каталогах и FeedBurner-статистики) уже были проверены 50 000 сайтов, на нескольких из них даже размещены счётчики с этого сервиса.

Жилинский Владимир.



Блогу два!

32 комментария

Блогу два!Сегодня 1 мая, а значит этому блогу исполняется ДВА ГОДА. Именно 1 мая 2007 года был зарегистрирован домен, и в этот же день была опубликована первая запись.

За этот год блог прибавил около 800 читателей, обзавёлся кое-какими новыми фишками (регистрация доменов, скрипты статистики). Кстати, услугами, связанными с доменами, успешно пользуются уже более 200 человек. Если у кого-то по нему есть какие-то претензии — пишите, не стесняйтесь.

Если посмотреть на график, который рисует FeedBurner, то можно увидеть, что резкого скачка количества читателей у этого блога не было: обороты набираются постепенно, но стабильно. Заметный провал в начале этого года — это перенос FeedBurner на сервера Google.

Число читателей

Ещё нашёл интересное: скриншот страницы блога, сделанный в 2007 году. Вот он:

Скриншот, 2007

Спасибо всем, кто меня читает, это важно для меня. Даже если я буду это отрицать ;-)
Поздравления принимаются в любом эквиваленте и с помощью любого средства связи.

Жилинский Владимир.



Полезные скрипты.

12 комментариев

Выложил для всеобщего использования несколько скриптов, которые иногда использую сам — может ещё кому-нибудь пригодятся.

Самый интересный скрипт, с отладкой которого я дольше всего возился, это анализатор статистики RSS-ленты в FeedBurner. Принцип работы подсмотрен у BlogPerfume Feed Analysis v1.1, но исходниками автор поделиться отказался, пришлось написать самому. Скрипт показывает увеличение числа читателей за каждый месяц, каждый день месяца и каждый день недели в виде динамических графиков.

График читателей по дням недели

Как показали наблюдения, большинство блогеров используют FeedBurner и необходимый скрипту Awareness API у большинства открыт, так что подсмотреть можно и чужую статистику, зная адрес RSS-фида.

Ну и добавил несколько мелких скриптов:

  • Определение Google PageRank
  • Определение Яндекс тИЦ
  • Массовая проверка PR и тИЦ
  • Кнопки с показателями
  • WHOIS-сервис

Для проверки пузомерок (тИЦ и PR) можно скачать готовые функции (PHP), используемые в этом сервисе.

Специально для себя добавил функцию сохранения значений тИЦ и PR, и отображения их истории при изменениях.

В общем, если кому-то нужно или интересно – пользуйтесь, докладывайте обо всех глюках, присылайте ещё интересные скрипты и идеи  :-)

Жилинский Владимир.



Конфитюр: красивый бэкап.

11 комментариев

КонфитюрРезервное копирование файлов — весьма скучная и рутинная процедура, которую мало кто делает регулярно и вовремя. Есть даже распространённая шутка о том, что «все пользователи делятся на тех, кто не делает бэкапы, и тех, кто теперь делает.»

Недооценивать важность резервного копирования нельзя ни в коем случае — зачастую оно важнее даже антивирусной защиты, с которой все уже на своих компьютерах вынужденно смирились.

Бывший фидошник Юрий Заяц в рамках жизненно-юмористического проекта Доширак посоветовал попробовать их новую программу для резервного копирования и восстановления данных «Конфитюр».

  • Первое что бросается в глаза — отличный дизайн как сайта, так и самой программы. Возможно, это сделает эти задачи не такими скучными и рутинными.
  • Установка, регистрация и запуск программы элементарны и сложностей ни у кого вызвать не должны.
  • Интерфейс программы рассчитан явно на не особо продвинутых пользователей — он очень красивый и удобный, но в нём пока мало возможностей для тонкой настройки.

Принцип работы программы прост: вы указываете ей, за какими папками и файлами следить, а она при каждом изменении копирует их на сервера Amazon S3 и восстанавливает оттуда любую версию за любой день.

По интерфейсу у меня возникли следующие мысли:

  • 1. Если пользователь включает слежение за папкой с документами, то необходима кнопка «Сделать дамп», которая сохранила бы на сервер нулевой дамп этой папки.
  • 2. Нужен хотя бы общий фильтр на типы резервируемых файлов.
  • 3. Было бы очень здорово иметь возможность перенастроить программу на копирование не на S3, а на свои сервера или носители.

Конечно, корпоративным решением такая программа не является, но для домашних пользователей вполне может оказаться полезной и удобной, ведь антивирус спасает файлы только от вирусов (и то не всякий), а от самого пользователя — нет.

Скачать Конфитюр.

Конфитюр можно использовать бесплатно, если объём резервируемых файлов не превышает 100Mb, а за небольшую доплату можно купить до 200Gb места.

Жилинский Владимир.



Что такое Fidonet?

19 комментариев

FidonetFidoNet — это довольно интересная своими особенностями сеть. Развиваясь и существуя параллельно с интернетом, она всегда имела с ним крайне мало общего.

Фидо явлется международной компьютерной сетью, существующей с 1984 года. Изначально она была создана американскими программистами, но с конца 90-х большая часть узлов этой сети находится в России.

Основные особенности фидо:

  • Запрет на коммерческое использование. Сеть бесплатная для всех.
  • Неанонимность. Пользователи идентифицируются по ФИО и за нарушение правил могут быть отключены от сети навсегда.
  • Ответственность за подключенных пользователей несёт подключивший их узел, который в случае грубого нарушения пользователями правил может быть отключен вместе с ними.
  • Довольно строгая внутрисетевая политика. Педантичное исполнение правил («Полиси») продолжается до сих пор.

Такие принципы позволили заранее сделать логически невозможным спам, хамство, навязчивую рекламу и прочие “радости” интернета. Троллинг, впрочем, остался возможным.

GoldEd - программа для общения в Fido

Из-за ответственности узла за действия своих пользователей («пойнтов») в сеть попадали в основном друзья, поэтому фидонет часто называли сетью друзей, а обращение на «Вы» в фидо до сих пор считается неуважительным и почти хамским.

Достигнув пика своей популярности к середине 90-х годов, фидонет был сильно подвинут интернетом, ставшим к тому времени более доступным и функциональным. Но сеть не умерла, в ней до сих пор идёт общение.

Уже в 2000-х к правилам фидонета была сделана поправка, разрешающая функционирование узлов, работающих только по принципу «Fido over IP» —  по протоколу Binkp. Это позволило подключать к фидо поверх протоколов интернета. До этого основным способом подключения была прямая модемная связь с узлом.

Я несколько лет назад получил адрес 2:5033/51 и держал узел сети, подключал пользователей. Самое интересное что удалось сделать – это трансляция эхоконференций фидо в поток NNTP, позволившая пользователям обойтись без специального ПО и общаться в фидо через MS Outlook Express.

В Санкт-Петербурге фидошников легче всего найти на фестивале Chaos Constructions или в питерской группе пользователей Linux (кстати, многие фидошники являются блогерами, которых вы читаете).

А среди моих читателей есть ещё фидошники? :-)

На днях координатор нашего региона (R50C) объявил официальным сайтом региона сайт FidoWeb.ru. Там можно, например, оставить заявку на подключение.

Жилинский Владимир.



Доменная зона .TEL

17 комментариев

Домены telСегодня регистратор RU-CENTER (nic.ru) начал принимать предварительные заявки на регистрацию доменов в новой зоне .tel по цене 690 рублей за год, а с 24 марта начнется предоставление этой услуги на общих основаниях.

Доменная зона .tel — довольно необычный и, я бы даже сказал, инновационный шаг в развитии интернета. Дело в том, что в этой зоне нельзя разместить сайт в привычном для всех смысле.

Вместо хранения информации на хостинге в виде веб-страниц, домен .tel позволяет хранить контактную информацию любого типа в неограниченном объеме непосредственно в системе доменных имен (DNS). 

  • Во-первых, это на порядок увеличивает надёжность такого «сайта».
  • Во-вторых, это задаёт новый стандарт для браузеров мобильных устройств и увеличивает удобство работы с сайтом с помощью этих устройств.
  • В третьих, это объединяет адрес сайта и номер телефона, позволяя делать звонок, просто набрав адрес домена в этой зоне (просмотрев страницу, или сразу).
  • В четвёртых, дополнительных расходов на сайт и хостинг не требуется.

По этой ссылке вы найдёте симулятор управления DNS-сайтом в зоне TEL.

Microsoft, Google, CNN, MySpace, FedEx, Sony, Ferrari, Starbucks, Apple, Nestle, Visa и тысячи других компаний свои домены уже заняли. Теперь такую возможность наконец решили дать и нам. Будем пробовать.

Жилинский Владимир.




© 2007-2010 Блог интернет-разработчика, автор — Zhilinsky.ru.
При использовании информации ссылка на источник обязательна.