Анализ лог-файлов
Модуль Анализ лог-файлов является полноценным инструментом для получения объективной статистической информации по сайту, который позволяет просмотр статистики посещаемости вашего ресурса во множестве плоскостей. Наряду со стандартными отчетами, вы можете самостоятельно настроить получаемые отчеты по интересующим вас данным. Данный модуль позволяет определить, какие страницы сайта индексируются роботами поисковиков, по каким ключевыми фразам на ваш сайт приходят посетители: с каких поисковых машин, с какой страны/региона/города. Кроме того, вы сможете проводить анализ заходов на ваш ресурс с партнерских сайтов - инструмент позволит вам без труда проанализировать конверсию посетителей и вести статистику эффективности рекламных компаний.
Статистика лог-файлов веб-сервера
Для анализа статистики сайта вам необходим доступ (FTP, SFTP, SSH) к лог-файлам вашего веб-сервера.
Серверные логи фиксируют всю информацию – будь то визит поискового робота, загрузка мультимедийного/Flash/Java/Exe файла, загрузка отдельной картинки с сервера. Анализ лог-файлов веб-сервера позволяет вести учет трафика и получать коды доступов к страницам, что невозможно учесть счетчиком (если только у вас нет на сервере собственной 404-ой страницы).
В программе реализовано:
- Поддержка лог-файлов всех популярных форматов: Apache, W3C, IIS.
- Генерация всех необходимых отчетов полной статистикой по хитам, посетителям и трафику в каждом.
- Распознавание более 250 поисковиков, более 150 спайдеров и более 30 загрузчиков файлов.
- Возможность настройки, при необходимости, собственного формата лог-файлов по отдельным его полям.
- Возможность добавления новых типов файлов по категориям для кастомизации отчетов по страницам, изображениям, загрузкам, и т.д.
- Собственная обновляемая база геолокации стран, регионов и городов для быстрого распознавания местонахождения посетителей сайта.
- Возможность гибкого изменения максимального количества результатов на странице отчета.
- Возможность просмотра настраиваемых отчетов по:
- ключевым словам
- ключевым фразам
- ссылающимся страницам
- самым популярным страницам
- статистике запросов с поисковых машин
- статистике по датам с возможностью выбора интересующего периода
- сохранение всех сгенерированных отчетов и возможность их последующего просмотра
- Статистика по реферерам в отчетах разделена на внутренние и внешние, а также на рефереры по страницам и сайтам - ведение маркетинговой кампании на рекламных площадках в Интернете станет понятным и простым, подсчет эффективности баннерной рекламы не потребует лишних усилий.
- История сгенерированных отчетов с возможностью их просмотра или для сравнения, при добавлении новой информации старая не будет удалена, и вы сможете отслеживать тенденции изменения посещаемости на протяжении всего времени пользования программой.
- Возможность анализа очень больших логов (больше 100 Mb).
- Поддержка архивных лог-файлов.
Статистика лог-файлов собственного счетчика программы
Для анализа лог-файлов, сгенерированных счетчиком программы, вам необходим доступ (FTP, SFTP, SSH) к вашему ресурсу для установки данного счетчика на сайте и дальнейшей обработки лог-файлов.
Статистические данные, полученные из лог-файлов собственного счетчика, являются идеальным дополнением к статистике, полученной из лог-файлов веб-сервера. Следует принять во внимание, что анализ лог-файлов собственного счетчика программы следует проводить отдельно от анализа серверных лог-файлов, то есть в отдельном профиле, во избежание суммирования статистики. С помощью счетчика, устанавливаемого на страницах сайта, помимо информации о заходах пользователей, вы можете отследить также информацию, которая не фиксируется в лог-файлах. Счетчик фиксирует только настоящих, "живых" посетителей, автоматические программы, в том числе различные роботы будут, как правило, игнорироваться. При запросе страницы на компьютере пользователя устанавливается cookie, которое является уникальным идентификатором данного пользователя и помогает отслеживать все его посещения и перемещения по сайту. С помощью JavaScript, который срабатывает при загрузке счетчика вы получите такую информацию, как наличие и версия установленного на браузере пользователя плагина Flash (жизненно необходимая информация для сайтов, полностью или частично состоящих из объектов Flash), поддержка Java, JavaScript, использование фреймов, разрешение и цветность экрана и многое другое.
К преимуществам счетчика можно отнести:
- Размещается счетчик на сервере, поддерживающем PHP, таким образом картинка загружается вместе со страницей, исключая возможность несрабатывания счетчика.
- Сохранение информации о посетителях в собственном файле статистики на сервере.
- Возможность определения и анализа использования (поддержки) Flash и его версии при использовании серверного счетчика.
- Определение поддержки cookies браузерами пользователей.
- Определение поддержки Java, JavaScript браузерами пользователей.
- Каждому пользователю присваивается свой собственный идентификатор, и таким образом определяются уникальные пользователи, даже если они работают через прокси сервер, и даже за одним компьютером (при условии, что каждый из них входит под своим именем пользователя).
- Возможность вывода статистики на графическом счетчике, размещенном на страницах сайта, которую также можно отключить, если вы не желаете, чтобы другие люди получили доступ к данной информации.
- Определение часового пояса пользователя.
- Определение языка браузера.
Кроме того, статистика полностью анонимна, к ней имеете доступ только вы, и она никогда не попадет в чужие руки.
В главном окне модуля "Анализ лог-файлов" присутствуют четыре закладки Общий, Настроить, Отчет, Схема лога, которые позволяют переключатся между четырьмя разделами данного модуля.
Общий
Окно раздела "Общий " модуля Анализ лог-файлов состоит из следующих частей Панель инструментов, Панель навигации и Окно отчетов. На панели инструментов размещены следующие функциональные кнопки:
- Вызывает окно настроек профиля раздел Анализ лога
- Вызывает окно Мастера импорта лог-файлов
- поле выбора начальной даты и кнопка выбора минимальной даты для построения отчетов
- поле выбора конечной даты и кнопка выбора максимальной даты для построения отчетов
В Панели навигации вы можете выбирать тип отчета, который вы желаете просмотреть в Окне отчетов. Вы можете развернуть или свернуть отдельные ветки дерева кликнув по значку '+' напротив названия ветки. Щелчок правой клавишей мыши по Панели навигации вызывает контекстное меню, с помощью которого вы можете развернуть или свернуть все ветки дерева отчетов.
Мастер импорта
- На первом шаге мастера импорта Вам необходимо выбрать метод получения лог-файлов. Если ваши лог-файлы размещены локально или в локальной сети, выберите "Импортировать лог-файлы, размещенные на локальном ПК". Если лог-файлы находятся на FTP-сервере, выберите "Импортировать лог-файлы с удаленного FTP-сервера" и укажите данные по вашему FTP-соединению.
Импорт лог-файлов с удаленного FTP-сервера
Мастер импорта лог-файлов с удаленного FTP-сервера позволяет загрузить и проанализировать лог файлов, сохраненных на отдаленном FTP-сервере. Мастер импорта состоит из четырех шагов и позволяет импортировать лог файлы с удаленного сервера, где расположен ваш сайт. Выберите опцию "Импортировать лог-файлы с удаленного FTP-сервера" и задайте следующую информацию для настройки корректной работы с FTP-сервером:
- На втором шаге Мастера импорта задайте следующие настройки:
- FTP хост - адрес сервера, где хранятся ваши лог файлы
- FTP порт - порт, через который работает ваш сервер (по умолчанию 21)
- Выберите Анонимное соединение, если ваш сервер не требует аутентификации
- Пользователь - введите ваше имя пользователя, которым вы идентифицируетесь на сервере
- Пароль - введите ассоциируемый с вашим именем пользователя пароль
- Путь к папке на FTP-сервере - путь к папке на FTP-сервере, в которой расположены лог-файлы вашего сайта.
После того, как вы укажете всю необходимую информацию, нажмите Вперед > для перехода на следующий шаг Мастера.
- На втором шаге выберите файлы для импорта. Нажмите Добавить, и программа установит соединение с FTP-сервером. В появившемся окне обзора выберите лог файлы, которые вы бы хотели импортировать и нажмите ОК.
С целью экономии трафика, требуемого программой для загрузки файлов статистики, генерируемых программой, вы можете архивировать их перед загрузкой с сервера. Для этого, при выборе файлов для импорта, установите флажок Архивировать файлы перед загрузкой. Данная возможность предусмотрена только для файлов статистики, генерируемых программой и только в папке, где установлен серверный счетчик cnt.php.
После выбора файлы будут добавлены в Список файлов для импорта. Вы можете удалить файлы из списка выбрав их и нажав Удалить. После этого нажмите Вперед > для перехода на следующий шаг мастера.
- На третьем шаге проверьте правильность определения программой полей лог файлов. Если поля определены неправильно, нажмите Настроить и в выпадающем меню, которое появится над каждым распознанным полем присвойте каждому полю соответствующее название. После этого нажмите Вперед >.
- На четвертом шаге программа загружает и анализирует выбранные вами лог файлы. Весь процесс может занять много времени в зависимости от размера файлов и скорости вашего соединения. После того, как распознавание будет завершено, нажмите Завершить.
Импорт лог-файлов размещенных на локальном ПК
Мастер импорта лог-файлов размещенных на локальном ПК позволяет анализ лог файлов, сохраненных на локальной компьютере или на компьютере, размещенном в локальной сети.
- На втором шаге нажмите Добавить и в появившемся окне выберите файлы, которые вы хотите импортировать и нажмите ОК. После выбора файлы будут добавлены в Список файлов для импорта. Вы можете удалить файлы из списка выбрав их и нажав Удалить. После этого нажмите Вперед > для перехода на следующий шаг мастера.
- На третьем шаге проверьте правильность определения программой полей лог файлов. Если поля определены неправильно, нажмите Настроить и в выпадающем меню, которое появится над каждым распознанным полем присвойте каждому полю соответствующее название. После этого нажмите Вперед >.
- На четвертом шаге программа загружает и анализирует выбранные вами лог файлы. Весь процесс может занять много времени в зависимости от размера файлов и скорости вашего соединения. После того, как распознавание будет завершено, нажмите Завершить.
Настроить
Раздел Настроить модуля Анализ лог-файлов позволяет самостоятельно настроить получаемые отчеты по интересующим вас данным для получения статистики визитов вашего сайта в нужном вам разрезе.
На панели инструментов данного раздела размещены следующие кнопки и элементы:
- - Вызывает окно настроек профиля раздел Анализ лога
- - Вызывает окно Мастера импорта лог-файлов
- Кнопка генерации отчета
- Выбор типа настраиваемого отчета- - поле выбора начальной даты и кнопка выбора минимальной даты для построения отчетов
- - поле выбора конечной даты и кнопка выбора максимальной даты для построения отчетов
В поле выбора типа настраиваемых отчетов доступны следующие отчеты:
- Отчет по ключевым словам - в Окне отчетов будут отображены все распознанные ключевые слова, по которым были сделаны переходы на ваш сайт с поисковых машин за анализируемый период. В отчете будет представлена следующая информация: ключевое слово, поисковая машина, на которой пользователь нашел ваш сайт по данному слову, количество переходов по данному слову (хитов), количество уникальных посетителей, зашедших по данному слову, количество найденных по данному слову уникальных страниц на сайте, и объем переданной сервером информации. Каждое ключевое слово в отчете содержит активную ссылку на страницу результатов поиска, по которым ваш сайт был найден. Кликнув по ссылке, Вы сможете перейти на страницу поиска поисковой машины, с которой был осуществлен переход.
- Отчет по ключевым фразам - в Окне отчетов будут отображены все ключевые фразы (т. е. фразы, состоящие из двух и более слов), по которым были сделаны переходы на ваш сайт с поисковых машин за анализируемый период. В данном отчете будет отображена вся та же информация, что и в отчете по ключевым словам.
- Отчет по реферерам - в Окне отчетов будут отображены все ссылающиеся на ваш сайт страницы (исключая страницы результатов поиска на поисковых машинах), с которых были сделаны переходы на ваш сайт за анализируемый период. В отчете будет представлена следующая информация: ссылающаяся страница (реферер), хиты с данной страницы (количество переходов с данной страницы), уникальные посетители, перешедшие с данной страницы, уникальные страницы, запрошенные с данного реферера и объем переданной сервером информации.
- Запрошенные страницы - в Окне отчетов будут отображены все страницы, запрошенные пользователями за анализируемый период. В данном отчете отображается информация по запрошенным страницам сайта, количеству хитов (запросов к данной странице), хостов (уникальных посетителей, запросивших данную страницу), а также объему переданной сервером информации.
- Статистика по поисковым машинам - в Окне отчетов будут отображены все распознанные программой поисковые машины, с которых были осуществлены переходы на ваш сайт за анализируемый период. В данном отчете представлена следующая информация: поисковая машина, с которой были осуществлены заходы, хиты, хосты (уникальные пользователи, пришедшие с данной поисковой машины), уникальные страницы, на которые были осуществлены переходы с поисковых машин, а также объем переданной сервером информации.
- Визиты с поисковых машин - данный отчет предоставляет детальную информацию о том, сколько и какие переходы совершались пользователями поисковых машин на ваш сайт. В верхнем окне отчета отображаются все поисковики, с которых совершались переходы за анализируемый период. Возле названия каждой поисковой машины отображается общее количество переходов на сайт. При выборе одной из поисковых машин детельная информация о ней отобразится в нижнем окне. По каждому переходу отображается следующая информация:
- Поисковая машина, с которой был совершен переход
- Ключевое слово или фраза, по которому посетитель нашел сайт
- Страница сайта, на которую перешел посетитель с поисковой машины
- Статус (код состояния, возвращенный сервером)
- Дата и время перехода
- Хост или IP-адрес посетителя
- Адрес ссылающейся страницы
- Страна посетителя/Регион/Город (Внимание! Данная статистика будет показана, если у Вас установлено Дополнение к модулю Анализ лог-файлов)
При выборе поисковой машины вы можете сгенерировать отчет по ней. Для этого нажмите кнопку .
- Визиты спайдеров - предоставляет детальную информацию о заходах спайдеров и проиндексированных ними страницах. Верхнее окно отчета предоставляет список всех спайдеров, посетивших ваш сайт за анализируемый период, а также количество запросов страниц, сделанных каждым спайдером. При выборе одного из спайдеров в нижнем окне отображается более детальная информация по его визитам:
- Название спайдера
- Страницы, проиндексированные спайдером
- Дата и время индексации
- Статус (код состояния, возвращенный сервером)
- Пользовательский агент спайдера
Для того, чтобы сгенерировать детальный HTML-отчет по спайдеру, нажмите .
- Статистика по навигации - с помощью данного отчета можно просмотреть статистику переходов по той или иной ссылке на любой странице вашего сайта. Для этого введите адрес страницы в адресную строку вверху и нажмите Анализировать. Программа загрузит страницу, указанную в адресной строке и отобразит ее в основном окне. При этом, возле каждой ссылки на странице будет отображена информация о переходах по ссылкам на этой странице. Статистика отображается только для ссылок, ведущих на другие страницы сайта, статистика для внешних ссылок недоступна. Если на анализируемой странице присутствуют несколько ссылок, ведущих на одну и ту же страницу Вашего сайта, то процентное отношение перехода по этой ссылке относительно всех других ссылок на странице будет распределено между этими ссылками, которые ведут на одну и ту же страницу.
Отчет
Раздел Отчет служит для быстрого доступа ко всем сгенерированным отчетам модуля Анализ лог-файлов. Все сформированные программой отчеты сохраняются и отображаются древовидно с сортировкой по дате создания. Любой отчет может быть сохранен, распечатан и отправлен по электронной почте.
В верхней части окна данного раздела модуля помещена панель инструментов для выбора типа формируемого отчета, удобной навигации по уже сгенерированным отчетам, для быстрого доступа к функциям предварительного просмотра, сохранения и печати выбранного отчета.
На панели инструментов размещены следующие функциональные кнопки:
- - Вызывает окно настроек профиля раздел Анализ лога
- Перейти к предыдущему отчету 
- Перейти к следующему отчету 
- Отправить на печать текущий отчет 
- Сохранение в файл текущего отчета 
- Отправить по электронной почте текущий отчет
Схема лога
Раздел Схема лога позволяет просмотреть записи лог файла в интерактивной схематичной форме. Для того, чтобы просмотреть схему лога и пути пользователей по сайту, точки входа и выхода, откройте закладку, и в Панели навигации выберите адрес страницы, которая будет установлена по центру таблицы отчета. Все страницы, ведущие на нее или исходящие из нее, будут построены вокруг нее по такое схеме: слева отображаются все страницы, с которых пользователи переходили на выбранную страницу, а справа - все страницы, на которые пользователи перешли с выбранной страницы. Отдельно отображаются точки входа и точки выхода из сайта. Для того, чтобы установить любую другую страницу по центру и просмотреть ее взаимоотношения с другими страницами, просто кликните по ней. В поле каждой страницы отображается информация следующего плана, например: 48 (14) в, 31 (6) из. В данном случае цифры показывают:
- 48 - количество переходов на данную страницу (хитов)
- 14- количество уникальных посетителей, перешедших на данную страницу
- 31 - количество переходов с данной страницы (хитов)
- 6 - количество уникальных посетителей, перешедших с данной страницы на другую страницу сайта
