Я копаюсь в журналах Akamai, загружаю таблицы Excel, а затем вручную присоединяюсь к ним, чтобы выполнять сортировку данных, чтобы найти лучшие видео и источники перехода. Есть ли какие-нибудь инструменты, которые помогут вам в такой обработке? Я ищу что-то вроде Urchin для журналов Apache, но для журналов Akamai.
Вы можете настроить опцию доставки журналов для отправки журналов в «комбинированном» формате. Таким образом, вы можете использовать любой стандартный инструмент по вашему выбору (например, awstats или аналогичный).
Обратите внимание на Sumo Logic, он предлагает интеграцию облака в облако с Akamai, с богатым готовым контентом с использованием облачного монитора. Установка очень проста, и вам не нужно беспокоиться о пакетной загрузке / обработке чего-либо на месте.
Отказ от ответственности - я сотрудник Sumo.
это вопрос может помочь. думаю Splunk и Эпилог кажется, делает то, что вы ищете.
Здесь и в других местах есть ссылки на другие инструменты, которые также могут быть полезны :)
Я просто использую тонну awk, sort и uniq -c когда делаешь подобные вещи.
Perl отлично подходит для повторяемости, но будьте осторожны при работе с большими наборами данных (недавно я играл с дампами BGP с маршрутизатора DFZ). действительно легко отправить даже большую машину в своп, если у вас утечка памяти.
Такие инструменты, как Splunk и т. Д., Кажутся хорошими для специальных вещей, когда простой канал unix может не работать, но не кажется хорошим решением для более постоянных отчетов.
Вы можете просто использовать Awstats или аналогичный, большинству инструментов обработки веб-журналов можно сказать, чтобы они использовали другой формат ввода.