Vlákno názorů k článku Obsahují webové logy bohatství? od Jan Oplatek - Jeden praktický dotaz: hledám správný nástroj na analýzu...

Jeden praktický dotaz: hledám správný nástroj na analýzu logů, které si stáhnu na svůj lokální počítač ke zpracování. Testoval jsem řadu sw, ale žádný nepodporoval důsledně právě zpětný překlad IP adresy. Rád bych se o návštěvnících webu dozvěděl co nejvíce. Máte někdo nějaká doporučení a zkušenosti ?

Já jsem to řešil vždycky pomocí MS Office takto:

1. upravil jsem si logy tak, aby se daly načíst do Accessu nebo Excelu. Ta úprava spočívá v automatickém nahrazení uvozovek nějakými mezerami. Dá se to dělat ručně nebo nějakým makrem.

2. Takto upravené logy importuji do Excelu (Soubor - otevřít - soubory typu txt), spustí se průvodce. V novější verzi to jde jednodušeji. Pokud je záznamů víc (několik mega), tak importuji do Accessu.

3. Nafiltruji si záznamy podle toho, které mě zajímají. V praxi se vyřazují obrázky a pomocné soubory, vyhazují se položky, které nejsou potřeba. Vyházím záznamy od crawlerů (IP, které stahují robots.txt). Všechno se to dělá dotazem (SQL dotazem).

4. Výsledek načtu do Excelu a zpracuji kontingenční tabulkou do grafu. Kontingenční tabulka a graf jsou právě zlatý hřeb této metody.

Vím, že je to zdlouhavý postup, ale analyzuji si tak všechno, co potřebuji. Navíc jsem se přitom výborně naučil SQL a vychytávky Office.

Zkuste WebTrends Log Analyzer, je k dispozici jako trial verze. Jinak pro analyzu logovych souboru existuje pomerne znacne mnozstvi aplikaci, urcite se najde neco i v open source, co bude zpetny preklad umet. Technicka poznamka, chcete-li provadet reverzni DNS lookup, nelze to provadet off-line, musite byt pripojen k internetu.Vetsina z programu na analyzu logu by mela udrzovat zaznamy o provedenych zpetnych prekladech, cimz se omezi jejich zbytecne opakovani.