Cum să evitați eșantionarea și să colectați date complete pentru analize avansate

V-ați întrebat vreodată cum să evitați eșantionarea și limitele în rapoartele standard Google Analytics? Cum puteți obține date complete pentru raportarea de marketing? Există mai multe soluții, cum ar fi:

• Treceți la Google Analytics 360 cu plată și configurați exportul de date brute în Google BigQuery (GBQ).
• Utilizați aplicația Google Analytics+WEB. Produsul este încă în versiune beta și vă permite să descărcați gratuit datele despre comportamentul utilizatorilor în Google BigQuery.
• Utilizați alte servicii care colectează date de pe site la Google BigQuery.

Fiecare dintre aceste soluții are specialitățile și limitările sale. În articol, explicăm aceste caracteristici în detaliu și descriem cum să vă deplasați cu OWOX BI.

Principala limitare a Google Analytics 360 este costul ridicat. Cele mai recente acțiuni ale utilizatorului apar în tabelele BigQuery în mai mult de 15 minute. Pentru a seta o astfel de rată de reîmprospătare a datelor, va trebui să plătiți suplimentar: implicit, tabelul de sesiuni este actualizat de trei ori pe zi.

În unele situații, trebuie să plătiți suplimentar pentru procesarea solicitărilor în Google BigQuery. Tabelul de export din GA 360 conține multe niveluri de imbricare și câmpuri care pot fi goale în 80% din cazuri. Cu cât sunt mai multe niveluri de imbricare în tabel, cu atât interogările sunt mai scumpe. Dacă aveți multe rapoarte de actualizat zilnic sau săptămânal, procesarea datelor va cauza majoritatea costurilor GBQ.

App+Web colectează date într-o altă structură decât Google Analytics standard. Dacă în GA, totul se bazează pe sesiuni, în App+Web — pe utilizatori și evenimente. Ar putea fi o problemă pentru mulți analiști și agenți de marketing care s-au obișnuit cu GA - trebuie să exploreze o nouă structură de date, să refacă sistemul de metrici pentru site-ul web și să reconstruiască rapoartele existente. Alte servicii care colectează date de pe site la GBQ în propria lor structură pot avea, de asemenea, această problemă.

Deoarece exportul din GA 360 și App+Web în Google BigQuery este o reprezentare a datelor colectate în Google Analytics, nu oferă o actualizare retrospectivă a înregistrărilor. De exemplu, o retur de achiziție va fi de obicei înregistrată ca o sesiune separată care nu va fi asociată cu o sesiune de plată. Prin urmare, venitul corect din această comandă trebuie recalculat manual.

Niciuna dintre soluțiile menționate nu poate transfera costurile campaniei dvs. publicitare la nivel de sesiune în Google BigQuery. Înseamnă că nu veți ști cât ați cheltuit pentru a atrage un anumit segment de utilizatori. Nu puteți calcula rentabilitatea investiției și DRR pentru diferite cohorte, grupuri de produse și pagini de destinație.

Cunoscând aceste limitări, noi cei de la OWOX am decis să îmbunătățim experiența de prelucrare a datelor brute pentru orice tip de afacere. Am efectuat sute de interviuri pentru produse și am primit următoarele solicitări:

1. Datele site-ului ar trebui să fie colectate complet în Google BigQuery într-o formă neagregată.
2. Datele despre comportamentul utilizatorilor trebuie să fie livrate către Google BigQuery în mod aproape în timp real.
3. Tabelele de sesiuni din Google BigQuery ar trebui să conțină date despre costurile de publicitate.
4. Structura tabelului trebuie să fie compactă și cât mai completă posibil pentru a utiliza interogările de date în mod optim.
5. Datele trebuie sincronizate prin parametri cheie în perioada istorică.
6. Trebuie să existe posibilitatea de a compara datele GBQ cu datele GA dacă apar discrepanțe semnificative.

Am luat în considerare toate aceste solicitări și am dezvoltat propriul nostru site web în fluxul de date în Google BigQuery.

Să aruncăm o privire mai atentă asupra modului în care OWOX BI ocolește restricțiile Google Analytics și exportul standard BigQuery și modul în care afacerile pot beneficia de pe urma acestora.

Ideea eșantionării este de a construi rapoarte pe eșantioane de date, nu pe întregul volum de date disponibile. Dacă eșantionul este prea mic, nu puteți avea încredere într-un raport construit pe un astfel de eșantion. Cu OWOX BI, puteți colecta date complete neeșantionate pentru a crea rapoarte mai precise și pentru a lua decizii bazate pe date.

Fiecare acțiune a utilizatorului pe site-ul web (vizualizarea paginii, clic pe buton, vizualizare banner sau plasarea comenzii) este transmisă către GA printr-un mesaj separat - hit. Trebuie să luați în considerare că nu există restricții privind numărul de accesări în momentul colectării datelor.

Interfața GA aplică o limită de accesări procesării și raportării datelor. Astfel, obțineți fie eșantionare de date, fie tabele agregate ( altul rând din raport). În plus, dacă doriți să utilizați un segment sau să creați un raport manual, acesta este afișat în mare parte într-o formă eșantionată.

Serviciul copiază conținutul accesat atunci când pleacă de pe site-ul dvs. web și îl trimite apoi către proiectul dvs. în Google BigQuery. Astfel, obțineți date brute neeșantionate cu accesări nelimitate colectate și procesate.

Să presupunem că sunteți forțat să colectați traficul din paginile promoționale, datele partenerilor de publicitate sau statisticile paginii de destinație pentru fiecare marcă/producător în proprietăți separate Google Analytics pentru a colecta date mai valoroase. Oricum, pentru a îndeplini limitările GA, trebuie să opriți traficul care este valoros pentru dvs. Când puteți colecta aceste date într-un singur tabel în Google BigQuery prin intermediul OWOX BI. Vă oferă o bază pentru soluții strategice și o viziune cuprinzătoare a site-ului web și a eficacității campaniilor de publicitate.

Cu OWOX BI, puteți trimite rapid un e-mail declanșat sau puteți detecta o anomalie în datele site-ului colectate în Google BigQuery, deoarece datele comportamentale ale utilizatorilor apar în proiectul dvs. în decurs de 1-5 minute.

Toate datele colectate zilnic se reflectă în GA numai după 48 de ore (în GA 360 — după 4 ore). Rapoartele în timp real afișează un număr limitat de parametri și valori și nu vă permit să personalizați acțiunile utilizatorului.

Exportul standard de la GA 360 la GBQ poate funcționa în două moduri:

• Încărcați date o dată la 8 ore aproximativ gratuit (plătiți pentru o licență GA 360 și stocarea datelor în GBQ).
• Încărcați date la fiecare 15 minute (trebuie să plătiți suplimentar pentru fiecare terabyte procesat).

App+WEB creează două tabele:

• Tranzițional — conține înregistrări de evenimente pentru ziua curentă. Tabelul este actualizat la fiecare 15 minute și șters după generarea tabelului de zi întreagă.
• Tabel cu date pentru întreaga zi — este generat o dată pe zi.

OWOX BI trimite datele imediat de pe site la proiectul dumneavoastră GBQ. Primiți date complete neagregate despre comportamentul utilizatorului în decurs de 1-5 minute de la producerea evenimentului.

Prin monitorizarea activității utilizatorilor pe site în timp real, puteți stimula vânzările cu campanii de declanșare prin e-mail și oferte personale. De exemplu, atunci când un utilizator a adăugat un articol într-un coș de cumpărături, dar nu a cumpărat nimic sau nu a semnat depozitul pe site.

De asemenea, vă poate ajuta să detectați și să corectați problemele de pe site la timp: puteți primi notificări de la declanșatoare privind erorile de cod de site și scăderea traficului sau a conversiilor.

Cu OWOX BI, obțineți o imagine amplă a activității utilizatorilor pe site-ul dvs., chiar dacă aceștia fac comenzi care constau din peste 15 articole sau răsfoiesc liste mari de articole.

Există o limită în GA pentru dimensiunea accesării transferate - 8 KB. De exemplu, dacă un mesaj de tranzacție depășește această limită, nu intră în GA.

În OWOX BI, dimensiunea maximă a accesării transferate către Google BigQuery este crescută la 16 KB.

O accesare poate depăși 8 KB care conține informații despre o listă de produse, atunci când urmăriți navigarea utilizatorului în paginile de catalog cu Comerț electronic îmbunătățit. Se întâmplă dacă:

• Mai mult de 10 articole sunt trimise într-o singură lovitură;
• Fiecare articol are un parametru suplimentar.

În acest caz, hit-ul împachetat nu va intra în GA. Cu toate acestea, îl puteți găsi în datele brute din GBQ și puteți construi un raport mai precis asupra listelor de produse vizualizate datorită OWOX BI.

Să presupunem că doriți să colectați mai multe informații despre client și despre produs în sine, împreună cu solicitările de produse bancare. Cu OWOX BI, aveți statistici de conversie mai precise.

OWOX BI calculează valoarea fiecărei sesiuni. Vă permite să calculați rentabilitatea cheltuielilor publicitare pentru utilizatorii noi și reveniți. De asemenea, puteți face următoarele acțiuni:

• Comparați profitabilitatea cohortelor create de acei clienți care au văzut bannerul și cei care nu l-au văzut.
• Aflați cât cheltuiți și cât câștigați pentru fiecare dintre grupurile de produse.
• Evaluați eficiența publicității pentru diferite regiuni, pagini de destinație, versiuni mobile și aplicații.

Puteți încărca manual costurile publicitare de la diferite servicii de publicitate în GA. Cu toate acestea, nu știți cât de mult ați cheltuit pentru a atrage un anumit client sau un anumit segment de utilizatori, deoarece datele de cost din GA sunt agregate și legate de campaniile publicitare.

Aplicația+WEB, de asemenea, nu vă permite să transferați costurile campaniei publicitare la nivel de sesiune/utilizator în Google BigQuery.

OWOX BI încarcă automat costurile publicitare în Google Analytics și Google BigQuery, distribuindu-le pe sesiuni conform etichetelor UTM. Acesta este motivul pentru care cunoașteți costul fiecărei sesiuni în 5 etichete UTM principale (sursă, mediu, campanie, cuvânt cheie, conținut) și puteți crea rapoarte privind CPC, CPA, CPO și CRR pe date brute. Îți îmbunătățește acuratețea raportului și ajută la alocarea bugetului de marketing mai eficient.

Cu OWOX BI, puteți afla cât ați cheltuit pentru fiecare sesiune și puteți grupa costurile și veniturile în funcție de utilizator, grup sau pagină de destinație.

De exemplu, doriți să înțelegeți ce grupuri de bunuri ar trebui promovate pentru a aduce mai mult profit, deoarece un produs care atrage un utilizator nu este obligatoriu același produs pe care îl cumpără utilizatorul. Trebuie să grupați costurile anunțurilor digitale în categorii pentru a găsi cele mai eficiente categorii de produse de promovat. Acest lucru se poate face cu OWOX BI prin transferarea datelor de cost de la GA la GBQ și distribuirea costurilor în toate sesiunile cu etichete UTM. În acest caz, atât costurile, cât și veniturile vor fi proprietăți ale sesiunii.

Cu OWOX BI, nu este nevoie de nicio acțiune suplimentară pentru a evalua răscumpărarea comenzilor, returnările achizițiilor sau pentru a afla ce a făcut un nou abonat pe site-ul dvs. în ultimele trei luni. Serviciul nostru vă permite să actualizați retroactiv datele încărcate în Google BigQuery.

În GA standard, puteți actualiza retroactiv starea comenzii numai dacă au trecut mai puțin de 4 ore de la efectuarea comenzii până la plată. În caz contrar, plata este înregistrată în GA ca o nouă sesiune. De exemplu, dacă adăugați o returnare pe 3 aprilie pentru tranzacția efectuată pe 18 martie, în raportul pentru 18 martie, veți vedea în continuare suma totală a tranzacției. În consecință, distribuția valorii pe canale nu va fi corectă din cauza acestei greșeli.

Protocolul de măsurare nu este disponibil momentan pe App+Web. Vă împiedică să actualizați retroactiv starea comenzii sau să descărcați informații despre utilizator.

În tabelele pe care OWOX BI le completează cu date în Google BigQuery, puteți actualiza retroactiv următoarele informații:

• Detalii tranzacție — puteți introduce o returnare, o returnare parțială sau puteți modifica suma pentru o perioadă de 30 de zile.
• Informații despre utilizator — dacă un utilizator s-a conectat sau s-a autentificat la un site web, ID-ul de utilizator va fi reîntors și numit pentru sesiunile care au apărut în ultimele 30 de zile înainte de data autentificării.
• Date de cost pentru 90 de zile (în câmpurile adCost, attributedAdCost), inclusiv costurile de la toate serviciile de publicitate importate în Google Analytics.

Dacă utilizatorul cu User ID a solicitat credit astăzi, acest User ID apare în toate sesiunile anterioare de pe același dispozitiv. Puteți utiliza aceste sesiuni pentru a estima calea unui utilizator către comanda dvs., pentru a atribui veniturile din campaniile publicitare într-un mod mai precis și pentru a prezice conversia altor utilizatori.

Cu OWOX BI, vă este mai ușor să luați în considerare profiturile și să măsurați eficacitatea campaniilor publicitare —- tabelele de streaming vă arată întotdeauna suma curentă a comenzii. Dacă returnarea a fost în altă zi, nu trebuie să o căutați în tabelele zilei trecute.

Dacă intenționați să construiți un raport ROPO (Research Online Purchase Offline), este mai ușor să faceți calcule atunci când User ID este desemnat pentru numărul maxim de sesiuni istorice ale clientului.

După cum am menționat mai sus, tabelul standard de export din Google Analytics 360 în Google BigQuery are prea multe câmpuri de imbricare și goale, ceea ce crește costul de procesare al acestor date.

OWOX BI vă ajută să optimizați costurile de stocare și procesare a datelor în GBQ. Există mai puține câmpuri goale în tabelele de streaming, mai puține niveluri de imbricare, astfel încât tabelele în sine și interogările lor „cântăresc” mai puțin.

OWOX BI vă ajută să evitați limitările GA privind colectarea datelor. Dacă intenționați să urmăriți toate activitățile utilizatorilor - de la vizualizarea bannerului până la selectarea serviciilor suplimentare în ordine - toate accesările suplimentare pot fi trimise direct la Google BigQuery.

Toate informațiile despre interacțiunea utilizatorului cu site-ul dvs. sunt transmise către Google Analytics prin accesări separate - mesaje către serverul GA.

În momentul creării accesului, OWOX BI înlocuiește adresa pentru trimiterea datelor din resursa GA cu adresa proiectului dvs. în Google BigQuery. Putem duplica toate accesările adresate GA în tabelele GBQ sau blocăm (total sau parțial) toate datele din GA și trimitem accesări numai către tabelele GBQ.

Această soluție are următoarele avantaje:

1. Obțineți date neeșantionate de pe site în structura binecunoscută a Google Analytics 360, cu mii de interogări SQL care au fost deja scrise pentru acesta. Vă economisește timp și reduce timpul petrecut pentru consultanța obișnuită a analiștilor.
2. Puteți configura colectarea datelor fără a reduce viteza de încărcare a site-ului dvs. Este posibil pentru că OWOX BI duplică accesările GA, mai degrabă decât supraîncărcarea dvs. GTM cu un contor JS separat.
3. Garantăm SLA în contract și avem funcționalitatea necesară pentru a monitoriza calitatea datelor și pentru a stoca automat informații în cazul în care proiectul dvs. Google Analytics și Google Cloud eșuează. Puteți fi sigur de calitatea datelor pentru rapoartele dvs. fără eforturi suplimentare.

Cu OWOX BI, este, de asemenea, posibil să colectați date despre comportamentul utilizatorilor fără contorul Google Analytics JS. Putem colecta date despre accesări de pe site-ul dvs. în Google BigQuery cu codul nostru de urmărire.

Dacă intenționați să colectați date sensibile de pe site (tipul de client, detalii, parametrii comenzii), ar trebui să le trimiteți direct către Google BigQuery, unde standardul de securitate Tier 4 reglementează protecția informațiilor. Orice informație sensibilă poate fi transmisă sub formă hashing sau criptată.

Să presupunem că există peste 1.000 de bannere pe site-ul tău. Intenționați să urmăriți vizionările și clicurile pentru fiecare dintre ele și să măsurați modul în care a afectat achiziția în sesiunile curente sau următoare. Dacă urmăriți vizualizările reale ale fiecărui banner, cantitatea de date care este trimisă către GA va depăși limita cu 20-25%.

Cu OWOX BI, puteți trimite toate statisticile bannerului direct către Google BigQuery (ocolind GA) și puteți obține informații despre eficacitatea campaniilor promoționale interne. Astfel, nu pierdeți nicio informație din cauza eșantionării și agregării datelor în GA standard și a depășirii limitelor din GA 360.

Cu OWOX BI, puteți transfera un număr nelimitat de parametri și dimensiuni de utilizator de pe site la Google BigQuery. Vă permite să segmentați utilizatorii după orice caracteristică și să creați rapoarte mai detaliate pentru o analiză aprofundată.

Google Analytics are, de asemenea, restricții privind numărul de valori personalizate colectate de pe site: 20 pentru versiunea standard și 200 pentru GA 360. App+Web are și limite destul de strânse: 500 de evenimente, 25 de parametri de evenimente și 25 de proprietăți ale utilizatorului.

OWOX User ID vă ajută să vă optimizați costurile de promovare și remarketing dacă aveți o rețea de site-uri web cu audiențe care se intersectează. De asemenea, puteți evalua efectul Post-View al reclamelor banner și media.

Cu ajutorul cookie-urilor terțelor părți, OWOX BI pune același identificator pe diferite site-uri web (poate fi celălalt site web al tău pe un alt domeniu sau publicitate media pe o platformă de publicitate independentă). Apoi, acest ID reunește sesiuni ale mai multor site-uri web și veți putea analiza publicurile care se intersectează.

Dacă grupul dvs. de companii este format din mai multe mărci și site-urile lor web, OWOX BI poate măsura intersecția publicului dvs. și vă poate arăta cum să optimizați bugetul pentru campaniile de remarketing și de sensibilizare.

Din experiența noastră, acuratețea determinării poziției geografice (Geo) a unui utilizator în OWOX BI este, în medie, cu 20% mai mare decât în ​​rapoartele GA similare.

GA definește o localizare geografică folosind API-ul Google. Această metodă nu este întotdeauna de încredere, deoarece este posibil să nu fie acceptată sau blocată în unele browsere sau prin acțiunile utilizatorului (în special datorită GDPR).

OWOX BI determină localizarea geografică folosind un alt serviciu Google — Cloud Load Balancing. Acest serviciu este specializat în echilibrarea încărcării rețelei și conectarea datelor geografice într-o anumită adresă IP. În consecință, transmiterea în flux nu necesită nicio permisiune de utilizator; evităm blocarea și astfel obținem geodate mai precise.

isTrueDirect este un parametru care specifică dacă sesiunea se referă la acces direct la site (trafic direct) sau trebuie atribuită unei alte surse.

Variabila isTrueDirect din GA este adevărată atunci când:

• Era un link direct către site-ul web (utilizatorul a tastat adresa site-ului web sau a folosit marcajul).
• Dacă parametrii sursă, canal, campanie sunt pe deplin potriviți pentru două vizite consecutive. GA definește a doua sesiune drept trafic direct, deși este inițiat de publicitate.

În tabelele OWOX BI, definim isTrueDirect = true numai în cazul accesului direct la site. Vă permite să evaluați cu acuratețe gradul de cunoaștere a mărcii și să estimați corect costul unei anumite sesiuni.

Rapoartele cu parametrul isTrueDirect vă ajută să măsurați eficiența reclamelor de cunoaștere a mărcii. Creșterea numărului de intrări directe la începutul călătoriei utilizatorului face posibilă evaluarea contribuției campaniilor offline și de sensibilizare pentru marketingul dumneavoastră.

Spre deosebire de Google Analytics, puteți colecta și utiliza datele PII ale clienților, inclusiv e-mailul și numerele de telefon în Google BigQuery. Nu pierdeți utilizatorii care nu au ajuns la sfârșitul canalului, dar au încercat să lase o solicitare pe site. Telefonul sau e-mailul în GBQ pot fi folosite pentru a segmenta utilizatorii și a le trimite feedback.

GA nu permite transferul de date personale în formă necriptată. În caz contrar, contul tău va fi blocat.

În tabelele OWOX BI, folosim parametrii &tel și &email (nu sunt acceptați în GA) pentru a transmite datele personale către BigQuery într-un mod ușor de utilizat.

Puteți colecta date despre utilizatorii care au încercat să solicite un împrumut sau alt serviciu pe site, dar din anumite motive, aceștia nu au putut să trimită un formular. Apoi, call center-ul poate contacta acești clienți și îi poate ajuta să finalizeze procedura prin telefon.

Dacă nu colectați ID de utilizator în sistemele dvs. online și offline, atunci numărul de telefon și e-mailul pot fi folosite pentru a lega datele online și offline ale utilizatorilor dvs.

Dacă nu aveți un analist care să lucreze cu date brute, utilizați Generatorul de rapoarte din Datele noastre inteligente. Puteți alege șabloane gata sau puteți crea tablouri de bord personalizate fără cunoștințe SQL. Smart Data vă permite să îmbinați datele de streaming și CRM pentru a obține o bază de încredere pentru analiză și luarea deciziilor.

Adăugăm în mod regulat rapoarte noi care nu pot fi găsite în Google Analytics:

• Monitorizarea partenerilor CPA.
• Analiza ROPO.
• Căile de conversie ale utilizatorilor.
• Rambursarea comenzilor în CRM.
• Eficiența urmăririi apelurilor.

Puteți încerca gratuit toate funcțiile OWOX BI Smart Data.

Daca ai nevoie de rapoarte speciale in functie de nevoile afacerii tale si de sistemul contabil, te poate ajuta o echipa de analisti OWOX BI. Înscrieți-vă pentru o demonstrație pentru a solicita o întâlnire și pentru a afla detaliile.