如何避免抽样并收集完整数据以进行高级分析

您是否想过如何避免 Google Analytics（分析）标准报告中的抽样和限制？ 如何获得营销报告的完整数据？ 有几种解决方案，例如：

• 切换到付费的 Google Analytics 360 并设置将原始数据导出到 Google BigQuery (GBQ)。
• 使用谷歌分析应用+WEB。 该产品仍处于测试阶段，可让您免费将用户行为数据下载到 Google BigQuery。
• 使用从网站收集数据到 Google BigQuery 的其他服务。

这些解决方案中的每一个都有其特点和局限性。 在本文中，我们详细解释了这些功能并描述了如何使用 OWOX BI。

Google Analytics 360 的主要限制是其高成本。 最近的用户操作会在 15 分钟内出现在 BigQuery 表中。 要设置这样的数据刷新率，您必须额外付费：默认情况下，会话表每天更新 3 次。

在某些情况下，您必须为处理 Google BigQuery 中的请求支付额外费用。 GA 360 的导出表包含许多嵌套级别和字段，在 80% 的情况下可以为空。 表中的嵌套级别越多，查询的开销就越大。 如果您每天或每周有许多报告要更新，则数据处理将导致您的大部分 GBQ 成本。

App+Web 以不同于标准 Google Analytics 的另一种结构收集数据。 如果在 GA 中，一切都基于会话，在 App+Web 中——基于用户和事件。 对于许多习惯了 GA 的分析师和营销人员来说，这可能是个问题——他们必须探索新的数据结构，重新制定网站的指标系统并重建现有报告。 以自己的结构从网站收集数据到 GBQ 的其他服务也可能存在此问题。

由于从 GA 360 和 App+Web 导出到 Google BigQuery 是收集到 Google Analytics 中的数据的一种表示形式，因此它不提供记录的追溯更新。 例如，购买退货通常会记录为与付款会话无关的单独会话。 因此，必须手动重新计算此订单的正确收入。

上述解决方案都不能将会话级别的广告活动成本转移到 Google BigQuery 中。 这意味着您将不知道您为吸引特定用户群花费了多少。 您无法为不同的同类群组、产品组和登录页面计算 ROI 和 DRR。

知道这些限制后，我们 OWOX 决定改善任何类型业务的原始数据处理体验。 我们进行了数百次产品采访，收到了以下请求：

1. 网站数据应以非汇总形式完全收集到 Google BigQuery 中。
2. 用户行为数据必须以近乎实时的方式传送到 Google BigQuery。
3. Google BigQuery 中的会话表应包含广告费用数据。
4. 表结构必须紧凑且尽可能完整，以优化使用数据查询。
5. 数据必须通过历史时期的关键参数进行同步。
6. 如果出现显着差异，必须有可能将 GBQ 数据与 GA 数据进行比较。

我们考虑了所有这些请求，并将我们自己的网站数据流式传输到 Google BigQuery 中。

让我们仔细看看 OWOX BI 如何绕过 Google Analytics 和标准 BigQuery 导出的限制，以及企业如何从中受益。

抽样的想法是建立数据样本的报告，而不是可用数据的全部量。 如果样本太小，您就不能相信基于此类样本的报告。 使用 OWOX BI，您可以收集完整的非抽样数据以创建更准确的报告并做出以数据为依据的决策。

网站上的每个用户操作（页面查看、点击按钮、横幅查看或下订单）都会通过单独的消息（点击）传输给 GA。 您应该考虑在数据收集时对命中数没有限制。

GA 接口对数据处理和报告应用命中限制。 因此，您可以获得数据采样或汇总表（报告中的其他行）。 此外，如果您要使用细分或创建手动报告，则大多以示例形式显示。

该服务会在命中内容离开您的网站时复制它，然后将其发送到您在 Google BigQuery 中的项目。 因此，您可以获得具有无限收集和处理命中的原始未采样数据。

假设您被迫将每个品牌/制造商的促销页面流量、广告合作伙伴数据或着陆页统计信息收集到单独的 Google Analytics（分析）属性中，以收集更有价值的数据。 无论如何，要满足 GA 限制，您必须关闭对您有价值的流量。 当您可以通过 OWOX BI 将这些数据收集到 Google BigQuery 中的单个表中时。 它为您提供战略解决方案的基础以及网站和广告活动有效性的全面愿景。

使用 OWOX BI，您可以快速发送触发电子邮件或检测 Google BigQuery 中收集的网站数据中的异常情况，因为用户行为数据会在 1-5 分钟内出现在您的项目中。

所有每日收集的数据仅在 48 小时后反映在 GA 中（在 GA 360 中 - 4 小时后）。 实时报告显示有限数量的参数和指标，并且不允许您个性化用户操作。

从 GA 360 到 GBQ 的标准导出可以在两种模式下运行：

• 大约每 8 小时免费上传一次数据（您需要为 GA 360 许可证和 GBQ 中的数据存储付费）。
• 每 15 分钟上传一次数据（您必须为处理的每 TB 支付额外费用）。

App+WEB 创建两个表：

• 过渡 - 它包含当天的事件记录。 该表每 15 分钟更新一次，并在生成全天表后删除。
• 包含全天数据的表格——它每天生成一次。

OWOX BI 立即将数据从网站发送到您的 GBQ 项目。 您会在事件发生后的 1-5 分钟内收到完整的非汇总用户行为数据。

通过实时监控网站上的用户活动，您可以通过触发电子邮件活动和个人优惠来刺激销售。 例如，当用户将商品添加到购物车但没有购买任何东西或没有在网站上签署押金时。

它还可以帮助您及时发现和纠正网站上的问题：您可以从网站代码错误和流量或转化减少的触发器中获取通知。

使用 OWOX BI，您可以全面了解您网站上的用户活动，即使他们下的订单包含 15 件以上的商品，或者浏览大量商品列表。

GA 对传输命中的大小有一个限制——8 KB。 例如，如果交易消息超过此限制，则不会进入 GA。

在 OWOX BI 中，传输到 Google BigQuery 的最大匹配大小增加到 16 KB。

当您使用增强型电子商务跟踪用户对目录页面的浏览时，包含产品列表信息的匹配可以超过 8 KB。 如果发生以下情况：

• 一击发送10多件物品；
• 每个项目都有一个附加参数。

在这种情况下，打包命中不会进入 GA。 但是，您可以在 GBQ 的原始数据中找到它，并通过 OWOX BI 在查看的产品列表上构建更准确的报告。

假设您想要收集有关客户和产品本身的更多信息，以及银行产品请求。 使用 OWOX BI，您可以获得更准确的转化​​统计信息。

OWOX BI 计算每个会话的值。 它允许您计算新用户和返回用户的 ROAS。 此外，您还可以执行以下操作：

• 比较看到横幅和没有看到横幅的客户创建的同类群组的盈利能力。
• 了解您在每个产品组上的花费和收入。
• 评估不同地区、登陆页面、移动版本和应用程序的广告效果。

您可以手动将来自不同广告服务的广告费用加载到 GA 中。 但是，您不知道您在吸引特定客户或用户群方面花费了多少，因为 GA 中的成本数据已汇总并与广告活动相关联。

App+WEB 也不允许您将会话/用户级别的广告活动成本转移到 Google BigQuery。

OWOX BI 自动将广告成本上传到 Google Analytics 和 Google BigQuery，根据 UTM 标签在会话中分配它们。 这就是为什么您知道跨 5 个主要 UTM 标签（来源、媒介、广告系列、关键字、内容）的每个会话的成本，并且您可以基于原始数据构建关于 CPC、CPA、CPO 和 CRR 的报告。 它可以提高您的报告准确性，并有助于更有效地分配您的营销预算。

使用 OWOX BI，您可以了解您在每个会话上花费了多少，以及按特定用户、同类群组或登录页面分组成本和收入。

例如，您想了解应该推广哪些商品组以带来更多利润，因为吸引用户的产品不一定是用户购买的相同产品。 您需要将您的数字广告成本分组，以找到最有效的产品类别进行推广。 这可以通过 OWOX BI 通过将成本数据从 GA 传输到 GBQ 并在所有带有 UTM 标签的会话中分配成本来完成。 在这种情况下，成本和收入都将是会话的属性。

使用 OWOX BI，无需执行任何额外操作来评估订单兑换、购买退货或了解新订阅者在过去三个月中在您的网站上所做的事情。 我们的服务允许您追溯更新上传到 Google BigQuery 的数据。

在标准 GA 中，如果从下订单到付款不到 4 小时，您只能追溯更新订单状态。 否则，付款将在 GA 中记录为新会话。 例如，如果您为 3 月 18 日的交易添加了 4 月 3 日的退货，那么在 3 月 18 日的报告中，您仍会看到完整的交易总额。 因此，由于这个错误，跨渠道的价值分布将不正确。

测量协议目前在 App+Web 上不可用。 它可以防止您追溯更新订单状态或下载用户信息。

在 OWOX BI 用 Google BigQuery 中的数据填充的表中，您可以追溯更新以下信息：

• 交易详情——您可以输入退货、部分退货或更改 30 天期限的总和。
• 用户信息——如果用户已登录或登录网站，他的用户 ID 将被倒带并指定用于验证日期前最近 30 天内出现的会话。
• 90 天的费用数据（在 adCost、attributedAdCost 字段中），包括导入 Google Analytics（分析）的所有广告服务的费用。

如果具有用户 ID 的用户今天已申请信用，则此用户 ID 将出现在同一设备的所有先前会话中。 您可以使用这些会话来估计用户的订单路径，以更准确的方式归因于广告活动的收入，并预测其他用户的转化。

使用 OWOX BI，您可以更轻松地考虑退货和衡量广告活动的有效性 — 流式表格始终向您显示当前订单金额。 如果退货是在另一天，您不需要在前一天的表格中搜索它。

如果您计划构建 ROPO（Research Online Purchase Offline）报告，将用户 ID 指定为客户历史会话的最大数量时，计算会更容易。

如上所述，从 Google Analytics 360 到 Google BigQuery 的标准导出表嵌套过多和空字段过多，增加了此数据的处理成本。

OWOX BI 帮助您优化 GBQ 中数据存储和处理的成本。 流表中的空白字段更少，嵌套级别更少，因此表本身及其查询“权重”更小。

OWOX BI 帮助您避免 GA 对数据收集的限制。 如果您计划跟踪所有用户活动——从查看横幅到选择订单中的其他服务——所有其他点击都可以直接发送到 Google BigQuery。

所有关于用户与您的网站交互的信息都通过单独的点击传输到谷歌分析——发送到 GA 服务器的消息。

在点击创建的那一刻，OWOX BI 将用于从 GA 资源发送数据的地址替换为您在 Google BigQuery 中的项目地址。 我们可以将所有 GA 寻址的命中复制到 GBQ 表中，或者阻止（全部或部分）GA 中的所有数据并仅将命中发送到 GBQ 表。

该解决方案具有以下优点：

1. 您可以从 Google Analytics 360 众所周知的结构中的网站获取非抽样数据，其中已经为它编写了数千个 SQL 查询。 它可以节省您的时间并减少花在定期分析师咨询上的时间。
2. 您可以在不降低网站加载速度的情况下设置数据收集。 这是可能的，因为 OWOX BI 复制了 GA 命中，而不是使用单独的 JS 计数器使 GTM 过载。
3. 我们在合同中保证 SLA，并具有监控数据质量和在您的 Google Analytics 和 Google Cloud 项目失败时自动存储信息的必要功能。 您无需付出额外努力即可确保报告的数据质量。

使用 OWOX BI，还可以在没有Google Analytics JS 计数器的情况下收集用户行为数据。 我们可以使用我们的跟踪代码将您网站上的点击数据收集到 Google BigQuery 中。

如果您计划从网站收集敏感数据（客户类型、详细信息、订单参数），则应将其直接发送到第 4 层安全标准规范信息保护的 Google BigQuery。 任何敏感信息都可能以散列或加密形式传输。

假设您的网站上有 1,000 多个横幅。 您计划跟踪每个浏览量和点击量，并衡量它如何影响当前或后续会话中的购买。 如果您跟踪每个横幅的实际浏览量，发送到 GA 的数据量将超过限制 20-25%。

使用 OWOX BI，您可以将所有横幅统计信息直接发送到 Google BigQuery（绕过 GA），并深入了解内部促销活动的有效性。 因此，您不会因为标准 GA 中的数据采样和聚合以及超出 GA 360 中的限制而丢失任何信息。

使用 OWOX BI，您可以将无限数量的用户参数和维度从网站传输到 Google BigQuery。 它允许您按任何功能对用户进行细分，并构建更详细的报告以进行深入分析。

Google Analytics 对从网站收集的自定义指标的数量也有限制：标准版本为 20，GA 360 为 200。App+Web 也有非常严格的限制：500 个事件、25 个事件参数和 25 个用户属性。

如果您的网站网络具有交叉受众，OWOX 用户 ID 可帮助您优化促销和再营销成本。 您还可以评估横幅和媒体广告的查看后效果。

在第三方cookies的帮助下，OWOX BI在不同的网站上放置了相同的标识符（可以是您在不同域的其他网站，也可以是独立广告平台上的媒体广告）。 然后这个 ID 汇集了几个网站的会话，您将能够分析您的交叉受众。

如果您的公司集团由多个品牌及其网站组成，OWOX BI 可以衡量您的受众的交集，并向您展示如何优化再营销和外展活动的预算。

根据我们的经验，在 OWOX BI 中确定用户地理 (Geo) 位置的准确性平均比类似的 GA 报告中高 20%。

GA 使用 Google API 定义地理位置。 这种方法并不总是可靠的，因为它可能不受某些浏览器或用户操作的支持或被阻止（特别感谢 GDPR）。

OWOX BI 使用另一个 Google 服务——云负载平衡来确定地理位置。 该服务专门用于平衡网络负载和链接特定 IP 地址内的地理数据。 因此，流媒体不需要任何用户许可； 我们避免阻塞，从而获得更准确的地理数据。

isTrueDirect 是一个参数，它指定会话是指直接网站访问（直接流量）还是必须归因于其他来源。

GA 中的 isTrueDirect 变量在以下情况下为真：

• 它是网站的直接链接（用户输入网站地址或使用书签）。
• 如果源、渠道、活动参数在两次连续访问中完全匹配。 GA 将第二个会话定义为直接流量，尽管它是由广告发起的。

在 OWOX BI 表中，我们仅在直接访问网站的情况下定义 isTrueDirect = true。 它使您可以准确评估品牌知名度并正确估计特定会话的成本。

带有 isTrueDirect 参数的报告可帮助您衡量品牌知名度广告的有效性。 用户旅程开始时直接条目的增长使评估离线和外展活动对您的营销的贡献成为可能。

与 Google Analytics 不同，您可以在 Google BigQuery 中收集和使用 PII 客户数据，包括电子邮件和电话号码。 不要失去那些没有到达漏斗末端但试图在网站上留下请求的用户。 GBQ 中的电话或电子邮件可用于细分用户并向他们发送反馈。

GA 不允许以未加密的形式传输个人数据。 否则，您的帐户将被冻结。

在 OWOX BI 表中，我们使用 &tel 和 &email 参数（GA 不支持它们）以易于使用的方式将个人数据传输到 BigQuery。

您可以收集有关尝试在网站上申请贷款或其他服务的用户的数据，但由于某种原因，他们无法提交表格。 然后呼叫中心可以联系这些客户并帮助他们通过电话完成程序。

如果您不在在线和离线系统中收集用户 ID，则电话号码和电子邮件可用于链接用户的在线和离线数据。

如果您没有处理原始数据的分析师，请使用我们的智能数据中的报表生成器。 您可以选择现成的模板或创建自定义仪表板，而无需任何 SQL 知识。 智能数据允许您合并流数据和 CRM 数据，以获得可靠的分析和决策基础。

我们会定期添加在 Google Analytics（分析）中找不到的新报告：

• 注册会计师合作伙伴监控。
• ROPO 分析。
• 用户转化路径。
• CRM 中的订单兑换。
• 呼叫跟踪效率。

您可以免费试用 OWOX BI Smart Data 的所有功能。

如果您需要根据您的业务需求和会计系统的特殊报告，OWOX BI 分析师团队可以为您提供帮助。 注册演示以请求会议并了解详细信息。