资讯专栏INFORMATION COLUMN

埋点进化论:从埋点到无埋点

_DangJin / 1530人阅读

摘要:第二层境界框架式埋点框架式埋点也称可视化埋点。框架式埋点很好地解决了代码埋点的埋点代价大和更新代价大两个问题。

鲁迅先生说:世界上本没有埋点,需要数据的人多了,也就有了埋点。

埋点的诞生

在最初的互联网世界中,并没有埋点的概念。大家并不关心流量从哪里来,用户在网站上做了什么事,一切都是野蛮生长。

随着业务的增长,访问网站的人越来越多,用户的需求越来越复杂,运营人员就需要一些关键的数据作为参考。

一般来说,互联网公司到了 A 轮以后,都会有专门的数据团队或者兼职数据人员,对公司的一些业务指标负责。即使为了拿到这些基本的业务指标,一般也要工程团队去配合做一些数据采集工作。正所谓天下武功唯快不破,所有事情都要给产品迭代升级让路,快的都没有时间做数据采集了。

但是,没有数据指标的支撑,又怎么衡量这个功能升级是不是合理的呢?互联网产品并不是功能越多就越好,产品是否经得起用户考验,还是要基于数据说话的,然后学习新知识,用于下一轮的迭代。

于是,埋点诞生了!

第一层境界:代码埋点

最初的埋点是在代码的关键部位植入N行代码,追踪用户的行为,得到想要的数据。挖开产品本身,找到收集点.进行源源不断的传递数据。

简单的说,找节点,布代码,收数据。

随着业务的规模越来越大,运营人员发现,要收集的数据越来越多,需要埋的点也越来越多。

这时候,代码埋点的缺陷就暴露出来:

每次埋点部署比较慢,需要产品和开发反复沟通,如果埋点中出现问题,重新埋点的代价特别大。这两点问题的存在将整个数据收集周期拖长到半月甚至一个月,收集成本很高但效率却不高。如果算上大型测试,简直不能忍。

于是有了第二层境界。

第二层境界: 框架式埋点

框架式埋点也称“可视化埋点”。

既然写代码代价大,每一个埋点都需要写代码,那么,我们可以用框架式交互手段来代替纯手工写代码嘛。

固化相应代码的做为SDK,方便直接调用.这是一个非常大的进步。

框架式埋点很好地解决了代码埋点的埋点代价大和更新代价大两个问题。

因此,对于框架式埋点这种方案,在上传事件时,就只能上传 SDK 自动收集的设备、地域、网络等默认属性,以及一些通过代码设置的全局公共属性了;最后,作为前端埋点的一种方案,框架式埋点也依然没有解决传输时效性和数据可靠性的问题。

由于互联网和移动互联网神一般的发展速度,互联网公司的数据规模得到了极大的扩张,大数据时代的到来意味着数据量的爆炸,也意味着收集数据的难度将大幅增加。

简单的封装SDK还是有很多问题,所以我们在想,有没有办法更简单一点。

第三层境界:无埋点

框架式埋点能够覆盖的功能有限,关键在于不是所有的控件操作都可以通过这种方案进行定制。

框架式埋点先通过界面配置哪些控件的操作数据需要收集;“无埋点”则是先尽可能收集所有的控件的操作数据,然后再通过界面配置哪些数据需要在系统里面进行分析。所谓无埋点技术,并非完全不用埋点,只是不需要工程师不断部署代码. 客户加载了一段定义好的JS或SDK代码后,就可以在产品处半自动进行埋点,智能抓取关键用户行为,快速收集数据。

“无埋点”相比框架式埋点的优点,一方面是解决了数据“回溯”的问题,例如,在某一天,突然想增加某个控件的点击的分析,如果是框架式埋点方案,则只能从这一时刻向后收集数据,而如果是“无埋点”,则从部署 SDK 的时候数据就一直都在收集了;另一方面,“无埋点”方案也可以自动获取很多启发性的信息,例如,“无埋点”可以告诉使用者这个界面上每个控件分别被点击的概率是多大,哪些控件值得做更进一步的分析等等。

当然,与框架式埋点一样,“无埋点”依然有自己的问题,不能灵活地自定义属性,传输时效性和数据可靠性欠佳这几个缺点。甚至由于所有的控件事件都全部搜集,反而会给服务器和网络传输带来更大的负载。再加上神一般的安全性问题。好吧,我想静静。(我的数据全要向平台传输)

从流量另辟蹊径

这三重境界,是一个慢慢演变的过程。

无埋点并不是只能运用在业务功能上,其实也可以运用在业务风险控制领域。

不仅如此,我们在想,是不是可以找到另外一个数据更全,纬度最多,全量还原的数据采集方式呢?

其实,所有的信息交互都有一个根源:流量。

通过流量可以得到所有维度的数据,用户的行为、转化等等。同时,流量解决了数据“回溯”的问题:埋点之前的数据也可以查看。

事实上,岂安科技的业务风险控制平台 WARDEN 就是这样实践的。

反爬虫
来源:www.bigsec.com

文章版权归作者所有,未经允许请勿转载,若此文章存在违规行为,您可以联系管理员删除。

转载请注明本文地址:https://www.ucloud.cn/yun/40671.html

相关文章

  • 数据采集与分析的那些事——从数据埋点到AB测试

    摘要:在分析时,业务人员通过分析平台的圈选功能来选出自己关注的用户行为,并给出事件命名。但带来的问题就是采集所有数据对应用的侵入会比较大,也会增大用户端采集的数据量。规范的数据采集,加上高效的传输建模能力,是企业业务数据资产有效建设的前提。 showImg(https://segmentfault.com/img/bVbhW69?w=798&h=220); 一、为什么企业需要一套完善的用户行...

    Tangpj 评论0 收藏0
  • 前端监控和前端埋点方案设计

    摘要:异常监控包括前端脚本执行报错等。本文针对整个前端监控,设计适用的方案。前端埋点系统的前后端通信加密在上报数据的前后端通信中,需要和端协商加密机制,利用库来实现的加密,已经是一个广泛被采用的加密算法。 在线上项目中,需要统计产品中用户行为和使用情况,从而可以从用户和产品的角度去了解用户群体,从而升级和迭代产品,使其更加贴近用户。用户行为数据可以通过前端数据监控的方式获得,除此之外,前端还...

    April 评论0 收藏0
  • 前端监控和前端埋点方案设计

    摘要:异常监控包括前端脚本执行报错等。本文针对整个前端监控,设计适用的方案。前端埋点系统的前后端通信加密在上报数据的前后端通信中,需要和端协商加密机制,利用库来实现的加密,已经是一个广泛被采用的加密算法。 在线上项目中,需要统计产品中用户行为和使用情况,从而可以从用户和产品的角度去了解用户群体,从而升级和迭代产品,使其更加贴近用户。用户行为数据可以通过前端数据监控的方式获得,除此之外,前端还...

    Hwg 评论0 收藏0
  • 前端监控和前端埋点方案设计

    摘要:异常监控包括前端脚本执行报错等。本文针对整个前端监控,设计适用的方案。前端埋点系统的前后端通信加密在上报数据的前后端通信中,需要和端协商加密机制,利用库来实现的加密,已经是一个广泛被采用的加密算法。 在线上项目中,需要统计产品中用户行为和使用情况,从而可以从用户和产品的角度去了解用户群体,从而升级和迭代产品,使其更加贴近用户。用户行为数据可以通过前端数据监控的方式获得,除此之外,前端还...

    NervosNetwork 评论0 收藏0
  • Vue项目代码埋点

    摘要:主流埋点方案目前主流的埋点方案包括代码埋点可视化埋点无埋点一代码埋点在需要埋点的节点调用接口,携带数据上传。二可视化埋点通过可视化交互的手段,代替代码埋点。也就是用一个系统来实现手动插入代码埋点的过程。 主流埋点方案 目前主流的埋点方案包括 代码埋点 可视化埋点 无埋点 一、代码埋点 ​ 在需要埋点的节点调用接口,携带数据上传。如百度统计等; ​ 缺点 ​ 工作量...

    anRui 评论0 收藏0

发表评论

0条评论

_DangJin

|高级讲师

TA的文章

阅读更多
最新活动
阅读需要支付1元查看
<