分布式日志收集系统Flume
Flume简介 Flume是一个分布式、可靠且高效的系统，主要用于大规模日志数据的收集、聚合和传输。它是Apache软件基金会的一个开源项目，特别适合将大量日志数据从不同的数据源转移到一个集中式的数据存储系统，比如Hadoop的HDFS（H…
数据采集
如何正确的进行数据埋点
数据应用一般会有采集、加工、存储、计算及可视化这几个环节。其中采集作为源头，在确保全面、准确、及时的前提下，最终加工出来的指标结果才是有价值的。而埋点作为一种重要的采集手段，可以将用户行为信息转化为数据资产，为产品分析、业务决策、广告推荐等…
淘口令的技术实现
类似淘口令的还有支付宝的“吱口令”。口令码分享除了淘宝系之外的应用并不广泛，一是其本身就需要一套完整的口令产生与识别系统，同时还涉及加密等，本身是较为复杂的，开发难度大；二是其限制了受众必须进入相同的APP内才能访问对应内容，等同于用户分享…
阿里巴巴数据采集方案学习
阿里巴巴的日志采集体系方案客户端埋点，插件/封装，服务端部署。 JS是Web端（基于浏览器）日志采集技术方案 UserTrack是APP端（无线客户端）日志采集技术方案，是采集并上报App日志的sdk，适用于native原生页面、webvi…
解构淘宝SPM/SCM流量跟踪体系
SPM 跟踪体系 SPM 是 shopping page mark 的简称，指的是导购页面标记。SPM 是淘宝社区电商业务（xTao）为外部合作伙伴（外站）提供的一套跟踪引导成交效果数据的解决方案。下面是一个跟踪点击到宝贝详情页的引导成交效…
深入分析Google Analytics原理与实现
以下内容是自己十年前整理的，期间翻看了 Google Analytics 的所有帮助文档，查看了商业版本的 Urchin 及代码。最终对 Google Analytics 有了大致了解，并基于实际需求，搭建了一套更加完善的数据跟踪体系，相关…
