一、开源项目简介

ClkLog是一款记录并分析用户行为和画像的开源软件，技术人员可快速完成私有化部署。ClkLog基于神策分析SDK，采用ClickHouse数据库对采集数据进行存储，使用前后端分离的方式来实现。在这里，你可以轻松看到用户访问网页、APP、小程序或业务系统的行为轨迹，同时也可以从时间、地域、渠道、用户访客类型等多维度了解用户的全方位信息。ClkLog在开源社区版本的基础上同时提供拥有更多高级分析功能的商业版本。

二、开源协议

使用AGPL-3.0开源协议

三、界面展示

示意图

四、功能概述

ClkLog是一款免费、可商用的轻量级完全开源的埋点用户分析系统。它基于AGPL协议，旨在帮助具有技术开发能力的业务团队或企业进行二次开发。技术人员通过ClkLog可快速搭建私有化的用户分析系统，记录并分析用户行为，通过构建用户画像结合业务指标来辅助业务的精细化运营。使用成熟的开源软件架构及常用主流组件：前端（vue、vue-element-admin、element-ui 、echarts）、后端（Redis 、Zookeeper、Kafka 、Flink）。

五、技术选型

技术栈选择

• 后端：Redis 、Zookeeper、Kafka 、Flink

• 前端：vue、vue-element-admin、element-ui 、echarts

• 数据：Clickhouse

ClickHouse是一种列式数据库管理系统，专门用于高性能数据分析和数据仓库应用。它是一个开源的数据库系统，最初由俄罗斯搜索引擎公司Yandex开发，用于满足大规模数据分析和报告的需求。

特点

• 开源的列式存储数据库管理系统，支持线性扩展，简单方便，高可靠性

• 容错跑分快：可处理的数据级别达到10亿级别

• 功能多：支持数据统计分析各种场景，支持类SQL查询，异地复制部署

Kafka 是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素。这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。对于像Hadoop一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka的目的是通过Hadoop的并行加载机制来统一线上和离线的消息处理，也是为了通过集群来提供实时的消息。

Apache Flink 是由Apache软件基金会开发的开源流处理框架，其核心是用Java和Scala编写的分布式数据流引擎。Flink以数据并行和流水线方式执行任意流数据程序，Flink的流水线运行时系统可以执行批处理和流处理程序。此外，Flink的运行时本身也支持迭代算法的执行。