获取每个访客的第一条访问日志(获取网站的UV)

-- 获取每个访客的第一条访问日志,初始化每个访客的第一个访问日志,计算UV

CREATE TABLE access_log_first (

id BIGINT,

ip STRING,

province STRING,

city STRING,

isp STRING,

access_time STRING,

access_hour STRING,

url STRING,

status STRING,

traffic STRING,

referer STRING,

ref_type STRING,

c_info STRING,

client_type STRING,

client_browser STRING

);


INSERT OVERWRITE TABLE access_log_first

SELECT a.id, a.ip, a.province, a.city, a.isp

, a.access_time, a.access_hour,a.url, a.status, a.traffic

, a.referer,a.ref_type, a.c_info, a.client_type, a.client_browser

FROM access_log a

JOIN (

SELECT c.ip,MIN(c.id) AS id

FROM access_log c

GROUP BY c.ip,c.c_info

) b

ON a.ip = b.ip

AND a.id = b.id;

这段 SQL 语句的作用是将满足特定条件的数据插入到名为access_log_first的表中。

具体解释如下:

一、整体结构

sql

INSERT OVERWRITE TABLE access_log_first SELECT... FROM access_log a JOIN... ON...;

这是一个标准的INSERT OVERWRITE语句结构,用于覆盖目标表中的数据。首先指定目标表为access_log_first,然后通过SELECT子句选择要插入的数据来源,这里的数据来源是从access_log表中选取,并通过连接操作筛选出特定的数据行。

二、选择插入的数据列

sql

SELECT a.id, a.ip, a.province, a.city, a.isp, a.access_time, a.access_hour,a.url, a.status, a.traffic, a.referer,a.ref_type, a.c_info, a.client_type, a.client_browser FROM access_log a

从access_log表(别名a)中选择了多个列,包括id、ip、province、city、isp等一系列与访问日志相关的字段。

三、连接子查询筛选数据

子查询部分:

sql

SELECT c.ip,MIN(c.id) AS id FROM access_log c GROUP BY c.ip,c.c_info

这个子查询从access_log表(别名c)中按照ip和c_info分组,然后为每个分组找到最小的id值。

连接条件:

sql

JOIN (... ) b ON a.ip = b.ip AND a.id = b.id

主查询中的access_log表(别名a)与子查询的结果集(别名b)进行连接,连接条件是a.ip = b.ip和a.id = b.id,即根据ip和id进行匹配,确保插入到目标表中的数据是每个ip下最小id对应的那一行数据。

综上所述,这段 SQL 语句的目的是从access_log表中筛选出每个ip下特定的数据行,并将这些数据插入到access_log_first表中,实现了对数据的筛选和整理。

相关推荐
Flynn Liang24 分钟前
流量治理不是限流那么简单:I/O 密集型 Java 服务的 6 层防线
java·微服务·高并发·限流·熔断·系统稳定性·resilience4j
学长毕设26 分钟前
基于SpringBoot智慧养老服务平台设计与实现-附源码
java·spring boot·后端
曹牧1 小时前
Java:“刷新雪崩”
java·开发语言
秋天的怀念_David1 小时前
算法一千零一夜 · 第三十三夜 · 跳表
java·程序人生·算法
Forget the Dream3 小时前
Spring AI 2.0 系列(二):第一个 ChatClient——从注入到一次完整调用
java·人工智能·spring boot·ai·springai
张小姐的猫4 小时前
【基于 WebSocket 的多用户网页五子棋】—— 整合封装服务器模块设计实现2️⃣
服务器·websocket·网络协议
HMS工业网络4 小时前
工业远程访问的五项安全部署原则
运维·服务器·安全
黑十4 小时前
FDE 怎么快速搭一个可演示页面?最小前端方案
java·大数据·前端·数据库·人工智能
神明不懂浪漫4 小时前
【第八章】多线程(一)
java·开发语言·经验分享·笔记
用户54817845909505 小时前
Java 与 Python 在大模型与智能体领域的选型
java·python