自查部署结果时发现两处正确性问题,都是本页上线时引入的: 1. 「今日提问 / 今日回答」原本随整页聚合一整天缓存,页面却写着「实时」, 实际当天第一次访问后数字就冻住到次日。现拆出 TodayCounts 单独取, 60 秒 TTL、跨日按日期失效;命中整页缓存时返回副本,不原地改缓存指针 (那会被并发读踩成数据竞争)。 2. 日/月/时分组用 to_char/EXTRACT 直接作用在 timestamptz 上,结果跟着数据库 会话时区走,而 PG 官方镜像默认 UTC、Go 侧按容器时区(Asia/Shanghai)切今天。 实测同一条 2026-10-24 01:30+08 的提问,UTC 会话下被算成 10-23 17 点 —— 日报表整体偏 8 小时、热力图时段错位,且与「今日」对不上。 现统一经 analyticsLocalize() 加 AT TIME ZONE INTERVAL 换算,偏移取自 time.Time.Zone()(Go 未设 TZ 时给 "Local",PG 不认该名,故不用 IANA 名)。 过滤条件仍是裸列,索引照用。 另外两处顺手修: - PeakDay 用 >= 比较,并列时会漂到最近的同值日期,与 busiestSlot 的取值规则不一致。 - 聚合改用 context.WithoutCancel + 30s 超时:第一个访客在聚合途中关掉页面时, 排在后面等锁的请求不会各自重跑一遍全表 GROUP BY。 测试:新增 TestTodayNumbersNotFrozen(缓存命中后今日数仍更新、整页聚合当天只算一次) 与 TestTodayCacheExpiresAcrossMidnight;analytics 连真库通过。
183 lines
6.3 KiB
Go
183 lines
6.3 KiB
Go
// Copyright 2022 E99p1ant. All rights reserved.
|
|
// Use of this source code is governed by a MIT-style
|
|
// license that can be found in the LICENSE file.
|
|
|
|
package stats
|
|
|
|
import (
|
|
"context"
|
|
"strings"
|
|
"testing"
|
|
"time"
|
|
|
|
"github.com/stretchr/testify/require"
|
|
|
|
"github.com/tamakyi/TamaBox/internal/db"
|
|
)
|
|
|
|
// TestBuildDailyFillsGaps 没有数据的日期必须占位,否则折线会把两天连成一条直线,
|
|
// 让人以为「那天也有提问」。
|
|
func TestBuildDailyFillsGaps(t *testing.T) {
|
|
now := time.Date(2026, 10, 23, 15, 30, 0, 0, time.Local)
|
|
got := buildDaily([]db.CountPoint{{Key: "2026-10-20", N: 5}}, now, 5)
|
|
|
|
require.Len(t, got, 5)
|
|
require.Equal(t, "2026-10-19", got[0].Date)
|
|
require.Equal(t, "2026-10-23", got[4].Date)
|
|
require.EqualValues(t, 0, got[0].N)
|
|
require.EqualValues(t, 5, got[1].N, "10-20 是窗口里的第 2 天")
|
|
}
|
|
|
|
// TestBuildMonthlyNoMonthOverflow 月底不能溢出:3-31 直接 AddDate(0,-11,0) 会滚到 3 月初,
|
|
// 12 根柱子就变成 11 根。实现里先归到当月 1 号,这里守住这个行为。
|
|
func TestBuildMonthlyNoMonthOverflow(t *testing.T) {
|
|
now := time.Date(2026, 3, 31, 0, 0, 0, 0, time.Local)
|
|
got := buildMonthly(nil, now, 12)
|
|
|
|
require.Len(t, got, 12)
|
|
require.Equal(t, "2025-04", got[0].Month)
|
|
require.Equal(t, "2026-03", got[11].Month)
|
|
require.True(t, got[11].Current, "最后一根柱子是当月")
|
|
require.False(t, got[0].Current)
|
|
}
|
|
|
|
// TestBusiestSlot 同值时取更早的下标,保证同一份数据每次算出来的结论一致。
|
|
func TestBusiestSlot(t *testing.T) {
|
|
var heatmap [7][24]int64
|
|
heatmap[2][9] = 10
|
|
heatmap[5][20] = 10
|
|
|
|
wd, hr := busiestSlot(heatmap)
|
|
require.Equal(t, 2, wd)
|
|
require.Equal(t, 9, hr)
|
|
}
|
|
|
|
// TestOverviewEmptyNoDivideByZero 全零数据不能除零,也不能编出不存在的结论。
|
|
func TestOverviewEmptyNoDivideByZero(t *testing.T) {
|
|
v := buildOverview(&db.SiteAnalytics{}, time.Now())
|
|
|
|
require.Zero(t, v.AnswerRate)
|
|
require.Zero(t, v.FastReplyRate)
|
|
require.Zero(t, v.GrowthMoM)
|
|
require.False(t, v.HasPrevMonth)
|
|
require.Len(t, v.Daily, dailyWindowDays)
|
|
require.Len(t, v.Monthly, monthlyWindow)
|
|
|
|
page := NewPage("zh-CN", v)
|
|
require.Len(t, page.Insights, 1, "空库只说一句「数据还太少」")
|
|
require.Equal(t, "提问数据还太少,暂时看不出什么。", page.Insights[0])
|
|
}
|
|
|
|
// TestOverviewDerived 派生指标:回答率、环比、最忙时段、24 小时内回复占比。
|
|
func TestOverviewDerived(t *testing.T) {
|
|
now := time.Now()
|
|
monthStart := time.Date(now.Year(), now.Month(), 1, 0, 0, 0, 0, now.Location())
|
|
prevMonth := monthStart.AddDate(0, -1, 0).Format("2006-01")
|
|
monthBefore := monthStart.AddDate(0, -2, 0).Format("2006-01")
|
|
|
|
raw := &db.SiteAnalytics{
|
|
TotalQuestions: 200, Answered: 50, Private: 20,
|
|
Anonymous: 120,
|
|
Daily: []db.CountPoint{{Key: now.Format("2006-01-02"), N: 7}},
|
|
// 环比看的是「上月」与「上上月」:本月还没过完,当年 10 月为 0 会把结论带偏。
|
|
Monthly: []db.CountPoint{
|
|
{Key: monthBefore, N: 100},
|
|
{Key: prevMonth, N: 50},
|
|
},
|
|
LengthBins: [6]int64{1, 2, 3, 4, 5, 6},
|
|
ReplyBins: [6]int64{10, 10, 10, 10, 5, 5},
|
|
}
|
|
raw.Heatmap[1][8] = 40
|
|
|
|
v := buildOverview(raw, now)
|
|
|
|
require.InDelta(t, 25.0, v.AnswerRate, 0.001)
|
|
require.InDelta(t, 60.0, v.FastReplyRate, 0.001, "(10+10+10)/50 在 24 小时内")
|
|
require.Equal(t, 180, int(v.Public))
|
|
require.Equal(t, 80, int(v.LoggedIn))
|
|
require.Equal(t, 1, v.BusiestWD)
|
|
require.Equal(t, 8, v.BusiestHr)
|
|
require.EqualValues(t, 40, v.HeatmapMax)
|
|
require.True(t, v.HasPrevMonth)
|
|
require.InDelta(t, -50.0, v.GrowthMoM, 0.001, "9 月 50 相对 8 月 100 是 -50%")
|
|
|
|
page := NewPage("zh-CN", v)
|
|
require.NotEmpty(t, page.Insights)
|
|
require.Len(t, page.WeekdayLabels, 7)
|
|
require.Len(t, page.LengthLabels, 6)
|
|
require.Len(t, page.ReplyLabels, 6)
|
|
|
|
// 句子里必须是完整星期名:热力图列头的 stats.wd.* 是单字("一"/"三"),
|
|
// 复用到句子里会读成「提问最集中在三 8 点前后」。
|
|
require.Contains(t, strings.Join(page.Insights, "\n"), "提问最集中在周一 8 点前后。")
|
|
}
|
|
|
|
// fakeAnalytics 最小实现,用来卡住缓存的边界:
|
|
// 整页聚合一天只该算一次,但「今日」两项必须跟着每次请求走。
|
|
type fakeAnalytics struct {
|
|
todayQ, todayA int64
|
|
siteCalls int
|
|
}
|
|
|
|
func (f *fakeAnalytics) SiteAnalytics(context.Context, time.Time) (*db.SiteAnalytics, error) {
|
|
f.siteCalls++
|
|
return &db.SiteAnalytics{TotalQuestions: 10, Answered: 4}, nil
|
|
}
|
|
|
|
func (f *fakeAnalytics) TodayCounts(context.Context, time.Time) (int64, int64, error) {
|
|
return f.todayQ, f.todayA, nil
|
|
}
|
|
|
|
// TestTodayNumbersNotFrozen 回归:「今日」两项曾被塞进每日缓存,
|
|
// 导致页面顶着「实时」的说明一整天显示常量。
|
|
func TestTodayNumbersNotFrozen(t *testing.T) {
|
|
prev := db.Analytics
|
|
t.Cleanup(func() {
|
|
db.Analytics = prev
|
|
InvalidateOverview()
|
|
})
|
|
|
|
f := &fakeAnalytics{todayQ: 3, todayA: 1}
|
|
db.Analytics = f
|
|
InvalidateOverview()
|
|
|
|
first, err := OverviewData(context.Background())
|
|
require.NoError(t, err)
|
|
require.EqualValues(t, 3, first.TodayQuestions)
|
|
|
|
// 今天又来了几条,且短缓存已过期
|
|
f.todayQ, f.todayA = 8, 2
|
|
todayMu.Lock()
|
|
todayAt = todayAt.Add(-2 * todayTTL)
|
|
todayMu.Unlock()
|
|
|
|
second, err := OverviewData(context.Background())
|
|
require.NoError(t, err)
|
|
require.EqualValues(t, 8, second.TodayQuestions, "今日数不能被每日缓存冻结")
|
|
require.EqualValues(t, 2, second.TodayAnswers)
|
|
require.Equal(t, 1, f.siteCalls, "整页聚合当天只应算一次")
|
|
|
|
// 返回的是副本,不能把已经交出去的 pages 改掉
|
|
require.EqualValues(t, 3, first.TodayQuestions)
|
|
}
|
|
|
|
// TestTodayCacheExpiresAcrossMidnight 跨日必须重算:昨天 23:59 算出的是昨天的数。
|
|
func TestTodayCacheExpiresAcrossMidnight(t *testing.T) {
|
|
prev := db.Analytics
|
|
t.Cleanup(func() {
|
|
db.Analytics = prev
|
|
InvalidateOverview()
|
|
})
|
|
|
|
f := &fakeAnalytics{todayQ: 7, todayA: 5}
|
|
db.Analytics = f
|
|
|
|
justAfterMidnight := time.Date(2026, 10, 24, 0, 0, 30, 0, time.Local)
|
|
// 昨天午夜算出来的缓存(日期不同,即使还在 60 秒内也不该复用)
|
|
setTodayCache(99, 99, justAfterMidnight.Add(-24*time.Hour))
|
|
|
|
q, a := todayNumbers(context.Background(), justAfterMidnight, 0, 0)
|
|
require.EqualValues(t, 7, q, "跨日后必须重算,不能沿用昨天的数字")
|
|
require.EqualValues(t, 5, a)
|
|
}
|