【数据统计】插入的数据等了5S后仍然统计不出来

【标题描述】:
【测试类型：SQL功能/存储功能/接口功能/工具功能/性能/并发/压力长稳/故障注入/安全/资料/编码规范】【测试版本：2.0.0】 问题描述

测试接口pg_stat_get_blocks_fetched

偶现问题

执行如下SQL后，不能显示出 1 个blocks_fetched

```
INSERT INTO sales VALUES(1, 12, '2019-02-01 00:00:00', 'b', 1, 1, 1);
SELECT pg_sleep(1);
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'sales';

```

【操作系统和硬件信息】(查询命令: cat /etc/system-release, uname -a):

[ycy@node156 ~]$ cat /etc/system-release
CentOS Linux release 7.9.2009 (Core)

【测试环境】(单机/1主x备x级联备):
单机

【被测功能】:
select pg_stat_get_blocks_fetched(***) .....

【测试类型】:

【数据库版本】(查询命令: gaussdb -V):
[ycy@node156 ~]$ mlog
gsql ((openGauss 5.0.0 build 176c185b) compiled at 2023-03-17 10:10:20 commit 0 last mr  debug)
Non-SSL connection (SSL connection is recommended when requiring high-security)
Type "help" for help.
openGauss=#

【预置条件】:
新搭建的OG环境

【操作步骤】(请填写详细的操作步骤):
执行如下SQL

```
alter system set autovacuum to off;
drop table if exists sales;
select pg_stat_reset();

CREATE TABLE sales
(prod_id numeric(6),
cust_id numeric,
time_id DATE,
channel_id CHAR(1),
promo_id numeric(6),
quantity_sold numeric(3),
amount_sold numeric(10,2)
);
SELECT pg_sleep(1);
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'sales';
create index test_index1 on sales (channel_id);

SELECT pg_sleep(1);
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'sales';
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'test_index1';

INSERT INTO sales VALUES(1, 12, '2019-02-01 00:00:00', 'b', 1, 1, 1);
SELECT pg_sleep(5);
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'sales';
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'test_index1';

update sales set time_id = '2019-06-02 10:00:00' where channel_id = 'b';
SELECT pg_sleep(5);
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'sales';
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'test_index1';
```

【预期输出】:
SELECT pg_sleep(5);
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'sales';
+----------------------------+
| pg_stat_get_blocks_fetched |
+----------------------------+
| 1                          |
+----------------------------+
select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'test_index1';
+----------------------------+
| pg_stat_get_blocks_fetched |
+----------------------------+
| 2                          |
+----------------------------+

保持流水线测试用例能通过

【实际输出】:
以上的数据不能立即输出，或者输出为0
这样测试用例不一定能通过

偶现问题

【原因分析】:
1. 这个问题的根因

** 问题分析** 
问题现象是INSERT INTO sales VALUES(1, 12, '2019-02-01 00:00:00', 'b', 1, 1, 1);之后，pg_sleep(1)之后，
执行 select pg_stat_get_blocks_fetched(a.oid) from PG_CLASS a where a.relname = 'sales';
不能立刻查询到1条数据

blocks_fetched的数据统计流程
stat上报涉及到如下几个模块，insert线程，statRcv, statFile, statRead
我们的select pg_stat_get_blocks_fetched是statRead，从statFile中读取数据，
statFille的数据是由statRcv写入的，但不是实时写入，只有遇到内存查询时才会写入statFile

**流程如下** 
INSERT INTO之后，会ReadBufferExtended 累加t_blocks_fetched++
然后再pgstat_report_stat中判断当前时间和上次上报时间间隔0.5S后才会上报给statRcv

statRcv收到后，解析数据放到内存，只有遇到内部查询时，才会写入到statFile中。
执行select pg_stat_get_blocks_fetched时，要判断statFile文件的更新时间大于curtime-0.5s，才会读取statFile；否则会等待64次0.01s后，给statRcv
发消息PGSTAT_MTYPE_INQUIRY，触发statRcv更新内存到文件中。

**解决方案** 
1。select之后，多等待一会，等最新数据刷新到statFile。修改select用例多sleep一会
2，在select请求中backend_read_statsfile，先pgstat_send_inquiry(cur_ts);
给statRcv,强制把最新数据刷新到文件，sleep 0.01S,这样就能读取最新的数据。
缺点是，select之后，会产生一个1S的定时器，这个1S定时器每次都会sleep 0.01s，会影响性能。

2. 问题推断过程
3. 还有哪些原因可能造成类似现象
4. 该问题是否有临时规避措施
5. 问题解决方案
6. 预计修复问题时间

【日志信息】(请附上日志文件、截图、coredump信息):

【测试代码】:

openGauss/openGauss-server

内容风险标识

评论 (10)

openGauss/openGauss-server .gitee-modal { width: 500px !important; }

内容风险标识