zubkov-andrei / pg_profile

Postgres historic workload reports
Other
212 stars 31 forks source link

Не удаляются снимки после обновления до 4.6 #95

Closed vut12 closed 1 month ago

vut12 commented 1 month ago

Добрый день! После обновления до 4.6 не удаляются новые снимки. Ошибка:

update or delete on table "samples" violates foreign key constraint "fk_last_stat_activity_count_sample_srv13" on table "last_stat_activity_count_srv13"

Снимки сделанные до обновления удаляются.

zubkov-andrei commented 1 month ago

Добрый день! Большое спасибо, буду чинить.

zubkov-andrei commented 1 month ago

А можете предоставить результаты выполнения запросов

select distinct sample_id from last_stat_activity_count_srv13

select last_sample_id from severs where server_id = 13

по коду получается что в отношении last_stat_activitycount... выполняется truncate в каждом снимке. Пока непонятно как получилась такая ошибка

vut12 commented 1 month ago

Забыл написать, что удаляю в ручную. Сейчас еще раз попробовал. Ошибка:

select delete_samples('XXXXXXXXX',1952,1952);
ERROR:  update or delete on table "samples" violates foreign key constraint "fk_last_stat_activity_count_sample_srv13" on table "last_stat_activity_count_srv13"
DETAIL:  Key (server_id, sample_id)=(13, 1952) is still referenced from table "last_stat_activity_count_srv13".
CONTEXT:  SQL statement "DELETE FROM samples dsmp
  USING
    servers srv
    JOIN samples smp USING (server_id)
    LEFT JOIN bl_samples bls USING (server_id, sample_id)
  WHERE
    (dsmp.server_id, dsmp.sample_id) =
    (smp.server_id, smp.sample_id) AND
    smp.sample_id != srv.last_sample_id AND
    srv.server_id = delete_samples.server_id AND
    bls.sample_id IS NULL AND (
      (start_id IS NULL AND end_id IS NULL) OR
      smp.sample_id BETWEEN delete_samples.start_id AND delete_samples.end_id
    )"
PL/pgSQL function delete_samples(integer,integer,integer) line 156 at SQL statement
SQL function "delete_samples" statement 1

Успешно:

select delete_samples('XXXXXXXXX',704,704);
 delete_samples
----------------
              1
(1 row)
Запрошенный вывод last_stat_activity_count_srv13 и servers ```sql select last_sample_id from servers where server_id = 13; last_sample_id ---------------- 2098 (1 row) select distinct sample_id from last_stat_activity_count_srv13 order by 1; sample_id ----------- 1840 1841 1842 1843 1844 1845 1846 1847 1848 1849 1850 1851 1852 1853 1854 1855 1856 1857 1858 1859 1860 1861 1862 1863 1864 1865 1866 1867 1868 1869 1870 1871 1872 1873 1874 1875 1876 1877 1878 1879 1880 1881 1882 1883 1884 1885 1886 1887 1888 1889 1890 1891 1892 1893 1894 1895 1896 1897 1898 1899 1900 1901 1902 1903 1904 1905 1906 1907 1908 1909 1910 1911 1912 1913 1914 1915 1916 1917 1918 1919 1920 1921 1922 1923 1924 1925 1926 1927 1928 1929 1930 1931 1932 1933 1934 1935 1936 1937 1938 1939 1940 1941 1942 1943 1944 1945 1946 1947 1948 1949 1950 1951 1952 1953 1954 1955 1956 1957 1958 1959 1960 1961 1962 1963 1964 1965 1966 1967 1968 1969 1970 1971 1972 1973 1974 1975 1976 1977 1978 1979 1980 1981 1982 1983 1984 1985 1986 1987 1988 1989 1990 1991 1992 1993 1994 1995 1996 1997 1998 1999 2000 2001 2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013 2014 2015 2016 2017 2018 2019 2020 2021 2022 2023 2024 2025 2026 2027 2028 2029 2030 2031 2032 2033 2034 2035 2036 2037 2038 2039 2040 2041 2042 2043 2044 2045 2046 2047 2048 2049 2050 2051 2052 2053 2054 2055 2056 2057 2058 2059 2060 2061 2062 2063 2064 2065 2066 2067 2068 2069 2070 2071 2072 2073 2074 2075 2076 2077 2078 2079 2080 2081 2082 2083 2084 2085 2086 2087 2088 2089 2090 2091 2092 2093 2094 2095 2096 2097 2098 (259 rows) ```
zubkov-andrei commented 1 month ago

Так, из таблицы last_stat_activity_count_srv13 не удаляются данные предыдущих снимков. Скажите, а как вы обновлялись?

zubkov-andrei commented 1 month ago

Воспроизвести не удалось, если не трудно, извлеките из расширения текст функций take_sample() и collect_subsamples().

vut12 commented 1 month ago

Так, из таблицы last_stat_activity_count_srv13 не удаляются данные предыдущих снимков. Скажите, а как вы обновлялись?

Обновлялся с 4.4 до 4.6: распоковал релиз 4.6, добавил из релиза 4.5 файл pg_profile--4.4--4.5.sql, затем выполнил "ALTER EXTENSION pg_profile UPDATE;"

Воспроизвести не удалось, если не трудно, извлеките из расширения текст функций take_sample() и collect_subsamples().

functions.zip

ps. Еще добавлю. Может быть с этим связанно. После обновления возникла эта проблема https://github.com/zubkov-andrei/pg_profile/issues/92 . К тому же, как там и описано, set_server_subsampling не работает. Пришлось вручную вносить строки в server_subsample, чтобы снимки хоть как-то собирались.

select * from server_subsample where server_id=13;
 server_id | subsample_enabled | min_query_dur | min_xact_dur | min_xact_age | min_idle_xact_dur
-----------+-------------------+---------------+--------------+--------------+-------------------
        13 | f                 |               |              |              |
(1 row)
zubkov-andrei commented 1 month ago

Что-то яснее не стало. truncate в вашей функции есть, выполнение снимка должно очищать last_ таблицу...

Вчера поправил #92 и выложил новый релиз 4.6. Если вам не трудно, попробуйте еще раз - теперь всё должно работать

vut12 commented 1 month ago

Truncate не запускается, если в server_subsample.subsample_enabled=false. https://github.com/zubkov-andrei/pg_profile/blob/50637dcf0ee3a529683976fe18bced8fc0123663/sample/subsample.sql#L591-L593

zubkov-andrei commented 1 month ago

Не обратил внимания, поправлю, спасибо!