Пухнут таблицы

darkover
Posts: 1574
Joined: Sat Apr 13, 2013 8:59 pm

Пухнут таблицы

Post by darkover »

Привет, что-то не могу понять, пухнут таблицы.
Маленький туб, всего 20к видео. База - 1.7 гига. Это ахтунг какой-то.

Code: Select all

Table			Type		Size, Kb	Records		Ops
broker_zone_stats	InnoDB	661 424	6 722 824	Truncate
refs				MyISAM	460 198	2 654 736	Truncate
links				MyISAM	438 286	4 138 401	Truncate
out_ips			MyISAM	52 275	949 668	Truncate
когда в админке жамкаю /admin/?operation=trade&sub=&
Аж задержка какая-то, на открытие страницы в 10 секунд :o

db_queries.log (14.7 Mb) все вот такими запросами загажено
2023-12-12 14:20:32::query_time=10.854099988937::query=DELETE FROM links WHERE link LIKE 'images/%x%x%':: <= //bin/rotation.php (db_query) (time: 10.854099988937) <= //bin/rotation.php (process_clicks) (time: 10.854099988937)

2023-12-12 14:21:15::query_time=13.900063037872::query=select sum(num) as clicks, trader from links where link = 'hidden' group by trader:: <= /admin/files/trade.php (db_query) (time: 13.900063037872) <= //admin/index.php (unknown) (time: 13.900063037872)
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Пухнут таблицы

Post by admin »

сколько стоит

скидывайте дамп или админку, надо ж смотреть что внутри
Don't forget to run script update
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Пухнут таблицы

Post by admin »

брокеры хранит за 30 дней * 200 стран * Х раз в день забор данных * У зон
Don't forget to run script update
darkover
Posts: 1574
Joined: Sat Apr 13, 2013 8:59 pm

Re: Пухнут таблицы

Post by darkover »

admin wrote: Tue Dec 12, 2023 3:32 pm брокеры хранит за 30 дней * 200 стран * Х раз в день забор данных * У зон
С брокерами понял. А остальное ? Админка и шел в пм
darkover
Posts: 1574
Joined: Sat Apr 13, 2013 8:59 pm

Re: Пухнут таблицы

Post by darkover »

Есть новости ?
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Пухнут таблицы

Post by admin »

сорри как то выскочил из туду вопрос
проблема была в том что собиралось хистори по ИП
но не хватало памяти
добавил обработку, таблицы урезало
Don't forget to run script update
darkover
Posts: 1574
Joined: Sat Apr 13, 2013 8:59 pm

Re: Пухнут таблицы

Post by darkover »

admin wrote: Wed Dec 20, 2023 11:35 am сорри как то выскочил из туду вопрос
проблема была в том что собиралось хистори по ИП
но не хватало памяти
добавил обработку, таблицы урезало
Не хватало памяти? Это где-то в логах было ? что там нужно в mysql подкрутить, какие буфера?
По ссылке /admin/?operation=trade&sub=&
подвисоны по 10 сек остались.
В логах смарта - все еще идут ошибки:
2023-12-20 11:53:40::query_time=14.525345087051::query=DELETE FROM links WHERE link LIKE 'images/%x%x%':: <= /home/domains/www/.com//bin/rotation.php (db_query) (time: 14.525345087051) <= /home//www/.com//bin/rotation.php (process_clicks) (time: 14.525345087051)

Таблица links - что это? Что туда пишется, если отключить processed link в настройках смарта, что изменится ( я не понимаю, какую статистику оно все показывает ) - разъясните поподробнее )
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Пухнут таблицы

Post by admin »

это не ошибка, это просто пишет что длинный запрос, после урезания таблицы будет быстрее

links пишет landing pages, как юзер ходил по сайту и если есть &link= в урлах
Don't forget to run script update
darkover
Posts: 1574
Joined: Sat Apr 13, 2013 8:59 pm

Re: Пухнут таблицы

Post by darkover »

admin wrote: Wed Dec 20, 2023 12:46 pm это не ошибка, это просто пишет что длинный запрос, после урезания таблицы будет быстрее

links пишет landing pages, как юзер ходил по сайту и если есть &link= в урлах
Если я делаю через out.php?что-то-там&links=что-то-тут
При отключении links processed я стату по этим линкам не увижу ? Все верно ?
simpway
Posts: 162
Joined: Tue Feb 05, 2019 6:43 pm

Re: Пухнут таблицы

Post by simpway »

Та же проблема. broker_zone_stats стали по 2Гб, статсы хранит за много дней. Из-за этого и бекапы стали по 1Гб каждый. Заняли половину диска. Прямо катастрофа.

Раньше такого не было. Что делать-то? Обновиться?

PS
Там 90% записей с нулями. Может, не писать туда лишнее? Да и старые статсы зачем нужны? 20 миллионов записей
Last edited by simpway on Wed Dec 20, 2023 2:45 pm, edited 7 times in total.
Post Reply