Ясно
а вы зайдите в шел и посмотрите там конкетные показатели по процу, винтам и тп
PS LA 1000 - это вы что-то не то написали думаю
Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
Don't forget to run script update
-
tgptraffic_biz
- Posts: 184
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
те в шел вы решили не ходить все равно? )
типа я смотрел на график - должно быть ок
как насчет перестать постить графики и реально сходить в шел, разобраться какая у вас дисковая система, где какие винты, как они нагружены, где базы, что пишет на диск, что читает с него много, что создает нагрузку и тп ?
типа я смотрел на график - должно быть ок
как насчет перестать постить графики и реально сходить в шел, разобраться какая у вас дисковая система, где какие винты, как они нагружены, где базы, что пишет на диск, что читает с него много, что создает нагрузку и тп ?
Don't forget to run script update
-
tgptraffic_biz
- Posts: 184
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
У нас 2 SSD в рейде, все на них. lsof ничего подозрительного не показывает. в mysql processlist процессов не от смарта не висит. Проц Xeon E5-2620, памяти 32Гб, мемкэш, сфинкс. Базы основные в InnoDB. top, iostat и.т.п. естественно тоже смотрели. Скорость записи на диск через dd проверяли, логи читали.
Я могу запостить сюда результаты, если нужно, скажите только какие. Но похоже, что ничего конкретного не видно и может смарт сам по себе не создает нагрузку какую-то особенную. Я подожду переезда на отдельный сервер и там посмотрим.
Я могу запостить сюда результаты, если нужно, скажите только какие. Но похоже, что ничего конкретного не видно и может смарт сам по себе не создает нагрузку какую-то особенную. Я подожду переезда на отдельный сервер и там посмотрим.
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
Эммм так это виртуал??
Don't forget to run script update
-
tgptraffic_biz
- Posts: 184
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
нет это выделенный сервер
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
мы уже заканчиваем 3ю страницу а ответа на конкрентный вопрос
"разобраться какая у вас дисковая система, где какие винты, как они нагружены, где базы, что пишет на диск, что читает с него много, что создает нагрузку и тп ?"
так и нет ...
"разобраться какая у вас дисковая система, где какие винты, как они нагружены, где базы, что пишет на диск, что читает с него много, что создает нагрузку и тп ?"
так и нет ...
Don't forget to run script update
-
tgptraffic_biz
- Posts: 184
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
Итак mysql сейчас вынесен на отдельный сервер ( больше ничего на сервере нет )
кофиг сервера
Dual Intel(R) Xeon(R) CPU E5-2660 0 @ 2.20GHz; 64GB DDR3 1600 MHz; 2x480SSD в рейде
ЧТо еще нужно скинуть ? Конфиг mysql ?
Размер базы 600к галер
ВОт пример запроса
SELECT gs.gallery_id, gs.thumb_id, gi.sponsor_id, gi.content_count, gi.content_type, gs.total_shows, gs.total_clicks, gs.total_ctr, gt.thumb_url, gd.*, gi.content_count, gi.crop_profile_id, gi.activation_date, gi.added_date, gi.duration, gi.url, gi.gallery_total_shows, gi.sponsor_id, gi.source_url, gi.custom_gallery FROM rot_gallery_stats17 as gs JOIN rot_gallery_info as gi on gi.gallery_id = gs.gallery_id JOIN rot_gallery_data1 as gd on gd.gallery_id = gs.gallery_id JOIN rot_thumbs as gt on gt.thumb_id = gs.thumb_id WHERE 1 = 1 AND gi.gallery_status = 'active' AND gi.gallery_type = 0 and gs.tested_thumb = 'no' and gi.sponsor_id NOT IN (4,2) and gs.group_id = 0 AND gs.gallery_id NOT IN ('166398','387134','10836','7025','234699','1711','321859','318185','1472','169146','169146','387134','5127','309545','280035','169149','174598','102264','1875','91040','1711','6983','616','270344','669016','202800','695429','233829','3400','102264','1710','328681','622151','97729','19206','239038','513959','298786','519369','723066','492275','674988','911963','854610','821558','791555','59672','791831','595240','851039','856434','935050','875228','1087544','655692','857037','127369','854783','833427') ORDER BY gs.total_ctr DESC LIMIT 0, 30;
30 rows in set (11.84 sec)
кофиг сервера
Dual Intel(R) Xeon(R) CPU E5-2660 0 @ 2.20GHz; 64GB DDR3 1600 MHz; 2x480SSD в рейде
ЧТо еще нужно скинуть ? Конфиг mysql ?
Размер базы 600к галер
ВОт пример запроса
SELECT gs.gallery_id, gs.thumb_id, gi.sponsor_id, gi.content_count, gi.content_type, gs.total_shows, gs.total_clicks, gs.total_ctr, gt.thumb_url, gd.*, gi.content_count, gi.crop_profile_id, gi.activation_date, gi.added_date, gi.duration, gi.url, gi.gallery_total_shows, gi.sponsor_id, gi.source_url, gi.custom_gallery FROM rot_gallery_stats17 as gs JOIN rot_gallery_info as gi on gi.gallery_id = gs.gallery_id JOIN rot_gallery_data1 as gd on gd.gallery_id = gs.gallery_id JOIN rot_thumbs as gt on gt.thumb_id = gs.thumb_id WHERE 1 = 1 AND gi.gallery_status = 'active' AND gi.gallery_type = 0 and gs.tested_thumb = 'no' and gi.sponsor_id NOT IN (4,2) and gs.group_id = 0 AND gs.gallery_id NOT IN ('166398','387134','10836','7025','234699','1711','321859','318185','1472','169146','169146','387134','5127','309545','280035','169149','174598','102264','1875','91040','1711','6983','616','270344','669016','202800','695429','233829','3400','102264','1710','328681','622151','97729','19206','239038','513959','298786','519369','723066','492275','674988','911963','854610','821558','791555','59672','791831','595240','851039','856434','935050','875228','1087544','655692','857037','127369','854783','833427') ORDER BY gs.total_ctr DESC LIMIT 0, 30;
30 rows in set (11.84 sec)
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
я 4 раза спросил про нагрузку ответа так и нет
Это какая то игра?
ну скидывайте шел, я сам посомтрю и выложу сюда что б было ясно
Это какая то игра?
ну скидывайте шел, я сам посомтрю и выложу сюда что б было ясно
Don't forget to run script update
-
tgptraffic_biz
- Posts: 184
- Joined: Fri Nov 16, 2018 2:59 pm
Re: Конфиг и настройка сервера под большую ( 200+ гиг ) базу смарта
мы сделали скриптик, который лог пишет количества галер в базе, размера таблицы со статой и времени запроса. пока в базе до 150к галер, запрос укладывается в 1 секунду, со 100к галер, приемлемые 0.6 секунды.
Я правильно понимаю, что в таблице со статистикой смарт держит только активные галеры и не держит галеры, находящиеся в pool ? Тогда это решит проблему
Я правильно понимаю, что в таблице со статистикой смарт держит только активные галеры и не держит галеры, находящиеся в pool ? Тогда это решит проблему







