Проблемы при обновлении на 51 ап

gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Проблемы при обновлении на 51 ап

Post by gufs »

При попытке обновления части доменов операция длиться около часа по каждому домены
И нагрузка на серверве растёт дико при ssd + 4 sas и 64gb ram
Changing PRIMARY index for rot_gallery_stats


1,356,105 записей в таблице rot_gallery_stats (галер около 200k откуда столько записей не знаю)

Так и должно быть и что с этим можно сделать?
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Проблемы при обновлении на 51 ап

Post by admin »

Зависит от размера базы и нагрузки сервака
В процессе апедйта вы можете видеть processlist и соответственно видеть какие запросы у вас идет медленно
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Проблемы при обновлении на 51 ап

Post by gufs »

Я понимаю, но у меня 30 доменов и если каждый по часу перегружает сервер, то это больше суток лёжки
Может можно как-то задать приоритет или какой-то мусор в базах остался со старых версий
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Проблемы при обновлении на 51 ап

Post by admin »

Можете на время апдейта выключить крон - это разгрузит винты.
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Проблемы при обновлении на 51 ап

Post by gufs »

Хотел ещё спросить чем грозит что админы обновили сразу командой cd /home/httpd/domencom/content/html/scj/admin; env HTTP_HOST=domen.com php update.php 51
без обновления до конечного бильда 50, cd /home/httpd/domencom/content/html/scj/admin; env HTTP_HOST=domen.com php update.php
Потому что с 51 апом очень сильно вырасла нагрузка

2)Нашёл пару доменоы где в rot_gallery_stats около ляма записей, сколько должно быть по отношению к количеству галер и как убрать мусор?
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Проблемы при обновлении на 51 ап

Post by admin »

1. попробовать еще раз ап
2. должно быть равно кол-ву тумб из rot_galleries
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Проблемы при обновлении на 51 ап

Post by gufs »

При обновлении без указания 51, ничего не происходит. При указании 51

Code: Select all

1 2 3 4 5 
Stopping rotation for a while 
Checking indexes rot_gal2tag 
Downloading files 
100% downloaded  Done, everything's ok
 

        Admin area modifications - done 

        New out.php, please, copy from scj/cgi to your location (usually root of domain)

        </b>
        Done. <b>Please, read this.

        Note, scj/cgi/index.php and scj/cgi/out.php are updated, if you use it at the root of your domain - copy please.

        **Update 51**
    Please, Take a look at wiki for comments.
    http://smartcj.com/wiki/doku.php?id=update_51

    Note !!! index.php and out.php are updated. If you use it outside scj/cgi folder - copy it to your location.
    Please, read wiki for comments.
Проходит быстро, нагрузка на сервер попрежнему раз в 5 выше чем до обновления. Если нужно могу предоставить доступ к бд. Там обновили неверно только один мастер и его слейвы. Около 8 доменов


2)В данный момент структура бд на проблемном матере. Не могу выполнить даже банальный экспорт по ctr из 300 лучших видео. До обновления такой нагрузки и проблем с экспортом не было. Как можно мусор убрать из бд
Image
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Проблемы при обновлении на 51 ап

Post by gufs »

1)После повторного обновления мастера нагрузка спала, но export по прежнему не работает. Я так понимаю беда в select запросах к базе. У меня в таблицах слейва лям записей, а галер 300k. Т.е. получается 70% мусора, как его можно почистить?

2)При exporte долгое ожидание и ошибка 500, хотя при такой же сортировке в list thumbs всё в порядке
Спала нагрузка имеенно на процессор, нагрузка дисковой подсистемы не изменилась, да там и не было проблем

3)Один домен при включении сатистики по группам подвис в Splitting, wait ... уже около суток как быть?
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Проблемы при обновлении на 51 ап

Post by admin »

1. если у вас запускается крон нормально то он его по идее почистит сам через какое-то время
2. при экспорте у вас стоит ограничени ена кол-во галер или вы эксплортируете все 300к ?
3. посомтреть в rot.log - что пишет про сплит ?
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Проблемы при обновлении на 51 ап

Post by gufs »

1) Это в 51 апе или раньше такое должно быт? Крон запускается, но вроде не чистит
2)Да стоит лимит 300, даже если задать 50 бесполезно. Всёравно 500 ошибка после ожидания. Т.е. дело не в количестве. Раньше выдавало даже при запросах без лимита
3)В логе по этому поводу не нашёл. Есть только ошибка с базой. Я включил сплит больше суток назад. Пробывал искать Split - ничего не находит, даже spl

Code: Select all

2014-03-03 23:46 Updating Gal CTR 1 (0.27919101715088, 0.17974901199341) 
2014-03-03 23:46 2014-03-03 23:46:56: Uncaught exception 'Exception' with message 'Mysql error:: 1064 (You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near ')' at line 3) (db_link) in query SELECT thumb_id, group_id, current_index, current_shows, current_clicks, current_points, total_shows FROM rot_gallery_stats
			    WHERE current_shows > '500' 
			    AND thumb_id IN (100814,107159,88544,93689,104370,104878,123245,101719,94901,88258,102076,125565,107572,104232,106580,108708,33430,125292,94017,100685,88117,101763,122725,106077,130383,94676,105015,33355,130114,21299,83228,83352,106753,109174,100886,122723,130638,83293,123542,102006,83573,108700,121961,106139,88447,109631,125846,107339,102373,105803,124393,110567,121087,130774,124508,108664,121951,109371,123817,94701,123328,101712,103498,126303,101738,108697,82879,83933,130369,130611,128128,124797,128918,103661,126070,103709,121717,110146,125836,123592,104327,103620,110368,125022,102827,130262,109584,109665,121620, in /home/httpd/домен.net/content/html/scj/includes/db_modules/mysql.php (0.34440279006958, 0.065211772918701) 
2014-03-03 23:47 Rotation Started (0.034960031509399, 0.034960031509399) 
Post Reply