Импорт из .csv файла 200k записей

gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Импорт из .csv файла 200k записей

Post by gufs »

Есть файл в csv формате

Code: Select all

id,title,description,model,keywords,seconds,url_video,url_thumb,date,site_id,site_name,partner_id,partner_name,site_url,partner_url,width,height,filesize,hotlink,streams,niches
Объём больше 100mb, записей около 200k как проще испортировать его в smartcj? Создав группы из поля niches
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Импорт из .csv файла 200k записей

Post by admin »

Шруппы надо создать предварительно нужные, потом по ним распределит.
Добавлять файл лучше всего частями через импорт.
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Импорт из .csv файла 200k записей

Post by gufs »

Если файл в csv формате то что указывать в качестве разделителя?
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Импорт из .csv файла 200k записей

Post by admin »

csv = текстовый файл с разделителем
разделителем может быть что угодно
в вашем случае это вероятно запятая
но я бы советовал посомтреть глазами просто в файл
кроме того запятая используется для разделения списка тумб или категорий обычно, смотрите нет ли в этом проблем
попробукйте добавить пару строк из файла предварительно, убедитесь что добавляет все и тп
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Импорт из .csv файла 200k записей

Post by gufs »

Code: Select all

id,title,description,model,keywords,seconds,url_video,url_thumb,date,site_id,site_name,partner_id,partner_name,site_url,partner_url,width,height,filesize,hotlink,streams,niches
335465,"Raven haired goddess getting anally slammed on the floor",,,,60,http://gals.sextronix.com/flashvideo/analtryouts.com/analtryouts_004.flv,http://gals.sextronix.com/flashvideo/analtryouts.com/analtryouts_004_tn.jpg,20130322,396,"Anal Tryouts",21,Sextronix,"http://www.analtryouts.com/?t=107423,9,34,0",http://www.sextronix.com/signup.html?wmid=107423,640,480,3593,0,Straight,"Anal,Hardcore"
У меня разделитель запятая и " там где есть данные, если поле пустое то просо запятая. Плюс запитые между кеями и нишами. Как импортировать такой файл или только требовать другой формат?
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Импорт из .csv файла 200k записей

Post by admin »

пробуйте импортировать как есть несколкьо строк и смотрите что получается.
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Импорт из .csv файла 200k записей

Post by gufs »

Столкнулся со следующей проблемой при настройках импорта нельзя добавить больше 19 полей, после добавления 20 все настройки сбрасываются к начальным
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Импорт из .csv файла 200k записей

Post by admin »

Увеличили до 30 в апедфте 50.
Don't forget to run script update
gufs
Posts: 437
Joined: Tue Jan 08, 2013 2:58 pm
Contact:

Re: Импорт из .csv файла 200k записей

Post by gufs »

1)Как сохранить настройки с которыми я провожу импорт?


2)Я указываю одним из полей имя группы(совпадает с теми что создал в админке) и выбираю group. Но всё равно возникает ошибка если не выбрать группу из списка
admin
Site Admin
Posts: 38004
Joined: Wed Sep 10, 2008 11:43 am

Re: Импорт из .csv файла 200k записей

Post by admin »

1)Как сохранить настройки с которыми я провожу импорт?
они сохраняются автоматически

2)Я указываю одним из полей имя группы(совпадает с теми что создал в админке) и выбираю group. Но всё равно возникает ошибка если не выбрать группу из списка
дефолтная группа должна быть выбрана на случай если в патерне не совпадет группа.
Don't forget to run script update
Post Reply