Jump to content


Photo
- - - - -

Импорт через csv

импорт csv 220v

  • This topic is locked This topic is locked
37 replies to this topic

#1 Петров Андрей

Петров Андрей
  • JBZoo User (rus)
  • User rate: 0.2
  • posts: 18
  • topics: 8

Posted 28 May 2015 - 04:35

импортирую список товаров...

поля:

"Внутренний код","Артикул","Наименование","Производитель","Группа номенклатуры","Каталожный номер","Цена","Единица","Наличие"

 

 

количество записей 23500

размер файла ~5мб

 

сам импорт проходит корректно   

только на версии 2.1.5 импорт длился 120 минут (что терпимо)

 

а на 2.2.0 уже 350 минут и пришлось время выполнения скрипта увеличить до 100 сек вместо 60 по умолчанию

что как бы печалька 

 

необходим совет как можно оптимизировать, улучшить или подсказка по импорту сторонними средствами

 


  • 1

#2 programmos

programmos
  • JBZoo User (rus)
  • User rate: 6.8
  • posts: 259
  • topics: 13

Posted 28 May 2015 - 07:00

Да тоже заметил падение скорости загрузки данных


  • 0

#3 SmetDenis

SmetDenis
  • Administrators
  • User rate: 139.4
  • posts: 16232
  • topics: 200

Posted 28 May 2015 - 17:23

Тут (и близлежащие сообщения) я описывал почему скорость импорта стала ниже и планы оптимизации

http://forum.jbzoo.c...v-v220/?p=63608

 

Если кратко, цена добавляет дополнительную вложенность (т.к в ней есть элементы которые повторятся в вариациях).

Это огромная вложенность. Так что чем сложнее у вас цена, тем тяжелее импорту работать + остальные поля материла, которые так же могу быть множественными.


  • 0
JBZoo v4.0 и новый чудный мир Open Source GPL
Отключайте проверку лицензий как можно скорее!



— Есть два типа людей: Кто еще не делает бекапы и кто уже делает бекапы.


#4 programmos

programmos
  • JBZoo User (rus)
  • User rate: 6.8
  • posts: 259
  • topics: 13

Posted 28 May 2015 - 17:28

Дело осталось за малым - выкроить 3-4 полных дня
 

 

Так получается это все же пока не было дополнено, я про 

В идеале скорость индекса приблизится к версии 2.1.5 т.е примерно 10к материалов менее чем за минуту http://llfl.ru/3452p2Допустим так не получится и будет 2 минуты. Мне кажется не критично.
 
  • 0

#5 SmetDenis

SmetDenis
  • Administrators
  • User rate: 139.4
  • posts: 16232
  • topics: 200

Posted 28 May 2015 - 19:33

Еще не занимался оптимизацией импорта. Форум занимает очень много времени.
  • 0
JBZoo v4.0 и новый чудный мир Open Source GPL
Отключайте проверку лицензий как можно скорее!



— Есть два типа людей: Кто еще не делает бекапы и кто уже делает бекапы.


#6 zeus07

zeus07
  • JBZoo User (rus)
  • User rate: 6.6
  • posts: 1090
  • topics: 172

Posted 28 May 2015 - 20:57

Тоже хочу задать вопрос по импорту. У меня такая проблема. 

Экспортировал из компонента К2 материалы в CSV. Материалов довольно много 5748 штук.

Скриншот настроек при импорте: http://clip2net.com/s/3irtHNG

 

Импорт длился 3 часа. В итоге импортировалось 3973 материала (не всё). Из полей, которые импортировались - это Название, алиас, фото, метаданные. Не импортировались краткое описание, категория (категорию не выбрал, не знаю какое поле отвечает за название), а  текст полного описание почему-то записалось в краткое описание, может потому что и там и там textarea.

 

Подскажите пожалуйста, почему не все материалы импортировались? Где я допустил ошибку? В чём ошибка в кратком и полном описании? И, если видно на скриншоте, какое поле из CSV отвечает за название категории?  


  • 0

#7 DMTR3000S

DMTR3000S
  • JBZoo User (rus)
  • User rate: 110.7
  • posts: 1044
  • topics: 44

Posted 28 May 2015 - 21:17

И, если видно на скриншоте, какое поле из CSV отвечает за название категории?  
 

за категорию отвечает пункт "категория" в подразделе "ядро".

 

Где я допустил ошибку?

Покажите файл csv ваш, пожалуйста.


Edited by Asbjorn, 28 May 2015 - 21:18.

  • 0

#8 zeus07

zeus07
  • JBZoo User (rus)
  • User rate: 6.6
  • posts: 1090
  • topics: 172

Posted 28 May 2015 - 21:20

zeus07 за категорию отвечает пункт "категория" в подразделе "ядро".

Покажите файл csv ваш, пожалуйста.

 

Со стороны JBZoo я знаю что за что отвечает) я имею в виду поле K2, которое за него отвечает, так как с K2 сталкиваюсь очень редко. 

CSV прикрепляю.

Attached Files


  • 0

#9 DMTR3000S

DMTR3000S
  • JBZoo User (rus)
  • User rate: 110.7
  • posts: 1044
  • topics: 44

Posted 28 May 2015 - 21:27

zeus07, у вас fulltext и category_path в csv пустые


  • 0

#10 zeus07

zeus07
  • JBZoo User (rus)
  • User rate: 6.6
  • posts: 1090
  • topics: 172

Posted 28 May 2015 - 21:29

zeus07, у вас fulltext и category_path в csv пустые

 

да, тоже заметил. Категорию значит придётся привязывать по ID, а потом в БД менять. А вот с fulltext буду разбираться. 

 

Остаётся один интересный вопрос почему все материалы не импортировались...


  • 0





Also tagged with one or more of these keywords: импорт, csv, 220v

Click to return to top of page in style!