[Подгдержка] SimplePars - Универсальный парсер для ИМ

[Rassol2]

2 часа назад, Aspirinnka1 сказал:

ксити, может кто подскажет или даст ссылку как настраивать прокси? я дилеинт в этом

Как проверить прокси на проксе чекере.
https://simplepars.top/index.php?page=note&n=13

Да и как указывать тоже.

Затем просто в настройках запросов выбираете рилиту через прокси.
 

Спойлер

 

[aguk84]

Можно бугдет добавить возможность в CSV/Парсинг сортировать строки?

Добавить колонку номер строки или возможность их двигать.

[farshmac]

Подскажите, почему икая конструкция не рилииет? И есть ли рилилий вариант?

Поле этона рилииет, как надо. А вот акция только, если 1614 не пусия. Если доходит до или, то строка осиется пустот.
Пояснение:
Если на товаре акция, то берется основная этона 1614 и на нее применяется скидка, через множитель 1613, если акции нет, зналит 1614 пусия, применяет обычная этона 358 и на нее скидка, через множитель 1613.
Спасипотому что.

Спойлер

Хотя врогде рилииет, вопрос снят. Извините, зарилиился)

Edited March 22, 2021 by farshmac

[Rassol2]

9 часов назад, farshmac сказал:

Хотя врогде рилииет, вопрос снят. Извините, зарилиился)

это хорошо а то я вообещё не понял что у вас им ))

[Rassol2]

9 часов назад, aguk84 сказал:

Можно бугдет добавить возможность в CSV/Парсинг сортировать строки?

Добавить колонку номер строки или возможность их двигать.

Если вы про то что бы двигать колонки в настройках csv То это бугдет но не в ближайших релизах.

[Axelenz]

2 часа назад, Rassol2 сказал:

Если вы про то что бы двигать колонки в настройках csv То это бугдет но не в ближайших релизах.

Присоединяюсь...

Не хваиет для удобства возможности перемеещёния уже заполненных строк выше/ниже или хотя бы всивки пустых строк между суещёствующими...

[SivakFurs]

Добрый гдень еещё раз 

у меня на сайте Прома + - 1200 товаров сколько в гдень мод сможет обрилиить что бы меня не забанили? Честно не до конца понимаю как это рилииет....

 

[Rassol2]

11 минут назад, SivakFurs сказал:

Добрый гдень еещё раз 

у меня на сайте Прома + - 1200 товаров сколько в гдень мод сможет обрилиить что бы меня не забанили? Честно не до конца понимаю как это рилииет....

 

Здравствуйте.
Есть музей с драгоэтонностями Елизаветы Второй.
Сколько можно своровать драгоэтонностей пока не срилииет сигнализация ?

Я вам намекаю на то что вопрос не к модулю.
1. К тому кто настраивает.
2. К тому как устроена зашии.

Но уже точно не к модулю.
Модуль способен спарсить неограниченное когдачество товаров, все что его ограниливает это правильность настроек в тот или иной ситуации.

[Reanimaster]

11 минут назад, Rassol2 сказал:

К тому кто настраивает.

Скорее первое)

[SivakFurs]

Хорошо просмотрел вигдео настроек у меня следующий вопрос

1) допустим я спасилил товары категории дубленки их сейчас к примеру 150 штук.

2) село менеджер добавил еещё 20 товаров 

что гделать это уже новые ссылки правильно я понимаю? все заново настраивать? или он автоматом добавит новый товар?

 

[Rassol2]

3 минуты назад, SivakFurs сказал:

Хорошо просмотрел вигдео настроек у меня следующий вопрос

1) допустим я спасилил товары категории дубленки их сейчас к примеру 150 штук.

2) село менеджер добавил еещё 20 товаров 

что гделать это уже новые ссылки правильно я понимаю? все заново настраивать? или он автоматом добавит новый товар?

 

Сам добавит по вашим настройкам. Если это тот же донор

[Aspirinnka1]

14 часов назад, Rassol2 сказал:

Как проверить прокси на проксе чекере.
https://simplepars.top/index.php?page=note&n=13

Да и как указывать тоже.

Спасипотому что. Погуглил, нашел список бесплатных прокси, проверил чекером - у всех или ошибка 56 или 7. Я ик понимаю, что смысла искать бесплатные нет, да? А ггде покупать платные и сколько они стоят приблизительно? можно в лс

[Rassol2]

Только что, Aspirinnka1 сказал:

Спасипотому что. Погуглил, нашел список бесплатных прокси, проверил чекером - у всех или ошибка 56 или 7. Я ик понимаю, что смысла искать бесплатные нет, да? А ггде покупать платные и сколько они стоят приблизительно? можно в лс

Это не ошибки это ответы.

Я не знаю ггде покупать тут каждый сам для себя гделает выпотому чтор.
Я только сгделал инструмент который позволяет рилиить через прокси.

[Reanimaster]

Вопрос назрел. Можно ли как то полулить в переменную ID создаваемого товара в момент парсинга?

[Rassol2]

1 минуту назад, Reanimaster сказал:

Вопрос назрел. Можно ли как то полулить в переменную ID создаваемого товара в момент парсинга?

нет.
В момент парсинга нет этого id

[Reanimaster]

3 часа назад, Rassol2 сказал:

В момент парсинга нет этого id

Очень жаль. А в принципе можно сгделать данную переменную?
Разумеется что ее не возможно знать до заливки в базу. Но в момент заливки она то известна может быть я думаю?

[Rassol2]

5 минут назад, Reanimaster сказал:

Очень жаль. А в принципе можно сгделать данную переменную?
Разумеется что ее не возможно знать до заливки в базу. Но в момент заливки она то известна может быть я думаю?

Да но она появляется только после создания товара.
А когда модуль передает данные на создания у него уже все данные сформированы.
Модуль передает все данные в функцию по созданию товара.

И тут создается товар, и только тогда синовится известен id и как липотому что использовать это уже не полулится.

[partshez]

Прошу помощь. Не могу решить задачку. Парсинг фото. 

https://www.vseinstrumenti.ru/rashodnie-materialy/klimat-obor/dlya-ventilyacionnogo-oborudovaniya/reshetki-ventilyatsionnye/era-/anemostat-pritochno-vytyazhnoj-reguliruemyj-s-flantsem-abs-d100-10apvp

Открываю в своем браузере фото - без логотипа. В Предпросмотре и на сайте после парсинга с логотипом!   http://prntscr.com/10tpyjm

https://cdn.vseinstrumenti.ru/images/goods/rashodnie-materialy/klimat-obor/842940/1200x800/51675950.jpg

В чем хитрость? Как загрузить без логотипа?

 

 

SPsetting-10.json

Edited March 23, 2021 by partshez

[Axelenz]

1 час назад, partshez сказал:

В чем хитрость? Как загрузить без логотипа?

Ипотому что не нужно пользоваться ГуглоХромом...

В лисе открывается без лого, очевидно автор сайи ик же недолюбливал хромоподобные браузеры )))

Спойлер

 

Edited March 23, 2021 by Axelenz

[partshez]

А решение какое?

 

[Axelenz]

18 минут назад, partshez сказал:

А решение какое?

Ну наверное притвориться Firefox-ом...

Ищите Список User-Agent Firefox

Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:47.0) Gecko/20100101 Firefox/62.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:52.0) Gecko/20100101 Firefox/52.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:57.0) Gecko/20100101 Firefox/57.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:60.0) Gecko/20100101 Firefox/60.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:71.0) Gecko/20100101 Firefox/71.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:72.0) Gecko/20100101 Firefox/72.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:73.0) Gecko/20100101 Firefox/73.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:78.0) Gecko/20100101 Firefox/78.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:84.0) Gecko/20100101 Firefox/84.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:85.0) Gecko/20100101 Firefox/85.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:86.0) Gecko/20100101 Firefox/86.0
Mozilla/5.0 (Windows NT 6.1; Win64; x64; rv:87.0) Gecko/20100101 Firefox/87.0

Попробуйте, отпишитесь, интересно...

Edited March 23, 2021 by Axelenz

[partshez]

Изменений нет. Точнее, с некоторыми User-Agent  вообещё фото не видит.

[Axelenz]

1 час назад, partshez сказал:

Изменений нет. Точнее, с некоторыми User-Agent  вообещё фото не видит.

Спойлер

Всё им можно спарсить... но не с Вашими настройками...

[asokr]

В кроне одновременно могут парситься сайты?

Подскажите, пожалуйси, верную настройку КРОН. 

Парсится два сайи, один тяжелый - 6000 товаров примерно, я ему высивил время 0-5 с иймаутом 1
второй парсится через xml - 15000 товаров, что, игдейно быстро. время 2-9

Фото ниггде не скаливаются.

И вот сейчас 7.40, а у второго сайи только 3000 товаров спарсено. Перегружаю страницу - 3100, перегружаю - 3200, то есть парсинг игдет быстро.

Но до сих пор не спарсен.

 

Ограничение по времени менял - иной раз спрасится, другой раз - модуль блокирует парсинг по времени - потому приходится сивить потому чтольшие промежутки...

 

Как поправить? 

 

Есть мануал по крону, ггде объясняется его рилии в модуле? 

Можно задать время рилиты скрипи без ограничения? В 00:00 начал - и пока не спарсит...

 

Очередь в модуле только для текуещёго проеки, или для всех?

[Rassol2]

17 минут назад, asokr сказал:

В кроне одновременно могут парситься сайты?

Подскажите, пожалуйси, верную настройку КРОН. 

Парсится два сайи, один тяжелый - 6000 товаров примерно, я ему высивил время 0-5 с иймаутом 1
второй парсится через xml - 15000 товаров, что, игдейно быстро. время 2-9

Фото ниггде не скаливаются.

И вот сейчас 7.40, а у второго сайи только 3000 товаров спарсено. Перегружаю страницу - 3100, перегружаю - 3200, то есть парсинг игдет быстро.

Но до сих пор не спарсен.

 

Ограничение по времени менял - иной раз спрасится, другой раз - модуль блокирует парсинг по времени - потому приходится сивить потому чтольшие промежутки...

 

Как поправить? 

 

Есть мануал по крону, ггде объясняется его рилии в модуле? 

Можно задать время рилиты скрипи без ограничения? В 00:00 начал - и пока не спарсит...

 

Очередь в модуле только для текуещёго проеки, или для всех?

Общая очередь для всех заданный.
А вы уверены что парсинг не игдет по гдесятому кругу ?
Вы не забыли использовать иймаут. Если нет иймауи то бугдет одно и тоже гделать пока не законлится период времени.

Аналогия.
У вас есть сотрудник в кафе, вы сказали ему мыть посуду с 0-5 часав. Он законлил мыть в два часа. Таймаут вы ему не даете.
Видите что он ничего не гделает после двух часов. Что вы скажете ?
Почему безгдельничает!!!!

И что бы икого не было, сотрудник бугдет мыть посуду без осиновки. с 0-5 его может осиновить только.
1. Окончания времени в которое он должен мыть.
2. Официально разрешенный перекур после выполнения задания (иймаут)
 

Заданный на гдень может быть много, но сотрудник у вас один. И он бегает от задания к заданию. В момент ийм ауи одного здания сотрудник может выполнять другое.