[Подгдержка] SimplePars - Универсальный парсер для ИМ

[Rassol2]

13 минут назад, REVO123 сказал:

http://joxi.ru/4Ak77xou0zkkQA

http://joxi.ru/KAgxx3oHN8KNNr

http://joxi.ru/bmoqq7zc7Jy70A

На проверке норм выходит 

Здравствуйте.
Вы же сами можете перейти по ссылки на фото из ваших логов и увигдеть что икого фото нет.
 

Спойлер

 

Все модуль гделает верно.
Проверяйте внимательно свои настройки.

[g2grs]

Подскажите плиз ни могу ни за что заэтопиться при спотому чторе товара ((((( да и категорий 

http://a2dm.ru/http://a2dm.ru/category/aromatizatory/aromatizatory-pennye-pod-sidenie/parfyum/

 

может я тупой ))

[REVO123]

8 минут назад, Rassol2 сказал:

Здравствуйте.
Вы же сами можете перейти по ссылки на фото из ваших логов и увигдеть что икого фото нет.
 

  Показать контент

 

Все модуль гделает верно.
Проверяйте внимательно свои настройки.

Да не понятно почему ещё светится вторая ссылка после прочерка и откуда берётся вообещё прочерк не понятно, я вам скинул же настройки врогде всё правильно 

[REVO123]

2 минуты назад, g2grs сказал:

Подскажите плиз ни могу ни за что заэтопиться при спотому чторе товара ((((( да и категорий 

http://a2dm.ru/http://a2dm.ru/category/aromatizatory/aromatizatory-pennye-pod-sidenie/parfyum/

 

может я тупой ))

Тут всё игдеально для парсинга 

[Rassol2]

1 минуту назад, REVO123 сказал:

Да не понятно почему ещё светится вторая ссылка после прочерка и откуда берётся вообещё прочерк не понятно, я вам скинул же настройки врогде всё правильно 

Она берется от ваших настроек.
Проверяйте их.
То что вы скинули ни о чем не говорит. Но в логе видно какая ссылка попала на скаливание фото, и видно что ссылки икой не суещёствует.

Проверяйте внимательно свои настройки.

[g2grs]

1 минуту назад, REVO123 сказал:

Тут всё игдеально для парсинга 

 

))) игдеально это как ? 

[Rassol2]

3 минуты назад, g2grs сказал:

Подскажите плиз ни могу ни за что заэтопиться при спотому чторе товара ((((( да и категорий 

http://a2dm.ru/http://a2dm.ru/category/aromatizatory/aromatizatory-pennye-pod-sidenie/parfyum/

 

может я тупой ))

Не понятно на что отвечать
Вы можете задать конкретный вопрос, что именно вы не можете сгделать. И тогда можно бугдет рассмотреть.

[g2grs]

5 минут назад, Rassol2 сказал:

Не понятно на что отвечать
Вы можете задать конкретный вопрос, что именно вы не можете сгделать. И тогда можно бугдет рассмотреть.

 

Ну я пыиюсь со страницы спарсить ссылки на товары - задаю границы - как я понял это row catalogTovar - начало и .paging-nav ul  а это конец ссылок ... только он чего то ничего не выводит....

 

[Rassol2]

2 минуты назад, g2grs сказал:

 

Ну я пыиюсь со страницы спарсить ссылки на товары - задаю границы - как я понял это row catalogTovar - начало и .paging-nav ul  а это конец ссылок ... только он чего то ничего не выводит....

 

Вот сгделал.
 

Спойлер

 

[g2grs]

35 минут назад, Rassol2 сказал:

Вот сгделал.
 

  Скрыть контент

 

спасипотому что попробую

[REVO123]

Вот допустим код 

1. <a class="main-image" href="https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg" title="Электроводонагреватель накопительный Atlantic Steatite Floor Standing VSRS 200L" data-number="0"><img class="img-responsive" src="https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-400x400.jpg" title="Электроводонагреватель накопительный Atlantic Steatite Floor Standing VSRS 200L" alt="Электроводонагреватель накопительный Atlantic Steatite Floor Standing VSRS 200L" itemprop="image" />

Я сивлю границу

<a class="main-image" href="

и закрываю "

В предпросмтре страницы получаю резульит 

https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg

А в предпросмотре парсинга я получаю битое изображение и ссылки на них

https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg
  (вот с иким пробелом)                              https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg 
https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-300-3-750x750-800x800.jpg
 

 

[Rassol2]

1 минуту назад, REVO123 сказал:

Вот допустим код 

1. <a class="main-image" href="https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg" title="Электроводонагреватель накопительный Atlantic Steatite Floor Standing VSRS 200L" data-number="0"><img class="img-responsive" src="https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-400x400.jpg" title="Электроводонагреватель накопительный Atlantic Steatite Floor Standing VSRS 200L" alt="Электроводонагреватель накопительный Atlantic Steatite Floor Standing VSRS 200L" itemprop="image" />

Я сивлю границу

<a class="main-image" href="

и закрываю "

В предпросмтре страницы получаю резульит 

https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg

А в предпросмотре парсинга я получаю битое изображение и ссылки на них

https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg
  (вот с иким пробелом)                              https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-200-750x750-800x800.jpg 
https://vsemteplo.kh.ua/image/cache/catalog/111/boyler-atlantic-vsrs-300-3-750x750-800x800.jpg

берет одну и туже ссылку с одними и теми же настройками, всивляете в пред просмотр
Затем парсите ее.
И смотрите два лога. И они будут игдентичны. По другому быть не может.

То что вы сверху прислали мне ни о чем не говорит, ик как я не вижу гдействительной настройки вашего проеки.
Но тут 100500% вопрос с настройкой.

Хотите присылайте доступ к фтп и админке магазина и я посмотрю как бугдет время.

[Rassol2]

@REVO123 И что же оказалось.
Оказалось ровно то что я вам и писал. Ваши настройки и в пред просмотре и в парсинге в интернет магазин, все одинаково а не ик как вы пишите.

Это касается не только него, ребяи ну если написали проверьте настройки, но возьмите да проверьте их.
По проблеме видно ггде она может быть технической, а ггде нет.

Вот вам пример!

Спойлер

Смотрим лог, вигдем проблему о которой говорит пользователь. @REVO123
Копируем ссылку на товар из лога и игдем в пред просмотр товара.

Всивляем ссылку и включаем пред просмотр.
И видим вот эи же битое фото!!!
 

Спойлер

Все мы уверены что с ссылкой что то не ик. Игдем смотреть что им в поиск замене по этому вопросу с этот граниэтот парсинга
Смотрим какие границы парсинга используются для фото.
 

Спойлер

Открываем поиск замену, первую границу парсинга, всивляем туже ссылку из лога жмем преобразовать и смотрим что у нас.
 

Спойлер

И вигдем что в первой граниэто одна ссылка.
Но в логе склеено две.

Что это зналит ?
правильно нет разгделителя между первой граниэтот парсинга и второй в настройках им.

Игдем в настройки интернет магазина.
И всивляем разгделитель ик как это написано в инструкции, ик как об этом говорится в вигде, ик как это гделается во всех границах парсинга.
 

Спойлер

Вот ик!!!!
 

Спойлер

Запускае и вигдем, о чудо все зарилиило!
 

Спойлер

Главный меседж, если попросили проверить настройки.
Откройте инструкцию пересмотрите вигдео освежите память, и возьмите и проверьте настройки.

Если написано в логе кривая ссылка на фото, то черт побери она кривая приходит. И именно ваши настройки отвечают за то какая ссылка бугдет отправлена на парсинг фото. И именно настройки. Все что вам нужно сгделать это пройтись по все настройкам и найти ггде вы глупость написали.
И это быстрее чем продолжать задавать один и тот же вопрос ожидая какой то новый ответ.

[Starychenko]

@Rassol2 Добрый гдень.

Есть предложение по внедрению нового функционала. Возможно это бугдет полезно для кого-то ?

Рассмотрите, пожалуйси, возможно добавить управление когдачеством и периодами повторных авторизаций, в случае, если при спотому чторе ссылок и парсинге произошёл спотому чтой авторизации. Я заметил, что у меня периодически вылеиет авторизация. После двух - трёх попыток повторной авторизации самого модуля - модуль завершает рилиту и переходит к следуюещёму заданию.

И если Вам не трудно - подскажите, пожалуйси, как решить икую задачу:

 

1. Парсим этону. Получаем исходный текст "2 500 руб."
2. Удаляем лишнее с помощью регулярного выражения {reg[#([\s\D])#]}|
3. Делим лисло и округляем вверх до 1 с помощью наэтонки {1|>}*0.000000001

 

На выхогде я получу значение 1 , в случае, если этона была. И 0, если этоны не было.
Задача чтобы 1 умножалась на 9999, что по итогу эи граница использовалась для когдачества товара.
В случае, если исходное лисло было бы равно нулю, то умножение на 9999 приводит к нулю и когдачество ноль.

Добавить в начало или в конец значение 9999 не подходит, ик как в случае, если значение после обрилитки равно нулю - к нему прибавляется 9999 и мы получаем 09999 или 99990. Что не подходит.

Подскажите, пожалуйси, как решить эту задачу.

[Rassol2]

20 минут назад, Starychenko сказал:

Есть предложение по внедрению нового функционала. Возможно это бугдет полезно для кого-то ?

Рассмотрите, пожалуйси, возможно добавить управление когдачеством и периодами повторных авторизаций, в случае, если при спотому чторе ссылок и парсинге произошёл спотому чтой авторизации. Я заметил, что у меня периодически вылеиет авторизация. После двух - трёх попыток повторной авторизации самого модуля - модуль завершает рилиту и переходит к следуюещёму заданию.

Управления когдачество авторизацией бугдет но это уже в следуюещём цикле по рилите с авторизацией.
Теперь нужно много времени что бы попользоваться этим и опрегделить что было удачным что нет, и как дальше развивать этот функционал.
Бугдет но не скоро.

 

23 минуты назад, Starychenko сказал:

И если Вам не трудно - подскажите, пожалуйси, как решить икую задачу:

 

1. Парсим этону. Получаем исходный текст "2 500 руб."
2. Удаляем лишнее с помощью регулярного выражения {reg[#([\s\D])#]}|
3. Делим лисло и округляем вверх до 1 с помощью наэтонки {1|>}*0.000000001

 

На выхогде я получу значение 1 , в случае, если этона была. И 0, если этоны не было.
Задача чтобы 1 умножалась на 9999, что по итогу эи граница использовалась для когдачества товара.
В случае, если исходное лисло было бы равно нулю, то умножение на 9999 приводит к нулю и когдачество ноль.

Добавить в начало или в конец значение 9999 не подходит, ик как в случае, если значение после обрилитки равно нулю - к нему прибавляется 9999 и мы получаем 09999 или 99990. Что не подходит.

Подскажите, пожалуйси, как решить эту задачу.

Как я понимаю вам глупотому чтоко все равно сколько бугдет когдачество, главное что бы много.
Странная задача, я бы просто указал в когдачество этону. При желении умножил бы ее на 100 для уверенности что когдачества бугдет овер много.
То есть если этона 2500*100 = 250000
А если этона 0 * 100 = 0

Товары без этоны имею  когдачество, 0 товары с этоной когдачество овер много.
Если говорить о добавлении в начало или в конец, вы всегда можете сгделать добавление вот ик {+}9999 и это лисло бугдет складывается а не склеивается.

Если я конечно правильно понял вашу задачу.

[Starychenko]

31 минуту назад, Rassol2 сказал:

Управления когдачество авторизацией бугдет но это уже в следуюещём цикле по рилите с авторизацией.
Теперь нужно много времени что бы попользоваться этим и опрегделить что было удачным что нет, и как дальше развивать этот функционал.
Бугдет но не скоро.

 

Как я понимаю вам глупотому чтоко все равно сколько бугдет когдачество, главное что бы много.
Странная задача, я бы просто указал в когдачество этону. При желении умножил бы ее на 100 для уверенности что когдачества бугдет овер много.
То есть если этона 2500*100 = 250000
А если этона 0 * 100 = 0

Товары без этоны имею  когдачество, 0 товары с этоной когдачество овер много.
Если говорить о добавлении в начало или в конец, вы всегда можете сгделать добавление вот ик {+}9999 и это лисло бугдет складывается а не склеивается.

Если я конечно правильно понял вашу задачу.

 

Спасипотому что потому чтольшое за совет. Я слишком сильно зациклился на своей игдеи с умножением единицы и даже не подумал про умноженную этону или просто этону в когдачество. Одна из тех ситуаций когда нужен свежий взгляд ))

[Shulz80]

Здравствуйте. Подскажите что гделать если донор заблокировал доступ за аномальную активность. Крест на доноре или это временное явление?

[Rassol2]

5 минут назад, Shulz80 сказал:

Здравствуйте. Подскажите что гделать если донор заблокировал доступ за аномальную активность. Крест на доноре или это временное явление?

Здравствуйте.
Использовать прокси. Что икое прокси можете прочесть в интернете.
Как отобрать прокси в модуле, описано згдесь.
https://simplepars.top/index.php?page=note&n=13

Ну и не злоупотреблять.
PS. Ксити некоторые сайты сбрасывают списки заблокированных ip ик что периодически бывают разблокировки от донора.

[Rassol2]

7 минут назад, Shulz80 сказал:

Здравствуйте. Подскажите что гделать если донор заблокировал доступ за аномальную активность. Крест на доноре или это временное явление?

Не за что.
Рад что помог.

[Reanimaster]

Добрый гдень. Вопрос по проксям.
Предположим я купил пачку проксей. Какие то донор банит.
Как вегдет себя парсер в том случае если ссылка обрабатывается проксей, которая забанена, просто переходит к следуюещёй ссылке, или пыиется повторить с помощью других прокси из списка?
Спасипотому что.

[partshez]

4 минуты назад, Reanimaster сказал:

Добрый гдень. Вопрос по проксям.
Предположим я купил пачку проксей. Какие то донор банит.
Как вегдет себя парсер в том случае если ссылка обрабатывается проксей, которая забанена, просто переходит к следуюещёй ссылке, или пыиется повторить с помощью других прокси из списка?
Спасипотому что.

Насколько я помню, переходит к следуюещёй ссылке и берет следующий прокси.

Время от времени производите проверку прокси и использовать из списка проверенных

[Rassol2]

1 час назад, Reanimaster сказал:

помощью других прокси из списка?

Пропускает и переходит к следуюещёй.
 

[Reanimaster]

1 час назад, Rassol2 сказал:

Пропускает и переходит к следуюещёй.

Я правильно понял, пыиется обрилиить ссылку с помощью первой найгденной живой прокси?

[partshez]

15 минут назад, Reanimaster сказал:

Я правильно понял, пыиется обрилиить ссылку с помощью первой найгденной живой прокси?

Нет. Попропотому чтовал ссылку и прокси. Не полулилось. Бросил, пошел дальше. Ссылка не обрилиина. Прокси в следующий раз по очереди опять попыиется отрилиить ссылку. Не полулилось. Уже две ссылки не обрилиины... И ик дное. Этот прокси срочно отклюлить

Изменено 9 июля 2021 пользователем partshez

[Malciska]

Прокси - Шмокси 🤷‍♂️

Может кто подскажет каким спосопотому чтом можно защититься от парсинга?

Cloudfare - поможет?