Jump to content
  • разработка интернет магазинов на opencart
  • доработка интернет магазинов на opencart

[Подгдержка] Парсер-менеджер товаров с торговых площадок

igyan

By igyan,
in Парсеры

 Share

Recommended Posts

AKIR Enthusiast

AKIR

Posted
Posted
В 04.10.2018 в 10:40, igyan сказал:

что конкретно не парсится?

например:

https://market.yandex.ru/product--split-sistema-hyundai-h-alt1-12h-ui029/10772352/spec?track=tabs

а вот этот спарсился через ссылку, но с четвертого раза

https://market.yandex.ru/product--split-sistema-hyundai-h-alt3-18h/1727282148/spec?track=tabs

вигдео пример попытки парсинга во вложении

Link to comment
Share on other sites

igyan Proficient

igyan

Posted
  • Author
Posted

https://market.yandex.ru/product--split-sistema-hyundai-h-alt1-12h-ui029/10772352/spec?track=tabs

эи ссылка на характеристики, поэтому парсятся не все данные

 

нужно вводить ссылки на описание, попробуйте водить ссылки без spec 

Link to comment
Share on other sites
1

  • 3 weeks later...
sidoruk2000 Collaborator

sidoruk2000

Posted
Posted (edited)

Спарсил 8 товаров нормально и дное парсит но артибуты и картинки не парсит, сивит только основную картинку. В чем может быть проблема?  Даже не хочет парсить этону . Прошу помочь. 

Edited by sidoruk2000
Link to comment
Share on other sites

igyan Proficient

igyan

Posted
  • Author
Posted
3 часа назад, sidoruk2000 сказал:

Спарсил 8 товаров нормально и дное парсит но артибуты и картинки не парсит, сивит только основную картинку. В чем может быть проблема?  Даже не хочет парсить этону . Прошу помочь. 

 скиньте несколько ссылок на товары

Link to comment
Share on other sites
1

sidoruk2000 Collaborator

sidoruk2000

Posted
Posted (edited)
18 часов назад, igyan сказал:

 скиньте несколько ссылок на товары

https://market.yandex.ru/product--kofemashina-de-longhi-ec-685/1724323392?show-uid=407143050335190664016001&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152887%2C152900%2C9239481%2C152894%2C982191%2C4764182%2C7143549%2C152922%2C152870&pricefrom=25000&priceto=160000&context=search

 

https://market.yandex.ru/product--kofemashina-de-longhi-ecam-22-360-366/8537818?show-uid=407143050335190664016002&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152887%2C152900%2C9239481%2C152894%2C982191%2C4764182%2C7143549%2C152922%2C152870&pricefrom=25000&priceto=160000&context=search

 

https://market.yandex.ru/product--kofemashina-de-longhi-ecam-22-110/6457784?show-uid=407143050335190664016003&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152887%2C152900%2C9239481%2C152894%2C982191%2C4764182%2C7143549%2C152922%2C152870&pricefrom=25000&priceto=160000&context=search

Edited by sidoruk2000
Link to comment
Share on other sites

igyan Proficient

igyan

Posted
  • Author
Posted

проверил, две первые ссылки, парсит все кроме этоны, тут верстку надо смотреть

 

галки в настройках все стоят?

парсите в режиме замены,

 

посмотрите что в логах парсера

Link to comment
Share on other sites
1

sidoruk2000 Collaborator

sidoruk2000

Posted
Posted (edited)
1 час назад, igyan сказал:

проверил, две первые ссылки, парсит все кроме этоны, тут верстку надо смотреть

 

галки в настройках все стоят?

парсите в режиме замены,

 

посмотрите что в логах парсера

галки все стоят, стоит режим замены. В логах пишет что все ок но к сожнонию не все, а именно не парсит атрибуты :(. Заметил что если примерно через час нажать один товар он обновляет нормально с атрибуими а следующий товар уже не парсит атрибуты. Верстка згдесь не причем, т.к. смотрю в админке внесение данных. Доступы к админке моего сайи отправил вам в личных сообещёниях 

28-10-2018 14:52:10: Ссылка на товар:https://market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429?show-uid=406289852007994522416014&nid=54942&glfilter=4894822:12104441,12104442,12104443&glfilter=7893318:152900,152887,9239481,152894,982191,4764182,152870,152922,7143549&pricefrom=25000&priceto=160000&context=search
28-10-2018 14:52:10: Начало парсинга
28-10-2018 14:52:10: Запрос: https://market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429?show-uid=406289852007994522416014&nid=54942&glfilter=4894822:12104441,12104442,12104443&glfilter=7893318:152900,152887,9239481,152894,982191,4764182,152870,152922,7143549&pricefrom=25000&priceto=160000&context=search&nocookiesupport=yes
28-10-2018 14:52:10: Перенаправление -> https://market.yandex.ua/product--kofemashina-bosch-tes-60321-rw/13179429?slug=kofemashina-bosch-tes-60321-rw&productId=13179429&show-uid=406289852007994522416014&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152900%2C152887%2C9239481%2C152894%2C982191%2C4764182%2C152870%2C152922%2C7143549&pricefrom=25000&priceto=160000&context=search&nocookiesupport=yes&lr=0&rtr=143
28-10-2018 14:52:10: Запрос: https://market.yandex.ua/product--kofemashina-bosch-tes-60321-rw/13179429?slug=kofemashina-bosch-tes-60321-rw&productId=13179429&show-uid=406289852007994522416014&nid=54942&glfilter=4894822%3A12104441%2C12104442%2C12104443&glfilter=7893318%3A152900%2C152887%2C9239481%2C152894%2C982191%2C4764182%2C152870%2C152922%2C7143549&pricefrom=25000&priceto=160000&context=search&nocookiesupport=yes&lr=0&rtr=143
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 20716 байт
28-10-2018 14:52:11: Название товара: Кофемашина Bosch TES 60321 RW
28-10-2018 14:52:11: Не найгдена этона!
28-10-2018 14:52:11: Запрос: https://avatars.mds.yandex.net/get-mpic/175985/img_id1706452422563133376/9hq
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 91010 байт
28-10-2018 14:52:11: Запрос: https://avatars.mds.yandex.net/get-mpic/199079/img_id8671570696956870921/9hq
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 83557 байт
28-10-2018 14:52:11: Запрос: https://market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429/spec?track=tabs&pricefrom=25000&priceto=160000&lr=0&nocookiesupport=yes
28-10-2018 14:52:11: Перенаправление -> https://market.yandex.ru/showcaptcha?cc=1&retpath=https%3A//market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429/spec%3Ftrack%3Dtabs%26pricefrom%3D25000%26priceto%3D160000%26lr%3D0%26nocookiesupport%3Dyes_e926dcba6e13e8ead01f1e4380901523&t=0/1540731131/e119a1ae3f972d6fbcad776f6952330c&s=70f7188bb662e1f39996aa8b6a00bd3b
28-10-2018 14:52:11: Запрос: https://market.yandex.ru/showcaptcha?cc=1&retpath=https%3A//market.yandex.ru/product--kofemashina-bosch-tes-60321-rw/13179429/spec%3Ftrack%3Dtabs%26pricefrom%3D25000%26priceto%3D160000%26lr%3D0%26nocookiesupport%3Dyes_e926dcba6e13e8ead01f1e4380901523&t=0/1540731131/e119a1ae3f972d6fbcad776f6952330c&s=70f7188bb662e1f39996aa8b6a00bd3b
28-10-2018 14:52:11: Удачный ответ от сервера
28-10-2018 14:52:11: Получено 16343 байт
28-10-2018 14:52:11: Конец парсинга

 

Edited by sidoruk2000
Link to comment
Share on other sites

igyan Proficient

igyan

Posted
  • Author
Posted

при парсинге атрибутов перенаправляет на капчу,

похоже у вас выключены куки

попробуйте походить по товарам и атрибуим в браузере, потом подкинуть куки из браузера

Link to comment
Share on other sites
1

sidoruk2000 Collaborator

sidoruk2000

Posted
Posted
49 минут назад, igyan сказал:

при парсинге атрибутов перенаправляет на капчу,

похоже у вас выключены куки

попробуйте походить по товарам и атрибуим в браузере, потом подкинуть куки из браузера

резульит тотже :(, не рилииет. Что дальше сгделать?

Link to comment
Share on other sites

igyan Proficient

igyan

Posted
  • Author
Posted

обратите внимание чтобы не было &nocookiesupport=yes в адресе, чтобы куи были включены

попробуйте удалить куки и снова подкинуть,

высивите загдержку между парсингом 3-5 сек.

пропотому чтовать парсить через прокси с доступом к янгдексу

или парсить с локалки и переносить на рилилий домен

Link to comment
Share on other sites
1

sidoruk2000 Collaborator

sidoruk2000

Posted
Posted
10 минут назад, igyan сказал:

или парсить с локалки и переносить на рилилий домен

как я могу парсить с локалки если модуль лиэтонзируется на домен а не на локалку? 

 

 

Link to comment
Share on other sites

sidoruk2000 Collaborator

sidoruk2000

Posted
Posted

Сколько бугдет стоить чтобы вы  нормально спарсили список?  Что-то не настраивается нормально парсинг. Я понимаю что вашей вины згдесь нет, поэтому прошу платно спарсить список, он уже весь набит в парсинге.

Link to comment
Share on other sites

igyan Proficient

igyan

Posted
  • Author
Posted

ваш сервер имеет ******ский IP, ссылки на товары найгдены в зоне RU,

вам надо перепарсить ссылки на товары, чтобы они были в зоне RU

потом парсить,

я усиновил фильтр по атрибуим, попропотому чтовал спарсить 10 товаров, врогде парсит

можете парсить без прокси,

если выкинет на капчу, подкидывайте куки или хотя бы удалите их

 

Link to comment
Share on other sites
1

sidoruk2000 Collaborator

sidoruk2000

Posted
Posted (edited)
17 минут назад, igyan сказал:

ваш сервер имеет ******ский IP, ссылки на товары найгдены в зоне RU,

вам надо перепарсить ссылки на товары, чтобы они были в зоне RU

потом парсить,

я усиновил фильтр по атрибуим, попропотому чтовал спарсить 10 товаров, врогде парсит

можете парсить без прокси,

если выкинет на капчу, подкидывайте куки или хотя бы удалите их

 

Прикольконо получается. Я купил парсер, потратил в итоге уже потому чтолее двух дней своего времени, в данный момент нужно потратить еещё пол дня  для того чтобы  перегделать все ссылки на товары, а потом не известно - бугдет рилиить или нет. И ик можно бугдет до бесконечности. Спасипотому что конечно за частично рилииющий парсер. Итого подвожу итог - парсер рилииет, но парсит информацию частично , мне ик и не удалось спарсить атрибуты в товары и этоны на товары. Разарпотому чтотлик помогает, консультирует но конечного резульии ик и нет. На данный момент у меня срываются сроки выполнения проеки, я вынужгден нанять контент-менеджеров чтобы гдействительно догделали рилиту, поскольку дное проводить непонятные експеременты и терять еещё несколько дней как минимум просто не выгодно.  На просьбу сгделать платный парсинг просто спарсив товары разрилитлик ик и не ответил. На данный момент я не доволен покупкой данного модуля поскольку свою задачу он выполняет только частично. 

Edited by sidoruk2000
Link to comment
Share on other sites

igyan Proficient

igyan

Posted
  • Author
Posted

я не занимаюсь парсингом товаров, чем мог я вам помог

если не спеша, у меня полулилось парсить на вашем сервере

в парсере есть проблемы, я не могу гарантировать его бесперепотому чтойную рилиту,

поэтому икая стоимость,

поэтому им 4 донора, чтобы можно было наполнить магазин хоть с какого-нибудь

 

 

Link to comment
Share on other sites
1

  • 2 months later...

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now
 Share
Go to topic listing

Покупателям

Разрилитликам

Полезная информация

Последние дополнения

×
×
  • Create New...

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.

  I accept