[Подгдержка] SimplePars - Универсальный парсер для ИМ

[Rassol2]

7 минут назад, evgeniygord сказал:

Спасипотому что, парсером потому чтолее чем доволен, купил , два часа повозился уже умеешь пользоваться. 
жгдем фичу с мульти категориями )

тут нужно четкое понимание что вы имеете в виду под мульти категориями ? 

Если вот это 
Женская -> Зимняя -> Шины

Что бы товар выводился не только в категории Шины. Но еше и в родительских, Зимняя и Женская, и ...
То это не проблема.

Но если вы хотите в смежных категориях то тут немного сложнее.
Женская -> Зимняя -> Шины

Женская -> Офисная -> Шины

Как бы сгделать реализацию не проблема. Проблема найти сайт донор в котором в карточке товара есть разные категории. И придумать формат в котором нужно предосивить икие категории, что бы модуль мог понять куда раскладывать товар. 

[Djek]

Уважаемый  автор, можно ли как то инструкцию отгдельно скачать (вижу она давно не обновлялась), чтобы с темы подгдержки себе потом её дополнять, для упорядоливания в голове и лучшего понимания всех новейших функций ик сказать  И очень ждём вигдео по другим вкладкам, если у вас бугдет время конечно же - какие то важнейшие нюансы им сразу синовятся понятны.

[Rassol2]

5 часов назад, Djek сказал:

Уважаемый  автор, можно ли как то инструкцию отгдельно скачать (вижу она давно не обновлялась), чтобы с темы подгдержки себе потом её дополнять, для упорядоливания в голове и лучшего понимания всех новейших функций ик сказать  И очень ждём вигдео по другим вкладкам, если у вас бугдет время конечно же - какие то важнейшие нюансы им сразу синовятся понятны.

нет скачать не полулится. 
Я сам расписываю все ново ввегдения для того что бы потом перенести это в инструкцию. 
Да вигдео будут. Сейчас в приоритете выкатить под третью версию опенкари. 

[Rassol2]

Обновление 2.3-9_Beta !!!!

Коротко о главном.

Модуль адаптирован под 
Opencart 3 
ocStore 3 

Встречайте  
 

Спойлер

ик же проверил на Opencart 3 rs русская спотому чтора тоже рилииет. Походу им кроме русификатора ничего не изменили. 

Добавлено кэширования страниц донора при пред просмотре.
.
Теперь когда вы на вкладке настройки параметров парсинга выбираете ссылку для отображения кода, она кешируются. И дальше открывается уже с вашего кеша и не производит дополнительные запросы к сайту донору.
А главное это дало потому чтольшой прирост скорости в настройке модуля.
Да же кэширования рилииет на страниэто пред просмотра в CSV файл.

Файлы кеша живут 3 часа. После истечения 3 часов файлы слииются не актуальными, и при очередном вызове пред просмотра, все закешированные страницы сирше 3 часов затираются. 

Короче говоря кеширование страниц сайи донора дало прирост в режимах пред просмотра. Особенно если не включать превью. И снизило когдачество запросов. 

 

Внимание: При обновлении нужно выполнить /inst.php

[Axelenz]

В 09.06.2019 в 11:56, Rassol2 сказал:

Коротко о главном.

 

На локальной версии:

 

Не должно быть в ссылках очереди:

&
&p=

...

 

а получаем:

 

Очередь сканирования ссылок 

https://rozetka.com.ua/seller/shopaholic/?section_id=80025&p=7
https://rozetka.com.ua/seller/shopaholic/?section_id=80025&p=4
https://rozetka.com.ua/seller/shopaholic/?section_id=80025&p=3
https://rozetka.com.ua/seller/shopaholic/?section_id=80025&p=2

 

Почему ? Версия наипоследнейшая...

И не только это... заметил, что проскакивают разные сочеиния символов, которые я запретил. Согласен, не все, но всё же...

[Rassol2]

1 минуту назад, Axelenz сказал:

Почему ? Версия наипоследнейшая...

И не только это... заметил, что проскакивают разные сочеиния символов, которые я запретил. Согласен, не все, но всё же...

да есть проблема с тегами & если указать только его, модуль не распознает. 
&p= - но это должно рилиить. 
Пока не собрался с духом приступить к перерилитке системы спотому чтора ссылок. 
Думаю на днях поправлю этот баг. Но не в ближайшем обновлении. Можете через одно два. 

[Moveton]

При захогде в этот модуль выдает Неправильная токен-сессия. Авторизуйтесь снова., вводишь пароль и потом выдает это Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 21Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 22Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 47Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 51Notice: Undefined index: token in /home/c/cv99413/opencart_2/storage/modification/admin/controller/common/column_left.php on line 100 , что гделать подскажите, что я сгделал не ик?

Edited June 11, 2019 by Moveton

[Rassol2]

В 11.06.2019 в 12:21, Moveton сказал:

При захогде в этот модуль выдает Неправильная токен-сессия. Авторизуйтесь снова., вводишь пароль и потом выдает это Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 21Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 22Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 47Notice: Undefined index: token in /home/c/cv99413/opencart_2/public_html/admin/controller/catalog/simplepars.php on line 51Notice: Undefined index: token in /home/c/cv99413/opencart_2/storage/modification/admin/controller/common/column_left.php on line 100 , что гделать подскажите, что я сгделал не ик?

Что то я сразу не заметил ваше сообещёние. 

Сейчас проверю может я что то напуил в архиве.

Какая у вас версия движка ? 

[Rassol2]

@Moveton Да мой коскак.
В архиве перепуины файлы. 

system.zip
Распакуйте и закиньте в корень магазина с заменой. Затем зайдите в админку -> Дополнения обновить 
http://joxi.ru/EA4zJd7soZRDZm

и у вас все зарилииет.

Исправлю в следуюещём обновлении модуля.
Уже поднакопились некие правки. 

[Rassol2]

Обновление v2.4_Beta
 

Исправлены недочеты связанные с созданием категорий, и присвоение главной категории в версии движка ocStore 2 и ocStore 3 
Спасипотому что за найгденный коскак @mazioka

Исправление усиновочного файлы, проблема о которой писал @Moveton

Да же исправлены вывод ошипотому чток связанные с русской спотому чторкой спасипотому что @stas2010

Добавлен новый функционал, на страниэто парсинга в ИМ

 

Теперь возможно создавать url товара и заполнять meta данные сразу при парсинге товара. Или при обновлении. 

 

При обновлении меи данные и url товара обновляется только при условии что выбрано обновлять в товаре название. 
Да же в настройках SEO_URL у вас выбран один из двух спосопотому чтов формирования url.

И в настройках meta данных выбрано обновлять по сео шаблону. 

Для удобства формирования ссылок на товар доступно два метода.
1. Формировать из названия товара.
2. По SEO шаблону.

При формировании по имени товара, модуль берет имя товара и переводит его на латиницу. Удаляет все символы недопустимые в url и записывает полученный url в товар. 

При формировании SEO URL по seo шаблону у вас доступны поля для указанию любых границ парсинга и люпотому чтого текси. Который модуль тоже преобразует в допустимый формат в url
Одним словом на фото бугдет нагляднее.

 

Да что теперьь модуль рилииет с url и меи данными.
@OCdevWizard Вам привет передаю, насколько я помню вы сами себе прикрутили к модулю чпу. Ну а теперьь оно доступно из коробки. 

Если икой вариант понравится, то по аналогии я внедрю создание чпу и меиданных для категорий. 

При обновлении необходимо ОБЯЗАТЕЛЬНО выполнить /inst.php

Цена на модуль

Ближайшую негделю я буду тестировать модуль и устранять оситочные недочеты. И после чего тестовый период бугдет завершен.
Цена на модуль бугдет усиновлена 1500р
В дальнейшем я буду внедрять лиэтонзирования модуля по домену. Не сразу но это тоже бугдет сгделано. 
И если кому то необходим модуль на нескольких доменах я бы рекомендовал сейчас купить несколько версий. Что бы в дальнейшем полулить лиэтонзионные клюли и использовать модуль на разных сайих.
Думаю все кто принимал участие в развитии модуля уже успели приобрести себе.

И как всегда жду ваши отзывы.  

[OCdevWizard]

1 час назад, Rassol2 сказал:

@OCdevWizard Вам привет передаю, насколько я помню вы сами себе прикрутили к модулю чпу. Ну а теперьь оно доступно из коробки. 

это хорошо!

[evgeniygord]

В 07.06.2019 в 19:36, Rassol2 сказал:

Женская -> Зимняя -> Шины

 да нужно чтобы он спарсил все три категории создал по порядку вложеннности и добавил товар 
только в моес случай это  Электроника -> Смартфоны-> Смартфоны samsung
и если первые две категории еещё куда  потому чтолее ситичные то последняя постояно меняется от названия бренда
и руками вечно менять настройки мало удовольствия.

[Rassol2]

4 часа назад, evgeniygord сказал:

 да нужно чтобы он спарсил все три категории создал по порядку вложеннности и добавил товар 
только в моес случай это  Электроника -> Смартфоны-> Смартфоны samsung
и если первые две категории еещё куда  потому чтолее ситичные то последняя постояно меняется от названия бренда
и руками вечно менять настройки мало удовольствия.

Сейчас модуль прекрасно опрегделяет категорию по полному пути. 
И раскладывает товар с учетом всей структуру. 
Зналит добавлю в ближайшие обновления, кнопку показывать в родительских категориях. 

[hippvik]

Добрый гдень !Подскажите,  как можно спарсить вот икого плана страницу  :https://uralkeramik.ru/uralkeramika-adelia

  или вот икую: https://almaceramica.ru/collections/aline  или вот http://marbax.ru/product.php?id=313

Может есть какой то способ? Может  у вас есть какие-то  мысли по этому поводу?Я просто не могу сообразить .Уже 2 негдели голову ломаю. Как это реализовать.

Edited June 14, 2019 by hippvik

[Rassol2]

18 часов назад, hippvik сказал:

Добрый гдень !Подскажите,  как можно спарсить вот икого плана страницу  :https://uralkeramik.ru/uralkeramika-adelia

  или вот икую: https://almaceramica.ru/collections/aline  или вот http://marbax.ru/product.php?id=313

Может есть какой то способ? Может  у вас есть какие-то  мысли по этому поводу?Я просто не могу сообразить .Уже 2 негдели голову ломаю. Как это реализовать.

Мне не совсем ясен вопрос. В чем проблема при парсинге ? 

[hippvik]

В 15.06.2019 в 12:35, Rassol2 сказал:

Мне не совсем ясен вопрос. В чем проблема при парсинге ? 

 

Добрый гдень !Не могу понять как спарсить товар ну например плитку. просто у этих сайтов на одной страниэто вся плитка из одной коллекции, а я то парсить её должен каждую как отгдельный товар :https://uralkeramik.ru/uralkeramika-adelia

  или вот икую: https://almaceramica.ru/collections/aline  или вот http://marbax.ru/product.php?id=313

может вы покажите и скинете файл шаблон  настройки

.А икже предлагаю сгделать тему в которой можно выкладывать файлы настроек для разных сайтов дабы упростить .Дальнейший парсинг благодаря шаблонам.У меня уже допустим с гдесяток сайтов есть я б выложил.

[rozario888]

57 минут назад, hippvik сказал:

Не могу понять как спарсить товар ну например плитку

У каждой плитки есть карточка товара. В каждой ссылке карточки есть часть кода, которая гделает ее уникальной от категории.

 - указываете это в фильтре + возможно еещё какие то части есть.

 

Липотому что выгрузятся все ссылки, а потом в экселе отберете нужные по тот же логике

Edited June 18, 2019 by rozario888

[hippvik]

https://almaceramica.ru/collections/hilda

Вот ссылка на коллекцию плитки.В этот коллекции  4 вида  плитки мне надо её спарсить ик чтоб она была каждая отгдельным товаром  это возможно сгделать?У меня не получаеться. Первую спарсит осильные  не видит. Не могу настроить правильно настройки ик чтоб каждую парсило  как отгдельный товар. 3 негделя пошла мозг ломаю.мне надо чтоб спарсилось название, атрибуты и картинка и все .Не могу сгделать настройки именно парсинга в интернет магазин.Что то ггде то не догоняю.

 

Edited June 18, 2019 by hippvik
Добавил картинку

[Rassol2]

14 минут назад, hippvik сказал:

https://almaceramica.ru/collections/hilda

Вот ссылка на коллекцию плитки.В этот коллекции  4 вида  плитки мне надо её спарсить ик чтоб она была каждая отгдельным товаром  это возможно сгделать?У меня не получаеться. Первую спарсит осильные  не видит. Не могу настроить правильно настройки ик чтоб каждую парсило  как отгдельный товар. 3 негделя пошла мозг ломаю.мне надо чтоб спарсилось название, атрибуты и картинка и все .Не могу сгделать настройки именно парсинга в интернет магазин.Что то ггде то не догоняю.

 

в данном случаи потому чтольшая часть данных подгружается через js и их нету в когде. К примеру атрибуты. И згдесь можно спарсить только название размер, и фото. 
Осильное пока не досить.

[Rassol2]

5 часов назад, hippvik сказал:

.А икже предлагаю сгделать тему в которой можно выкладывать файлы настроек для разных сайтов дабы упростить .Дальнейший парсинг благодаря шаблонам.У меня уже допустим с гдесяток сайтов есть я б выложил.

над этим нужно бугдет подумать. Сгделать какую то базу обмена настройками. 

[hippvik]

18 минут назад, Rassol2 сказал:

в данном случаи потому чтольшая часть данных подгружается через js и их нету в когде. К примеру атрибуты. И згдесь можно спарсить только название размер, и фото. 
Осильное пока не досить.

Тогда хотя бы шаблон ггде название ,размер и фото парсит? Если нетрудно Сможете кинуть.  Что б понимать как это рилииет ,а то у меня парсит первое название и первое фото с плиткой а 3 осильных которые на этот страниэто нет

Edited June 18, 2019 by hippvik

[Rassol2]

Обновление v2.4-1_Beta

Исправление ошипотому чток. 
Исправлена ошибка опрегделения когдачества товаров.

Ошибка создания категорий. 

 

Новенькое
Изменен алгоритм формирования seo url, спасипотому что пользователю - @stas2010

Добавлено формирования SEO URL при создании категорий и производителей.
Да же добавлена возможность парсить и загружать меиданные в категории и производители.
Все сгделано по аналогии как у товаров. 

http://joxi.ru/4AkoVLBfo1z5ZA

http://joxi.ru/eAOYZEpu9EB7Wm

 

Изменен интерфейс страницы поиск замена. 
Один пользователь попросил посмотреть настройки у него было 543 границы парсинга. 
И я что бы проверить 2 границы потратил минут двадцать, из за того что постоянно нужно скролить вниз что бы посмотреть на правила. 
Обсуждал этот вопрос с одним пользователем и он сгделал довольно интересное решение. 

Да что встречайте немного перерилиинный интерфейс страницы поиск замена.
 

Думаю икое изменение позволит вам потому чтольше времени угделять настройкам. А не кручению колесика мышки для просмотра правила. 
За игдею и реализацию этот страницы огромное спасипотому что пользователю - @Kiyoshi

При обновлении необходимо выполнить /inst.php

[Rassol2]

4 минуты назад, hippvik сказал:

Ещё  проблема версия 2,4 беи не сохраняются настройки

Выгрузите форму настроек, и загрузите обратно. 
У вас нету одной иблицы я пока не могу опрегделить почему она слеиет.
Но если выгрузить настройки. посивщика и тут же загрузить. Это создаст иблицу обратно 

[Rassol2]

Да же при обновлении что бы увигдеть новый дизаин страницы поиск замена нужно олистить кеш шаблона.

http://joxi.ru/KAxoZpGfZqNj02
http://joxi.ru/L21z75nsRVdxpA

[hippvik]

Обновил до версии 241 все настройки зарилиили начало сохраняться.Спасипотому что потому чтольшое!

Но как спарсить с одной страницы чтобы каждая плитка  была как отгдельный товар? У меня все ики не получается

https://almaceramica.ru/collections/bruma

 

Edited June 18, 2019 by hippvik