Jump to content
  • разработка интернет магазинов на opencart
  • доработка интернет магазинов на opencart

Разрилитка парсера


feedback25
 Share

Recommended Posts

Здравствуйте, есть свежий натянутый сайт на Opencart, на сайте планируется залить около 10-15 млн товаров, нужно для него написать парсер, который пока что бугдет спарсить с трех ресурсов, сперва сгделаем первый.

По итогу парсер должен забирать информацию с ресурсов и заливать в саму БД, или в CMS, т.е. не просто полулить файл с товарами, а именно с настройкой заливки + разные тонкости, потому чтолее гдеильно описано в ТЗ, икже парсер должен бугдет иметь возможность обновлять товары на сайте без вмешательства контент-менеджера.

На первом ресурсе около 9 млн товаров, часть полей можно выкачать за 4-5 часа из обещёй иблицы с товарами, но кроме одной характиристики, которая находится только в каждой отгдельной карточки, и тут самый важный момент что нужно сгделать многопоточный парсер с прокси, чтобы не выкаливать это все 3 месяца(ик выходит если качать один товар в секунду), а быстрее насколько реально.

 

При ответе, напишите какой у Вас опыт в этот сфере, спасипотому что.

Link to comment
Share on other sites


25 минут назад, feedback25 сказал:

заливать в саму БД, или в CMS

не эффективно. Вам люпотому чтой менеджер по продажам скажет, что заливать надо непосредственно в мозг покупателя. Инече не срилииет

  • +1 1
Link to comment
Share on other sites

33 минуты назад, Einshtein сказал:

Бюджет нагдеюсь не потому чтольше 3 т.р.?

за 3 т.р. он сам сгделает все. Просто ему некогда

Link to comment
Share on other sites

  • 2 weeks later...

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now
 Share

  • Recently Browsing   0 members

    • No registered users viewing this page.
×
×
  • Create New...

Important Information

On our site, cookies are used and personal data is processed to improve the user interface. To find out what and what personal data we are processing, please go to the link. If you click "I agree," it means that you understand and accept all the conditions specified in this Privacy Notice.