Prices web-crawler + DB (SQL) + Web UI

$3000-5000 USD

종료됨

게시됨

5년 이상 전

$3000-5000 USD

제출할때 지불됩니다

Цель: Сбор информации по производителям (отпускные цены) на их продукцию (применимо к различным отраслям промышленности), а также цен розничной торговли этими товарами в различных сетевых и специализированных магазинах Примеры сайтов (откуда планируется собрать цены): [login to view URL] , [login to view URL] , [login to view URL] (возможно понадобятся элементы OCR в этом случае) и т.п. Разработать веб-краулер (на базе Headless-Chrome?) для сбора цен. Собранные цены (и параметры продуктов) заносятся в БД. Нужно создать БД с гибкой архитектурой (для добавления новых категорий продуктов и интересующих параметров например: мясные продукты, говядина, замороженное, охлажденное, производитель-страна-город, дистрибьютор, торговая сеть, состав, упаковка и т.п.) Первоначально продукты питания. Позже будут добавлены другие товары - строительные и т.д. Выбрать БД (MySql/MariaDB, PostgreSQL и т.п.), ОС (скорее всего Linux внутри вм на хостинге DigitalOcean) Сделать веб UI (сайт - хостинг на том же DigitalOcean vm / nginx) для отображения цен (пример UI в личном сообщении) анализа (сравнения по разным параметрам) и фильтрации + возможно графическое отображение (диаграммы, графики). Гибкая поддержка разграничений доступа для разных категорий клиентов - кому-то доступ только молочные продукты, кому-то молочные+мясные и т.п., кому-то только для одного города, кому-то по всем городам-странам. Соответственно База (и UI для ее ведения) по клиентам - создание, удаление, назначение доступа и т.д. В будущем будет доп проект мобильных приложений (android/ios/ qt?) для сканирования цен прямо в магазинах и отправки их в БД товаров. Описание очень краткое , ТЗ составляется и будет обновляться. Все моменты уточнять в чате-сообщениях.

프로젝트 ID: 18024108

프로젝트 정보

20 제안서

원격근무 프로젝트

활동 중 5년 전

돈을 좀 벌 생각이십니까?

이메일 주소

프리랜서 입찰의 이점

예산 및 기간 설정

작업 결과에 대한 급여 수급

제안의 개요를 자세히 쓰세요

무료로 프로젝트에 신청하고 입찰할 수 있습니다

20 이 프로젝트에 프리랜서들의 평균 입찰은 $3,908 USD입니다.

@tangramua

Здравствуйте! Готов помочь Вам с проектом. Я- профессиональный разработчик и совладелец компании программистов, системных администраторов и веб-дизайнеров. Наша основная специализация: LAMP (Linux, Apache, MySQL, PHP), но также у нас есть опыт работі с Python, Node.js и .NET. У меня так же есть опыт работы с разными PHP фреймворками, например: Zend Framework, Symfony, Laravel, Yii, CodeIgniter, CakePHP а также различные решения с открытым исходным кодом, например платформа Magento Ecommerce, WordPress, Drupal и тд. Наша команда успешно закрыла более 100 проектов. Вы можете просмотреть отзывы наших клиентов здесь на фрилансе, если будет интересно. Жду Вашего сообщения в чате, дабы обсудить все детали и ТЗ!

$4,444 USD 30일에

4.7

(257 건의 리뷰)

8.7

@CrazyWebGuru

Привет, Как твои дела? Я прочитал ваше описание и понял, чего вы хотите. Я являюсь разработчиком полного стека, обладающим профессиональными навыками в PHP / MySQL / веб-гусеничном / обрыве. Я чувствую себя уверенно и доставляю вам идеальный результат. Я с нетерпением жду возможности обсудить детали работы и надеюсь работать вместе. С уважением, Хуяг

$4,000 USD 30일에

5.0

(61 건의 리뷰)

6.5

@bestit4u

Hi. I am very interested in your project, because I have much experience in such projects. I have good skills with the program language including C/C++, C#, java, php, asp.net, python, VB.NET. So I have expert and smart technic with web scraping (1000 over projects for scraping), automation and bot(500 over projects for automation and bot), selenium, mobile (android, ios native and others). Especially, I am an expert in betting project and gambling games and sites(bet365, bwin, pinnacle, betfair...) ,,, shopping auto buyer(adidas, footlocker, eastbay, supreme and etc) So, I can solve the captcha automatically. Please contact me, then we can discuss about the details and the price. And I am free in recent days, so I can do my best for your project. Thanks.

$4,444 USD 30일에

5.0

(35 건의 리뷰)

6.1

@polarjin2017

Hello? How are you? I have good skills in web crawler So I can complete your job in time. Hope to work with you. Thank you.

$3,000 USD 3일에

4.9

(67 건의 리뷰)

6.3

@CakephpJobs1

Hi, I am expert level web scrapping tool I can provide you web scrapping for any kind of web application. I have exp in scrapping data from public, private content which need login, session base content, cookie managers, single page app like react/angular Also i am full stack developer so I can provide you very interactive and rich featured web interface where you can check data daily, filter as well as export to you local for showcase or validation. Please ping me in case you find above helpful for you. Thanks

$4,444 USD 30일에

5.0

(48 건의 리뷰)

6.1

@asin1987

Dear Employer, I understand what you need though I still need some clarififxation. Please message me so that we can discuss once. You may check my reviews once!! Thanks and Regards, ash

$3,000 USD 30일에

4.9

(17 건의 리뷰)

5.8

@Alexod

I can do this ! But we need to discuss about project details to make sure we understand exactly what you expect. I'm waiting for your response...

$5,555 USD 60일에

4.9

(780 건의 리뷰)

5.2

@superbpartner

hello,dear. I have read all your requirements for 'Prices web-crawler + DB (SQL) + Web UI' and I fully understood it. I am confident and I am sure that I am able to finish this project. Please come in contact with me, so that we can discuss any details via chat:) Skills: HTML, Linux, SQL, Website Design

$4,000 USD 20일에

5.0

(8 건의 리뷰)

4.9

@errfrom

Здравствуйте! Готов взяться за проект. Если какие-нибудь ограничения по ЯП? Хотелось бы разрабатывать на Haskell.

$5,000 USD 90일에

5.0

(9 건의 리뷰)

4.0

@tootac

Вам нужна компонентная система. С одной стороны должен работать краулер, на постоянно основе обходить все магазины и обновалять данные базы. Возможно распозновать текста. С другой стороны должна быть система управления всеми этими данными. Конечно использовать часто меняющиесяс каталоги это немного проблематично. Я уже писала один раз похожую систему для сайта похожего на авито и могу сказать что серебрянной пули для эффективного решения это задачи нет. Приходится идти на компромисы. За счет несколько уровней кешенирований можно сильно ускорить работу такой системы. С линуксом пробелем нет - это моя основаная рабочая среда. Для баз данных конечно лучше подойдет postgress, но вполне возможно использовать комбинации c монго и чтонибудь из message queue, в зависимости от задач. В данном случае хорошо подойтет использования через прототипов. Сделать наброски, быстрая грязная подготовка и если все в нравится как работает и ощющается, то рефакторинг, тестирование и кгуг по новой. Краулер и база данных думаю в данном случае будет слабым звеном. Если с базой еще и можно чтото придумать, то краулер будет требовать поддержки в случае изменения данных на сторонних ресурсах. ТЗ в данном случае сильно бы помог.

$5,000 USD 30일에

5.0

(2 건의 리뷰)

4.1

@drishti2004

Hello sir/Mam, I have 7 years experience in Woo commerce-wordpress and PHP Magento E-commerce development and designing so i can do your work on very good manner you provide me your work i will do better.

$3,000 USD 30일에

4.8

(14 건의 리뷰)

3.5

@DmitryyOleynyk

Добрый день, готов взяться за написание такого сервиса, ранее приходилось работать с подобными продуктами. Предлагаю обсудить детали в чате.

$3,000 USD 30일에

4.9

(4 건의 리뷰)

3.0

@haykghukasyan

Здравствуйте, веб кравлер предлагаю написать или на php (лучший вариант) или на java, вышлите пожалуйста Т3 имеется большой опыт в разработке сайтов игровых и с очень высокой нагрузкой, опыт разработки более 12 лет, рад был бы сотрудничеству.

$3,500 USD 30일에

5.0

(1 건의 리뷰)

1.5

@vandanav2488

Hi, We have similar experience in this technology. we love to complete this task on schedule and on time. please share me requirement specifications details. Thank you

$4,444 USD 60일에

5.0

(2 건의 리뷰)

0.5

@utceji

Добрый день, готов исполнит ваш заказ. НАпишем скрипт для сбора инфы который будет добавлять все в базу. Остальные детали готов обсудить в лс, сделаю все качественно и в сроки!

$4,444 USD 10일에