1001 Freelance Projects -- Нужно снизить нагрузку на БД парсеров на Python

Свежие проекты с фриланс-бирж

Сегодня: 22-Dec-2024 21:12 GMT

Подробный просмотр проекта (вы будете перенаправлены на сторонний сайт)
Название проекта:	Нужно снизить нагрузку на БД парсеров на Python
Кто разместил:	Внешний проект с free-lance.ru
Открыт:	21-Sep-2024 12:16 GMT
Описание:	Парсеры на Python с использованием Scrapy для сбора смс-сообщений с различных источников и пересылка их по API к нам на сайт. На текущий момент своими силами перевели работу с сообщениями (смс) на redis, но после этого начались проблемы с соединениями. Нужно изучить логи, выявить ошибки и устранить их. Рекомендация, попробовать использовать persistent коннекты. Основная цель снизить нагрузку на БД postgres, посредством перехода на Redis. В итоге не должно отличаться время смс (у нас и на источники откуда парсим) + не должно быть дублей смс. Логи по ссылке https://drive.google.com/file/d/1aAT-NJ6RH7YmucmzJB1gy5J8Dib6ZuVk/view?usp=sharing
Project ID:	4723990
Категория проекта:	Программирование, Парсинг данных
Бюджет проекта:	5555 руб, для всех

Подробный просмотр проекта (вы будете перенаправлены на сторонний сайт)

Проект	Открыт
BAS (Browser Automation Studio) Категория: Программирование и IT	05-Dec-2024 23:02 GMT
Крауд-посилання - 500UAH Категория: Покупка ссылок	05-Dec-2024 23:01 GMT
Моделирование GPSS WORLD. Категория: Программирование, Прототипирование Бюджет: 3000 руб	05-Dec-2024 22:51 GMT
Нужно создавать коротенькие видео. Категория: Видео Бюджет: 1000 руб 2024-12-06	05-Dec-2024 22:43 GMT
Профессиональная 2D или же 3D работа Категория: Арт / Иллюстрации / Анимация	05-Dec-2024 22:36 GMT
Выгрузка + загрузка в эксель контрагентов в BAS Малый бизнес PROF (1.6.20.2) - 8000UAH Категория: Автоматизация управления предприятием, Обработка данных	05-Dec-2024 22:35 GMT
Разработка сайта под ключ. Категория: Веб-программирование	05-Dec-2024 22:28 GMT
Нужно почистить картинку от пятен Категория: Рисунки и иллюстрации Бюджет: 1500 ₽/час	05-Dec-2024 22:24 GMT
Реклама Facebook/Instagram Категория: Реклама и Маркетинг, Instagram Бюджет: 20000 руб	05-Dec-2024 22:22 GMT
(Weblium) Інтеграція з WayforPay + Налаштування FB Pixel(ціль-оплата) Категория: CMS, HTML, и CSS верстка	05-Dec-2024 22:20 GMT
Приложение на flutter	05-Dec-2024 22:17 GMT
Сделать обложку для ютуба Категория: Графический дизайн Бюджет: 1000 руб 2024-12-06	05-Dec-2024 22:16 GMT
Доопрацювання сайту на Opencart - 20000UAH Категория: Веб-дизайн, Создание сайта под ключ	05-Dec-2024 22:15 GMT
Корректировка кода PHP Категория: Программирование и IT Бюджет: 15000 руб 2024-12-06	05-Dec-2024 22:05 GMT
Создание сайта «под ключ» на Wordpress для онлайн школы Категория: HTML, и CSS верстка, Веб-программирование	05-Dec-2024 21:58 GMT

Все проекты

Проекты по навыкам ...
Проекты 'android' Проекты 'ajax' Проекты 'asp' Проекты 'aspnet' Проекты 'cms' Проекты 'cpp' Проекты 'csharp' Проекты 'css' Проекты 'delphi' Проекты 'design' Проекты 'drupal' Проекты 'excel'	Проекты 'facebook' Проекты 'flash' Проекты 'html' Проекты 'java' Проекты 'javascript' Проекты 'joomla' Проекты 'iphone' Проекты 'mysql' Проекты 'photoshop' Проекты 'php' Проекты 'python' Проекты 'ruby' Проекты 'seo'	Проекты 'sql' Проекты 'sysadm' Проекты 'translate' Проекты 'typing' Проекты 'twitter' Проекты 'vbnet' Проекты 'xml' Проекты 'wordpress' Проекты 'writing' Проекты 'texts'
Читать RSS-ленты ... Новое!
Проекты 'android' Проекты 'ajax' Проекты 'asp' Проекты 'aspnet' Проекты 'cms' Проекты 'cpp' Проекты 'csharp' Проекты 'css' Проекты 'delphi' Проекты 'design' Проекты 'drupal' Проекты 'excel'	Проекты 'facebook' Проекты 'flash' Проекты 'html' Проекты 'java' Проекты 'javascript' Проекты 'joomla' Проекты 'iphone' Проекты 'mysql' Проекты 'photoshop' Проекты 'php' Проекты 'python' Проекты 'ruby' Проекты 'seo'	Проекты 'sql' Проекты 'sysadm' Проекты 'translate' Проекты 'typing' Проекты 'twitter' Проекты 'vbnet' Проекты 'xml' Проекты 'wordpress' Проекты 'writing' Проекты 'texts'

Новое!
Projects in English	Длинный URL: www.1001freelanceprojects.ru	Мобильная версия: m.1001fp.ru