Автоматическая загрузка файлов (например, прайс-листов) из электронной почты, FTP, HTTP, их обработка и выгрузка на FTP (на сайт) и для других целей

По запросу покупателей в программу бесплатно добавляю новый функционал! Например, возможность выгрузки на сайт добавлена по просьбе пользователей программы. Также Вы всегда можете рассчитывать на помощь в настройке, в исправлении ошибок. Пишите свои задачи и вопросы. Можем сначала добавить в программу новые возможности и только после этого Вы ее приобретете. 

Программа собирает с определенной периодичностью прайс-листы поставщиков из различных источников. Если это электронная почта, то анализируется адрес отправителя и срабатывает настроенное для данного отправителя правило обработки. Файл с прайс-листом ищется по частичному совпадению имени, в том числе внутри архивов. После нахождения файл переименовывается, при необходимости меняется его формат и сохраняется в каталог текущего поставщика, перезаписывая старую версию прайс-листа. Для каждого поставщика указывается дата последнего успешного обновления прайс-листа.

Для ftp-серверов необходимо указать строку подключения сразу с именем пользователя и паролем. Указать также часть имени файла прайс-листа для его поиска и правило, куда сохранять, какое имя файла установить и нужно ли изменять формат.

Аналогично работает для http-ссылок.

Эта программа была написана в 2012 году для автоматизации деятельности компании, торгующей автозапчастями. У компании было более ста поставщиков, и каждый день приходилось руками загружать 50-100 файлов. До внедрения этой программы одному сотруднику приходилось с утра до вечера копировать прайс-листы из источников, переименовывать, складывать в каталог. После обновления файлов запускается программа "Автопрайс" (ее новое название - Веб АвтоРесурс), которая обновляет прайс-листы по поставщикам на сайте компании.

Однако применение программы может не ограничиваться компаниями по торговле автозапчастями. Она будет полезна в любом случае, если необходимо собирать обновления файлов из различных источников и размещать их в одном каталоге.

Программа написана на языке C#, для ее работы необходима установленная библиотека .NET Framework 4.5. Предлагается версия или без исходного кода или с исходным кодом.

При возникновении вопросов по настройке или работе с программой, все консультирую, объясняю. Текстом через сообщения или по телефону.

Скачивание файлов по HTTP-ссылкам с авторизацией

В версии 3 в программу добавлена возможность скачивать файлы по ссылкам HTTP на сайтах, где необходимо проходить авторизацию.

 Записано демонстрационное видео по скачиванию файлов HTTP:

Выгрузка файлов на сайт (на FTP)

В одной из последних версий в программу добавлена вкладка выгрузки на сайт. От сайта нужен FTP-доступ с возможностью записи.

Настройка колонок таблицы выгрузки следующая:

Особенности работы с программой

1) Приложение ClickOnce по технологии Microsoft устанавливается в локальную рабочую папку пользователя. Если Вам понадобится сделать архивную копию программы, то зайдите в папку AppData своего пользователя (путь: C:\Users\<имя_пользователя> и зайпустите поиск по слову "partt".

В моем случае каталог установки выглядит так: C:\Users\sorokin\AppData\Local\Apps\2.0\342WM1TZ.Y2H\9DLEL1MX.YNR\part..tion_0000000000000000_0002.0002_a3946bd2b2a61930

Соответственно ,в этом каталоге exe-файл программы, все dll, все файлы настроек.

3) При обработке электронной почты программа получает письма по номерам в ящике. По порядку. Однако эта нумерация не совпадает с сортировкой по дате. Таким образом, программе приходится перебирать все письма в почтовом ящике. Поэтому рекомендуется держать в ящике небольшое количество писем, до 200. Для этой цели можно создать отдельный ящик и настроить на него автопересылку из основного. И уже этот отдельный ящик настроить в программе сбора файлов.

4) Программа устанавливается на компьютер с ОС Windows. Подходит версия начиная с версии XP и далее все более новые. На компьютере обязательно должна быть установлена Microsoft Office, в частности компонента Excel. Минимальная подходящая версия - Ms Office 2007.

5) Не со всех сайтов получается скачивать прайс-листы, если ссылки на прайс-листы доступны только в личном кабинете. Начиная с апреля 2016 года программа умеет скачивать прайс-листы с сайта exist.ru.

Удаление промежуточных файлов и обработанных писем в почтовом ящике

Начиная с конца марта 2017 года в программу добавлена возможность удаления промежуточных файлов и обработанных электронных писем.

Промежуточными файлами считаются скачанные из электронной почты, по HTTP или FTP-ссылки файлы, которые не являются конечными файлами. То есть если файл был скачан, а потом переименован, то первоначальный файл считается промежуточным. Также если был скачан архив и сам файл искался среди его вложений, этот архив также считается промежуточным файлов.

Настройка удаления промежуточных файлов находится на вкладке Общие настройки. Она распространяется на все виды скачиваемых данных.

Кроме того добавлена возможность в случае успешной загрузки нового файла по одному из правил обработки электронной почты выполнить удаление письма. То есть пришло письмо с новым прайс-листом. В программе для данного адресата включено удаление обработанных писем. После скачивания файла из письма, его обработки, извлечения из архива и переименования (возможно, с изменением формата файла) это входящее письмо будет удалено из почтового ящика.

Очень удобно, что возможность удаления настраивается. То есть ее можно включить после полной настройки и проверки работы почты и сбора прайс-листов из почты.

Техподдержка
 

Причины купить

1. Бесплатные обновления программы в течение одного года после покупки.

2. Консультации по настройке и установке в течение трех месяцев после покупки.

3. Гарантия исправления ошибок в течение 48 часов после их обнаружения.

Достоинства

Программа разработана в 2012 году, за это время внедрена в работе более десяти компаний, торгующих автозапчастями, находящихся в различных городах СНГ.

Сравнение версий

• 10.08.2020 - добавлена возможность подключения к почтовым серверам с SSL. Также добавлена опция поиска ссылок на скачивание файлов в теле письма.
• 22.10.2018 - добавлена возможность скачивания по http с авторизацией с нескольких новых сайтов. Добавлен контроль корректности адреса подключения по FTP. Добавлена мультиязычность в программе, в данный момент есть версия на русском языке и английском.
• 26.03.2018 - исправлены обнаруженные ошибки.
• 19.12.2017 - добавлена возможность скачивания архивов, имена файлов с которыми приходят без расширения. В этом случае по умолчанию используется формат архива ZIP.
• 25.05.2017 - добавлена возможность изменения формата файлов при сохрании в формат csv. Ранее только в txt можно было менять формат сохраняемых файлов.
• 31.03.2017 - в программу добавлена возможность удаления промежуточных файлов, а также теперь по каждому правилу скачивания писем из электронной почты после успешной загрузки нового файла выполнить удаление обработанного письма. Письма в папке Удаленные в IMAP-ящиках игнорируются!
• 22.02.2017 - по обращению пользователя Евгений (leopart) в программу добавлена возможность скачивать с почты несколько файлов от одного отправителя даже с одинаковой темой письма.
• 16.12.2016 - исправлена проблема зависания при длительной работе (несколько суток). Реализована возможность отбора по теме письма, не только по отправителю (поэтому можно несколько правил скачивания писем теперь настраивать). Добавлена настройка автовключения таймера при старте программы, благодаря этому она может продолжить свою работу после перезагрузки компьютера.
• 18.09.2016 - в программе исправлена ошибка вылетания при добавлении новых строк (ошибка происходила в редких случаях непредсказуемо), добавлена возможность настройки отдельных таймеров для всех проверок (FTP, HTTP, E-MAIL).
• 05.09.2016 - в программе реализовано сворачивание в трей.
• 23.05.2016 - обновлен архив с исходными кодами программы, учтены исправленные ранее ошибки.
• 07.04.2016 - исправлена ошибка, когда файлы, скачиваемые по HTTP, конвертировались раньше, чем докачались.
• 01.04.2016 - реализовано скачивание прайс-листов по http-ссылке с сайта exist.ru. Необходимо помнить, что в день дается ограниченное количество раз, когда можно скачать прайс-лист (около 20-30). 
• 09.03.2016 - в программу добавлена возможность скачивать файлы с ftp-серверов не только по прямой ссылке к файлу, но и с поиском в каталоге. Для такой настройки нужно в поле Source указать путь к директории на ftp-сервере, а в поле OldNamee - часть имени файла для поиска в этой директории. При пустом значении NewName файл сохранится с тем же именем, что хранился на ftp-сервере.
• 04.03.2016 - в програму добавлена возможность сохранять настройки в произвольный каталог (настройки содержатся в четырех xml-файлах. Также добавлена команда открытия каталога установки программы (это необходимо, т.к. ClickOnce-приложения Windows устанавливаются в каталоге Local пользователя, а не в каталог Program files, как все обычные приложения.
• 23.02.2016 - исправлена ошибка формата сохраняемых вложений писем электронной почты.
• 20.02.2016 - протокол работы программы изменен на IMAP. Этот протокол поддерживают все современные веб-серверы, в том числе gmail, yandex. mail.ru. Добавлен поиск по теме письма как дополнительный фильтр почты. Добавлен поиск внутри каждого архива (ранее искало только если имя архива содержало в себе OldName). Значительно ускорена работа программы. Теперь она не перебирает все письма, хранящиеся в ящике. В то же время количество обрабатываемых писем в ящике за один момент времени уменьшено до 200. Поэтому рекомендуется запускать программу чаще или включить таймер обновления.
• 02.12.2015 - в программу добавлена возможность выгружать файлы с локального компьютера на FTP-сервер (на свой сайт).
• 17.11.2015 - исправлена ошибка, когда на некоторых почтовых серверах не обрабатывались полностью письма из входящих.
• 23.10.2015 - исправлена ошибка скачивания файлов из почты. Добавлен параметр - дата начала проверки почты. Все письма ранее этой даты будут пропущены. Все письма после этой даты каждый раз будут анализироваться, кроме случаев, когда дата письма меньше или равна дате последнего обновления конкретной настройки.
• 21.10.2015 -  к публикации добавлена инструкция по работе с программой.
• 29.09.2015 - выложена версия 3 с поддержкой скачивания файлов по HTTP с тех сайтов, где необходимо проходить авторизацию. Прикреплено демонстрационное видео.