Выгрузка и загрузка изображений в УТ 10.3

28.04.22

Интеграция - Файловый обмен (TXT, XML, DBF), FTP

Выгрузка изображений номенклатуры из УТ 10.3 для обработки и обратная загрузка обработанных. Тестировалась на 10.3.30.1. Платформа 8.3.19.1467.

Скачать файлы

Наименование Файл Версия Размер
Выгрузка и загрузка изображений в УТ 10.3:
.epf 8,97Kb
13
.epf 8,97Kb 13 Скачать

Возникла нужда сжать изображения, прикреплённые к номенклатуре. Так как пользователи при загрузке не церемонились и грузили в базу несжатый TIFF, по 10-37 Мбайт н картинку. Понятно, что база начала расти, и не только за счёт полезных данных.

Пробовал сделать сжатие с использованием встроенного механизма в 1С, который появился с платформы 8.3.14, но, оказалось, что он не способен работать с такими большими изображениями. Поэтому я решил использовать внешнюю программу XnView, с её пакетной обработкой файлов.

То есть выгрузка картинок во внешнюю папку. Обработка их (Обрезка и сжатие в jpeg). И загрузка обратно. 

Сложность в том, что после выгрузки изображений - трудно определить, какое изображение к какой номенклатуре относится. Да и у одной номенклатуры может быть подгружено несколько изображений. Здесь я использовал функцию хеширования.

При создании имени файла оно состояло из двух частей: код элемента справочника номенклатуры и хеш изображения, которое выгружается. Главное, чтобы не было в одной номенклатуре двух абсолютно одинаковых изображений.)))

В процессе обработки важно сохранить названия файлов.

При загрузке делаем обратное действие:

Из имени файла берём код номенклатуры, к которой относится изображение. Потом по хешу, который в имени файла ищем изображение и меняем его.

Есть нюанс. При количестве позиций номенклатуры более 12000 возможен произвольное закрытие 1С. Причину так и не понял, к сожалению. Но, если запустить обработку заново, то она продолжит создание файлов. Но, к сожалению, всю базу будет обрабатывать заново. Если файл есть в папке выгрузки, то обработка его не будет создавать заново. Если файла нет, то создаст.

Таким образом всё действо делается в три этапа:

  1. В поле "Выгрузка" выбираем папку, куда будут выгружены изображения.
  2. Обрабатываем изображения из этой папки с помощью XnView. Выбираем пакетную обработку, и преобразование файлов в формат jpeg. По желанию указываем изменение размера изображения, до желаемого и поставим галочку "Только уменьшение", чтобы файлы, которые меньше размером не были увеличены. Указываем отдельную папку для сохранения результата.
  3. В поле "Загрузка" указываем папку с результатами обработки XnView. Жмём кнопку "Загрузить".

В идеале - всё было бы проверить на тестовой базе. Чтобы не сломать основную, если вдруг что-то пойдёт не так. )))

А только потом делать на рабочей.

Весь процесс на 14000 картинок с выгрузкой-обработкой-загрузкой занимает ориентировочно 3 часа.

Тестировалась на 10.3.30.1. Платформа 8.3.19.1467.

обработка изображений

См. также

SALE! 15%

[ED3] Обмен для ERP 2.5, КА 2.5, УТ 11.5 БП 3.0, Розница, УНФ и других с EnterpriseData (универсальный формат обмена), правила обмена

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 1С:Розница 3.0 Россия Платные (руб)

Правила в универсальном формате обмена для ERP 2.5, КА 2.5, УТ 11.5, БП 3.0, Розница, УНФ, для последних версий конфигураций. Ссылки на другие конфигурации в описании публикации. Правила совместимы со всеми другими версиями конфигураций новыми и старыми, поддерживающими обмен в формате EnterpriseData. Не требуется синхронного обновления правил после обновления другой конфигурации, участвующей в обмене. Типовой обмен через планы обмена кнопкой Синхронизация вручную или автоматически по расписанию, или вручную обработкой.

25080 22572 руб.

12.06.2017    134970    721    291    

388

SALE! 20%

Перенос данных из ERP 2 / КА 2 / УТ 11 в БП 3.0. Переносятся документы, начальные остатки и справочники

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х Россия Платные (руб)

Перенос данных из ERP в БП 3 | из КА 2 в БП 3 | из УТ 11 в БП 3 | из ЕРП в БП 3 | В продаже с 2019г. | Воспользовались более 176 предприятий! | Сэкономьте время - используйте готовое решение для перехода! | Перенос разработан в формате КД 2 (правила конвертации данных) | Переносятся все возможные виды документов, начальных остатков и нормативно-справочная информация| Можно опционально выгружать каждую пару "номенклатура+характеристика" как отдельную номенклатуру | Есть выгрузка настроек счетов учета и зарплатных данных из ERP / КА 2 | Можно проверить на вашем сервере перед покупкой, обращайтесь!

34650 27720 руб.

15.04.2019    68442    180    138    

111

SALE! 20%

Перенос данных из ERP 2 / КА 2 в ЗУП 3. Переносятся остатки, документы и справочники

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 1С:ERP Управление предприятием 2 1С:Комплексная автоматизация 2.х 1С:Зарплата и Управление Персоналом 3.x Россия Бухгалтерский учет Управленческий учет Платные (руб)

Перенос данных из ERP в ЗУП 3 | из КА 2 в ЗУП | Воспользовались более 79 предприятий! | Предлагаем приобрести готовые правила конвертации данных (КД 2) для переноса остатков, документов с движениями и справочной информации 3 | В продаже с 2020г. | Оперативно обновляем правила до актуальных релизов 1С | Есть перенос начальной задолженности по зарплате и начальной штатной расстановки на выбранную дату | Обороты за прошлые годы (данные для расчета среднего) переносятся свернуто в документ "Перенос данных" | Есть фильтр по организациям | Документы за текущий период переносятся сразу с движениями, поэтому не потребуется делать перерасчеты | Перенос можно проверить перед покупкой, обращайтесь!

43450 34760 руб.

03.12.2020    34179    80    58    

78

SALE! 10%

Перенос данных из УТ 10.3 в УТ 11.5. Переносятся документы (обороты за период), справочная информация и остатки

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 Оперативный учет 1С:Управление торговлей 10 1С:Управление торговлей 11 Россия Управленческий учет Платные (руб)

Перенос данных из 1С:Управление торговлей 10.3 в 1С:Управление торговлей 11.5 с помощью правил обмена. Переносятся остатки, документы (обороты за период), справочная информация. Правила проверены на конфигурациях УТ 10.3 (10.3.87.x) и УТ 11.5 (11.5.16.x).

28000 25200 руб.

23.07.2020    46319    196    64    

158

Перенос данных из Парус 10 в ЗГУ ред.3

Внешние источники данных Кадровый учет Файловый обмен (TXT, XML, DBF), FTP Обмен между базами 1C Платформа 1С v8.3 Сложные периодические расчеты 1С:Зарплата и кадры государственного учреждения 3 Государственные, бюджетные структуры Россия Бухгалтерский учет Бюджетный учет Платные (руб)

Обработка позволяет перенести кадровую информацию и данные по заработной плате, фактических удержаниях, НДФЛ, вычетах, страховых взносах из базы Парус 10 учреждений в конфигурацию 1С:Зарплата и кадры государственного учреждения ред. 3 (ЗГУ) и начать с ней работать с любого месяца года.

60000 руб.

05.10.2022    9217    9    8    

10

SALE! 10%

Перенос данных из УПП 1.3 в БП 3.0. Переносятся документы (обороты за период), справочная информация и остатки

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 1С:Управление производственным предприятием 1С:Бухгалтерия 3.0 Россия Бухгалтерский учет Управленческий учет Платные (руб)

Перенос данных из 1С:Управление производственным предприятием 1.3 в 1С:Бухгалтерия предприятия 3.0 с помощью правил обмена. Переносятся остатки, документы (обороты за период), справочная информация. Правила проверены на конфигурациях УПП 1.3 (1.3.223.x) и БП 3.0 (3.0.149.x). Правила подходят для версии ПРОФ и КОРП.

28000 25200 руб.

15.12.2021    20261    132    38    

90

SALE! 10%

Перенос данных из БП 3.0 в УНФ 3.0 / УНФ 1.6. Переносятся остатки, документы и справочная информация

Обмен между базами 1C Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 1С:Управление нашей фирмой 1.6 1С:Бухгалтерия 3.0 1С:Управление нашей фирмой 3.0 Россия Платные (руб)

В продаже с 2018г. | Воспользовались более 41 предприятия! | Правила конвертации (КД 2) для переноса данных из БП 3 в УНФ | Переносятся все виды документов, начальные остатки и вся возможная справочная информация | Есть фильтр по организациям | Оперативно обновляем на новые релизы | Оказываем техподдержку | В комплект файлов входит инструкция, авторская версия обработки "Универсальный обмен...", актуальные правила переноса данных и архив старых версий переноса | Учет в БП 3 должен быть корректным, некорректные данные не переносятся | Можно бесплатно проверить на вашем сервере до покупки!

50722 45650 руб.

10.07.2018    67456    41    122    

46

Загрузка номенклатуры c картинками (несколько потоков одновременно) и сопутствующими данными в базу и любые документы из yml, xls, xlsx, xlsm, ods, ots, csv для УТ 10.3, УТ 11 (все), БП 3, КА 2, ERP 2, УНФ 1.6/3.0, Розница 2

Загрузка и выгрузка в Excel Логистика, склад и ТМЦ Ценообразование, анализ цен Файловый обмен (TXT, XML, DBF), FTP Платформа 1С v8.3 1С:Бухгалтерия 2.0 1С:Управление торговлей 10 1С:Розница 2 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Бухгалтерия 3.0 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 Платные (руб)

Эволюция не стоит на месте - новая удобная версия функциональной обработки для Вашего бизнеса! Что же Вы получаете? Удобный и интуитивно понятный интерфейс с 3-мя этапами работы. 2 режима - автоматический и ручной. Чтение XLSX, XLSM, CSV, XML/YML форматов без офиса, на любом сервере! Визуальное связывание колонок файла и реквизитов простым перетаскиванием колонок. Создание или обновление номенклатуры с иерархией, характеристик, доп. реквизитов, упаковок, загрузка практически неограниченного количества картинок на одну номенклатуру (с возможностью загрузки в несколько потоков одновременно), с хранением в томах или в базе. Загрузка номенклатуры поставщиков или поиск по их данным номенклатуры. Загрузка доп. реквизитов в характеристики. Загрузка штрихкодов с генерацией новых. Создание элементов справочников и ПВХ "на лету" для выбранных реквизитов. (Обновление от 11.12.2023, версия 9.5 - 9.9)

13200 руб.

20.11.2015    150745    365    375    

501
Вознаграждение за ответ
Показать полностью
Комментарии
В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
1. RustIG 1382 28.04.22 08:44 Сейчас в теме
(0) Спасибо за информацию! Видно, что представлен большой опыт работы по этой задаче.
2. user1777982 29.04.22 12:21 Сейчас в теме
Давно искал подобную обработку. Очень надеюсь, что без проблем встанет на мою конфигурацию. Благодарю за проделанную работу!
3. user1777982 29.04.22 12:22 Сейчас в теме
Давно искал подобную обработку. Спасибо за проделанную работу!
4. vld1973 85 29.04.22 13:39 Сейчас в теме
Спасибо, поддержу начинание
5. rbsoft 208 29.04.22 14:34 Сейчас в теме
Сделано хорошо. Вы использовали функцию хеширования для идентификации изображения.
Для того, чтобы записать потом обратно, приходится перебирать все бинарные объекты и делать расчет хэша. Это слишком ресурсоемкая операция.
Но ведь изображения хранятся в справочнике ХранилищеДополнительнойИнформации.
Правда у этого справочника нулевая длина кода.
Но ведь есть у элемента любого справочника УникальныйИдентификатор().

Лучше GUID элемента справочника использовать для имени выгружаемой картинки, добавив только правильное расширение файла картинки.
Обратно, соответственно из имени файла в виде GUID делаем ссылку на элемент справочника, из ссылки ПолучитьОбъект() и далее обновляем хранилище картинки.
Работать будет намного быстрее!
6. sifftsov 4 29.04.22 15:39 Сейчас в теме +1 $m
(5) Возможно и быстрее. Но, когда я выгружал базу с большими файлами изображений, у меня происходят вылеты 1С. Есть подозрение, что программа просто "захлёбывается" в количестве записей. Не успевая записать одно изображение, ей уже приходит команда записать другое и т.д. Так что я бы поставил даже принудительную паузу, миллисекунд на 100-150 если размер записываемого файла больше, скажем, 5-7 МБайт, чтобы 1С успевала дописать файл, прежде чем писать следующий. Это конечно, увеличит время выгрузки изображений, но, должно повысить стабильность. Когда я делаю контрольную выгрузку той-же базы в 14000 картинок, но уже со сжатыми изображениями, вылетов нет.
Так что ускорение тут вряд-ли целесообразно. Всё ограничивается скоростью дисковой системы, и особенностями работы 1С с файлами.
7. rbsoft 208 29.04.22 19:00 Сейчас в теме
Я применил вашу методику по обработке изображений, но за имя файла взял идентификатор элемента справочника с допинформацией.
Работает быстро и железобетонно.
И не важно, одинаковые картинки в списке или разные. Обратная загрузка тоже моментальная, потому что долгий поиск по вновь вычисляемому хэшу не делается.
Возможно 1с вешается именно при расчете хэша. Интересный конечно алгоритм, но в данном случае можно без него обойтись. Попробуйте применить и сравнить скорость.
8. sobeyko2008 17 07.09.22 08:59 Сейчас в теме
Отличная обработка. Давно искал. Жалко что нет отбора и возможности выгружать номенклатуру по группам. Если цена доработки адекватная и скорость исполнения быстрая, готов заказать доработку!
9. sobeyko2008 17 07.09.22 12:59 Сейчас в теме
Оставьте свое сообщение