Парсер Яндекс Маркета

Внешняя обработка "Загрузка картинок и описаний" предназначена для более быстрого наполнения базы товаров конфигурации 1С: Управление торговлей, редакции 10.3, 11.1. В данной редакции обработки пользователь может самостоятельно производить корректировку основных данных, картинок, свойств и значений товаров.

Арт.: 335939

ОсновноеОкно
Безымянный.png
ОсновноеОкно
Безымянный.png

24000 руб.

27600 руб.

27600 руб.

27600 руб.

5000 руб.

Варианты алгоритмов поиска

Поиск по сайтам - используется несколько алгоритмов поиска данных с известных сайтов, описание представлено ниже

Сайты поиска

Яндекс Маркет API

Используется промежуточный ПЛАТНЫЙ сервер apisystem (цены)

Используется промежуточный ПЛАТНЫЙ сервер ymscanner (цены)

Товары Майл API - для работы с этим сайтом требуется ключ авторизации, который можно получить, оформив заявку.

Особенности

Поля данных доступны для редактирования, что в свою очередь позволяет непосредственно самому пользователю как создавать новые описания, так и производить редактирование значений, загруженных с сайта.

Для удобства восприятия поле "Категория" изменяет цвет текста, в зависимости от того, существует значение с таким наименованием в базе или нет. (Существует - зеленый, отсутсвует - серый).

В списке "Свойств и значений" те свойства, наименования которых уже есть в базе, также подкрашиваются зеленым цветом.

Если "Категория" подсвечена зеленым, то есть возможность загрузить свойства данной категории для более быстрого наполнения данных. (Кнопка над списком свойств "Загрузить свойства категории").

Почему мы не пошли по пути стандартного парсинга страниц яндекса и майла?

Все просто! Любое даже не большое изменение в верстке сайта, а точнее в программных названиях полей страницы сайта, требует доработки парсера и найти это изменение трудоемкая задача. Стандарты API яндекс маркета и майл разработаны таким образом, что любое изменение документируется, но при этом старая функция остается поддерживаемой и поэтому обработка не сломается в самый не подходящий момент.

Почему мы используем промежуточный сервер icsystem?

Для работы с API Яндекс Маркета требуется получить от разработчиков ключ авторизации, который бывает двух видов: Контентный и Партнерский. Так вот партнерский ключ получить может любой интернет магазин, который работает и размещается на яндекс маркете, но есть большое, но это Партнерский API предоставляет не всю информацию с яндекса. Контенткный (более полная база информации) получить могут только программисты, чьи идеи понравятся разработчикам яндекс маркета. Так что для обычного обывателя проще использовать промежуточный сервер, да он платный, но есть так же  и бесплатный вариант, но со своими ограничениями.

Что влияет на скорость обработки информации?

1. Это все таки железо компьютера, чем он мощнее, тем проще будет работать внутренний код обработки.
2. Скорость соединения интернет, чем он стабильнее и качественее, тем лучше. Картинки, загружаемые с сайтов-доноров, имеют различный размер от 1кБ до почти 1Мб.
3. Для майла ограничений по скорости нет, так как при использовании ключа авторизации сайт больше не накладывает ограничений. Для icsystem при оплаченных запросах все ограничения отменяются, но когда этих запросов нет среднее время на обработку 1 товара увеличивается примерно в 4-5 раз. 

ПРИМЕНЕНИЕ

Обработку для УТ 11.1 открываем просто через меню "Файл", через дополнительные обработки она пока не добавляется

ОБНОВЛЕНИЯ

Доработана загрузка картинок и описаний для товаров, которые не имеют собстывенную карточку в яндекс маркете, но при этом есть ссылки на интернет магазины, в которых размещены эти товары и есть краткое описание и картинка.

Период бесплатной тех. поддержки составляет 3 месяца

Статистика:
Просмотры 28968
Загрузки 122
Рейтинг 18
Создание 14.03.15 11:19
Обновление 21.09.23 15:55
№ Публикации 335939
Характеристики:
Теги

Яндекс маркет товары@mail товары майл парсер загрузка данных с сайта яндекс картинок E-Market

Рубрики Сайты и интернет-магазины
Кому Системный администратор ,
Программист ,
Пользователь
Тип файла Внешняя обработка (ert,epf)
Платформа Платформа 1С v8.3 ,
Оперативный учет
Конфигурация 1С:Управление торговлей 10 ,
1С:Управление торговлей 11
Операционная система Windows
Страна Не имеет значения
Отрасль Не имеет значения
Налоги Не имеет значения
Вид учета Управленческий учет
Доступ к файлу Платные (руб)
Код открыт Нет
1. i.s.leo 05.04.15 08:45 Сейчас в теме
Здравствуйте! не работает пробное использование...
2. Техподдержка 05.04.15 08:55
(1) i.s.leo, Добрый день
Пробное использование работает полностью), для Товары майл предусмотрен пробный ключ, а для Маркета просто нужно зарегистрироваться на сайте icsystem.ru настроить доступ для вашего ip адреса и все)
3. Egorme 22.04.15 19:18 Сейчас в теме
Невозможно подключить дополнительную обработку из файла.
Возможно, она не подходит для этой версии программы.

{ВнешняяОбработка.КИТ_ЗагрузкаКартинокИОписанийV2УТ11.МодульОбъекта}: Процедура или функция с указанным именем уже определена (ПрочитатьJSON)

4. Техподдержка 22.04.15 20:00
(3) Egorme, Добрый день.
Эта обработка не предусмотрена как подключаемая через дополнительные отчеты и обработки, она пока просто открывается через файл - открыть
в перспективе исправлю эту проблему
5. Egorme 23.04.15 07:00 Сейчас в теме
(4) пробовал по разному, по разному и через файл открыть и через добавление как дополнительные отчеты и обработки. Ошибка вылетает и приложение не открывается.
9. Техподдержка 22.05.15 11:41
(3) Egorme, (7) kudr11,
Добрый день теперь не требуется предварительная регистрация на сайте партнера icsystem демонстрация работает самостоятельно.
6. Техподдержка 24.04.15 17:57
Ошибка устранена, для 11.1 возникала ошибка по процедуре ПрочитатьJSON, оказывается в новой платформе разработчики создали этот метод, вот и была коллизия. Теперь это устранено
7. kudr11 20.05.15 22:10 Сейчас в теме
Могу понять как ее протэстить куда водить данные получиные от isistem
8. Техподдержка 21.05.15 05:01
(7) kudr11, Добрый день

Данные с сайта вводить в обработке никуда не нужно, главное чтобы на сайте был прописан Ваш внешний IP адрес и тогда сайт позволит работать с его ресурсами, в противном случае будет выдаваться постоянное сообщение "проблема с интернетом или закончились запросы"
10. gizik 09.07.15 12:21 Сейчас в теме
Скачал вашу обработку E-Market "Загрузка картинок и описаний" при открытии ее в УТ10.3 выходит ошибка
{ВнешняяОбработка.КИТ_ЗагрузкаКартинокИОписанийV2.МодульОбъекта}: Процедура или функция с указанным именем уже определена (ПрочитатьJSON)
11. Техподдержка 09.07.15 15:55
(10) gizik,
Всем добрый день.

Уважаемые коллеги по цеху и пользователи нашей работы)
Если у Вас скаченный файл выдавал ту же ошибку, что и у пользователя gizik, прошу написать свою почту мне в личку и я вышлю Вам исправленный вариант. Извините за неудобства
12. mapt 13.07.15 17:27 Сейчас в теме
8.2 КА 1.1
Dinamit_stud "Добрый день теперь не требуется предварительная регистрация на сайте партнера icsystem демонстрация работает самостоятельно." - не работает. Пришлось регистрироваться на icsystem и пополнять средства.

Поиска описаний удалось добиться, но изображения не появляются! Как добиться отображения изображений?

Какова логика работы "Параметров отбора"? Выбираю группу, количество 0 или 10, жму отбор и в табличную часть попадает только несколько номенклатур. Почему не попадает вся номенклатура в группе?
13. Техподдержка 13.07.15 19:54
(12) mapt,
Добрый день

Обработки заточены пока только по УТ, под КА я даже не испытывал.

Логика отбора проста, если у товара уже есть картинка он его не будет обрабатывать, по поводу картинки думаю у вас сервер и там нюанс, напишите свою почту, вышлю исправленный вариант.

по поводу регистрации, не успел для 10.3 это сделать, но думаю в ближайшие дни добавлю
14. itshasnplus42 05.08.15 14:04 Сейчас в теме
Здравствуйте! Скажите точную версию платформы на которой велась разработка и тестирование обработки.
15. пользователь 05.08.15 15:53
Сообщение было скрыто модератором.
...
16. 91197ch 16.10.15 14:59 Сейчас в теме
Есть ли возможность в данном решении по номенклатуре получить список магазинов где цена ниже. А также как-то их идентифицировать: ОГРН, ИНН или еще как-то.
Задача отслеживать розничные цены по товару и находить тех кто демпингует.
17. 7770000 16.11.15 10:59 Сейчас в теме
Добрый день
если уже есть свойства , данная программа получается их повторит и будет задвоение характеристик ?
18. Техподдержка 16.11.15 14:18
(17) 7770000, добрый день. Если наименования свойств не пересекутся то будут задвоения
19. Гость 27.11.15 14:53
Здравствуйте. Скажите, пожалуйста, а сервис ApiSystem подключен в Вашем модуле?
20. Техподдержка 27.11.15 16:28
(19) Гость, Добрый день. да конечно в новой версии обработки данный сервис присутствует
21. пользователь 27.11.15 20:28
Сообщение было скрыто модератором.
...
22. neposeda08 30.11.15 18:04 Сейчас в теме
Здравствуйте, а как получить пробную версию? 11.1
23. neposeda08 30.11.15 18:06 Сейчас в теме
Да забыл сказать пробная версия загрузки картинок и описаний
24. пользователь 30.11.15 18:31
Сообщение было скрыто модератором.
...
27. neposeda08 02.12.15 15:23 Сейчас в теме
(24) просьба отправить на neposeda08@gmail.com обработки скачивание картинок и описаний с ЯМ и цен на 10.3
25. 7770000 02.12.15 10:57 Сейчас в теме
Добрый день

есть ли возможность , поставить запрет на скачивание картинок ? Или можно ли скачивать картинки не в 1С , а на сервер с привязкой к карточки товара?
26. Техподдержка 02.12.15 11:16
(25) 7770000, Добрый в новой версии эта функция реализована, но только пока для УТ 10.3, в планах для ут 11.1 тоже внести
28. 12345mm 19.01.16 22:24 Сейчас в теме
Добрый вечер! А на этой версии УТ будет работать ? как получить пробную версию? может можно выслать st-bt@tut.by
29. 12345mm 19.01.16 22:26 Сейчас в теме
версия
Прикрепленные файлы:
30. Техподдержка 20.01.16 02:27
(29) 12345mm, не пробовал для такой версии, могу выслать на почту то что есть, если не взлетит, то мне нужна будет конфигурация для изучения и корректировки обработки
31. 12345mm 23.01.16 17:21 Сейчас в теме
Зарегистрировался icsystem.ru. Запустил программу. Нажимаю выполнить пишет ошибку"Ошибка работы с интернет: доступ запрещен(403)"
32. Техподдержка 23.01.16 17:38
(31) 12345mm, Добрый день
ок посмотрю, пришлю как исправлю на почту
33. bestuzhev 07.03.16 10:40 Сейчас в теме
{Форма.Форма.Форма(400)}: Поле объекта не обнаружено (НоименованиеПолное)
ТекСтрока.ТекстПоиска = ТекСтрока.Номенклатура.НоименованиеПолное;
34. Техподдержка 07.03.16 10:52
(33) bestuzhev, Исправил

Скажите свою почту, вышлю Вам исправленный вариант
35. пользователь 25.03.16 10:18
Сообщение было скрыто модератором.
...
36. пользователь 01.05.16 15:13
Сообщение было скрыто модератором.
...
37. пользователь 10.06.16 13:11
Сообщение было скрыто модератором.
...
38. pashaisl 21.07.16 14:06 Сейчас в теме
Работает ли данная доработка на серверной версии УТ11,1
39. пользователь 21.07.16 14:14
Сообщение было скрыто модератором.
...
40. alt-f13 22.07.16 17:14 Сейчас в теме
на windows 8.1x32 , в 1с 8.3.8 вылетает с ошибкой,
на win2k3 все в норме
41. Техподдержка 27.07.16 05:43
(40) alt-f13,

Добрый день

Не было возможности протестировать обработку на всех версиях windows, можете прислать текст ошибки?
42. пользователь 21.08.16 19:26
Сообщение было скрыто модератором.
...
43. fit686 21.08.16 23:22 Сейчас в теме
Подскажите стоимость лицензии,и не видно загрузки свойств товаров,
или это ограничение пробной версии?
44. пользователь 25.08.16 14:15
Сообщение было скрыто модератором.
...
45. пользователь 25.08.16 15:07
Сообщение было скрыто модератором.
...
46. Red.Bruksa 27.01.17 19:13 Сейчас в теме
Здравствуйте! Скажите пожалуйста, тестировалась ли обработка на 11,2? И где можно скачать бесплатно демо-версию?
47. Техподдержка 27.01.17 20:17
Добрый день
Ну так она и бесплатна представлена в этой публикации. если нет монет, пишите почту, вышлю туда

тестирование проводилось, на момент тестирования все работало
48. пользователь 29.12.17 17:45
Сообщение было скрыто модератором.
...
49. пользователь 29.12.17 18:05
Сообщение было скрыто модератором.
...
50. Antel 29.12.17 19:25 Сейчас в теме
Тогда ладно, будем искать другое решение. Начальство должно само опробовать) )
51. Nikita77 26.02.20 10:19 Сейчас в теме
Здравствуйте, Ваша обработка работает через этот сервис market-scanner.ru ?
Для себя могли бы подключить партнерку, а нам было бы дешевле чем всякие контентные АПИ яндекс маркета или apisystem .
52. Техподдержка 26.02.20 13:19
Добрый день

нет не работает, партнерка есть и у apisystem, данный сервис возьму на примету для добавления ее в новые релизы
53. Nikita77 26.02.20 13:51 Сейчас в теме
У apisystem сокращенная версия характеристик и отзывы теперь яндекс.маркет режет пополам и вставляет ссылку на себя. А в market-scanner.ru характеристики полностью и отзывы непорезаные маркетом. Едиственное там база товаров не полная, зато цены копеечные.
54. Техподдержка 26.02.20 14:34
Неа, тут вы не правы) у апи систем полностью контентный апи, а если умеете с ним работать, то должны знать как получить все характеристики)
55. Nikita77 26.02.20 21:41 Сейчас в теме
(54) Наверное Вы правы. Надо тогда поискать обработку для "нищебродов" типа меня. Сервис дешевый вроде нашел. Ваше решение вместе с apisystem слишком уж по кошельку бьет, хотя и дешевле официальных апи яндекса.
56. Техподдержка 27.02.20 06:17
Я планирую посмотреть этот сервис на днях, т.к. маркет выдал другую проблему, товаров которых нет в продаже он не хочет выводить в результат поиска. так что может вам и повезет)
57. it_sar 08.06.20 20:41 Сейчас в теме
58. Техподдержка 08.06.20 21:20
(57) Добрый день, пока нет. Если Вам требуется для УНФ, то можно это реализовать
59. it_sar 08.06.20 22:24 Сейчас в теме
(58) Какой срок, стоимость выполнения этой задачи?
60. Техподдержка 09.06.20 05:34
(59) стоимость будет такой же что и для 11 УТ, срок в течении этой недели могу сделать
61. пользователь 12.01.21 10:55
Сообщение было скрыто модератором.
...
62. Discontica 05.02.21 13:07 Сейчас в теме
Как можно протестировать парсер?
63. Техподдержка 05.02.21 13:12
(62)
Добрый день

какую группу товаров вы планируете парсить?
демо не предоставляется, есть возможность только показать удаленно
65. Discontica 05.02.21 14:51 Сейчас в теме
Электроника, надо в любом случае посмотреть, как он будет работать с нашей базой ( характеристики, серии)
67. Discontica 05.02.21 16:32 Сейчас в теме
серии наверное неважно, хотя все может быть. А вот как парсер дружит с характеристиками - вопрос.
68. Техподдержка 05.02.21 16:44
(67) все свойства товаров с маркета пишутся в доп реквизиты или доп сведения, харакетристики номенклатуры как таковые не используются вообще
69. Discontica 05.02.21 17:48 Сейчас в теме
Удаленно как можете показать?
70. Техподдержка 05.02.21 19:00
(69) пишите заявку в техподдержку инфостарта и вас со мной свяжут
71. пользователь 06.12.22 06:45
Сообщение было скрыто модератором.
...
72. пользователь 06.12.22 07:35
Сообщение было скрыто модератором.
...
73. EugeneSunny 06.12.22 11:07 Сейчас в теме
(72) Собирается по апи только первых 10 цен, причем среди первых 10 цен есть те, которые в виду отсутствия остатков у магазинов, на Маркете не показываются. И в итоге остается 3-5 первых цен... НО... Самое смешное в том, что поле обозначающее наличие/отсутствие остатков deprecated, вследствие чего заполняется, но не всегда верно и не соответствует действительности.
И опять же... называть обработку, работающую по апи, парсером - совсем некорректно. Впрочем как и обзывать меня в ответ на мое справедливое замечание.
74. Техподдержка 06.12.22 16:37
(73) Ну для начала когда делается замечание, то как минимум нормальные люди поздороваются и напишут комментарий в нормальной форме, а не свысока. Следющий момент ваш комментарий будет иметь смысл если вы будете указывать для какой версии API яндекса вы говорите, т.к. если вы в курсе, то там их уже 6 версий.
Парсером называется издавна, когда еще не было API и реально происходил парсинг страниц товаров, после появления API название закрепилось и не менялось больше.
для версии партнерского api v2: все предложения получить для определенного можно с помощью флага в параметрах строки запроса, поэтому предложения всегда получали не первые 10, а все возможные для данного товара данного региона

За пустого бота - приношу извинения, т.к. ваш акк очень странный, за столько лет всего 2 коммента
75. EugeneSunny 06.12.22 20:17 Сейчас в теме
(74) GET /models/{modelId}/offers
Возвращает информацию о первых десяти предложениях, расположенных на карточке модели.
76. EugeneSunny 07.12.22 13:05 Сейчас в теме
(74) а контентный апи до конца года закроют полностью

Оставьте свое сообщение

См. также

Интеграция Альфа Авто 5 / Альфа Авто 6 и AUTOCRM / Инфотек

Интеграционный модуль обмена между конфигурацией Альфа Авто 5 и Альфа Авто 6 и порталом AUTOCRM. Данный модуль универсален. Позволяет работать с несколькими обменами AUTOCRM разных брендов в одной информационной базе в ручном и автоматичес...

36000 руб.

Оплата покупок "Долями" в 1С:Розница 2.3 (для работы с сервисом dolyame.ru)

Готовое интеграционное решение для оплаты покупок Долями в 1C:Розница 2.3. Реализовано в виде расширения. Интеграция сервиса dolyame.ru для приема платежей в рассрочку.

18000 руб.

Универсальный парсер интернет-магазинов

С того времени, как я начал парсить сайты, прошло много лет. За это время я спарсил более 100 сайтов и записал эти товары в 1С. В итоге на свет появился универсальный парсер, который поможет Вам спарсить интернет-магазин и при этом не напис...

9600 руб.

Интеграция 1С — Битрикс24. Обмен задачами

Интеграция 1С и Битрикс24. Разработка имеет двухстороннюю синхронизацию 1С и Битрикс24 задачами. Решение позволяет создавать пользователя в 1С из Битрикс24 и наоборот. Данная разработка технически подходит под все основные конфигурации ...

5040 руб.

«Мониторинг цен» – сервис для отслеживания цен конкурентов на ведущих маркетплейсах России

Сервис помогает отслеживать цены на ведущих маркетплейсах России только для одного региона – Москва и Московская область. Выполняйте анализ и контролируйте цены Ваших конкурентов сразу в системе 1С.

2400 руб.

Выгрузка для АВИТО

Выгрузка товаров услуг из 1С для сайта "Авито" раздел "Автозагрузка" выполнена в виде обработки. Обработка подходит для конфигураций УТ, УНФ и Розница. Данная обработка позволяет создавать шаблон с объявлениями для &q...

4200 руб.

Sync1C: Синхронизация 1С и OpenCart

Внешняя обработка для обмена данными с интернет-магазином OpenCart. Позволяет быстро наполнить магазин товарами, затем обновлять цены и добавлять новые товары. Далее можно средствами OpenCart настраивать и дополнять карточки товаров как над...

3840 руб.