Парсинг (сканирование) сайта из 1С на примере сайта по криптовалюте

25.10.17

Интеграция - Сайты и интернет-магазины

+9 –
>
  • парсер.png
  • курсывалют1с.png
Актуальная обработка с конфигурацией по парсингу на примере сайта http://coinmarketcap.com/ Сканирует всю историю курсов криптовалют.

Файлы

ВНИМАНИЕ: Файлы из Базы знаний - это исходный код разработки. Это примеры решения задач, шаблоны, заготовки, "строительные материалы" для учетной системы. Файлы ориентированы на специалистов 1С, которые могут разобраться в коде и оптимизировать программу для запуска в базе данных. Гарантии работоспособности нет. Возврата нет. Технической поддержки нет.

Наименование Скачано Купить файл
Парсинг (сканирование) сайта из 1С:
.cf 1,41Mb ver:1.1
22 3 000 руб. Купить

Подписка PRO — скачивайте любые файлы со скидкой до 85% из Базы знаний

Оформите подписку на компанию для решения рабочих задач

Оформить подписку и скачать решение со скидкой

Саму же доработку можно переделать под парсинг любого несложного сайта.

Особенности

  1. Используется компонента, которая нормализуют html код, благодаря чему он становится валидным для парсинга.
  2. Другая компонента позволяет считывать код html по тегам, что упрощает работу со страницей.
  3. Понадобится зарегистрировать эти компоненты.
  4. Лучше запускать 1С под правами администратора, иначе может не взлететь.
  5. Для работы потребуется установленный Net Framework 4 и Elisy .Net Bridge
  6. Если парсер не запускается при выполнении вышеизложенных условий - значит нужно руками зарегистрировать компоненту  //infostart.ru/public/165910/

Тестировалось на платформе: 8.3.9.1850.

Вступайте в нашу телеграмм-группу Инфостарт

Парсинг сайтов сканирование сайтов

+9 –

См. также

Оплата товара "Долями" в 1С:Розница 2.3

Сайты и интернет-магазины 1С:Предприятие 8 1С:Розница 2 Розничная и сетевая торговля (FMCG) Россия Платные (руб)

Интеграция сервиса dolyame.ru с 1С:Розница 2.3 для приема платежей в рассрочку. Готовое интеграционное решение для оплаты покупок Долями в 1C:Розница 2.3. Реализовано в виде расширения. Интеграция сервиса dolyame.ru для приема платежей в рассрочку. Поддерживает работу от разных юридических лиц. Работа: в составе РИБ, отдельно от РИБ, тонкий, толстый клиент, web-клиент (через интернет-браузер), поддерживается старый РМК, работа через чек ККМ.

24400 руб.

19.12.2023    12383    74    18    

65
Интеграция Альфа Авто 5 и 6 и AUTOCRM + LOGICSTARS

Сайты и интернет-магазины WEB-интеграция Системный администратор Программист Пользователь 1С:Предприятие 8 1C:Бухгалтерия 1С:Управление торговлей 11 Автомобили, автосервисы Россия Управленческий учет Платные (руб)

Интеграционный модуль обмена между конфигурацией Альфа Авто 5 и Альфа Авто 6 и порталом AUTOCRM / LOGICSTARS. Данный модуль универсален. Позволяет работать с несколькими обменами AUTOCRM / LOGICSTAR разных брендов в одной информационной базе в ручном и автоматическом режиме.

42700 руб.

03.08.2020    23676    35    24    

27
Модуль обмена 1С с сайтом на платформе Битрикс: настройка для БП 3.0

Оптовая торговля Розничная торговля Сайты и интернет-магазины Программист 1С:Предприятие 8 1С:Бухгалтерия 3.0 Россия Бухгалтерский учет Платные (руб)

Расширение для настройки обмена данными с сайтом на платформе 1С:Битрикс (и подобными) для 1С: Бухгалтерия предприятия 3.0.

18000 руб.

18.03.2019    39127    113    115    

91

Оптовая торговля Розничная торговля Сайты и интернет-магазины Системный администратор Программист 1С:Предприятие 8 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Управление нашей фирмой 3.0 Управленческий учет Платные (руб)

Расширения для возможности ввода в УТ (ERP КА), УНФ, Рознице 2 множественных свойств и выгрузки значений их на сайт Битрикс.

7500 руб.

29.11.2017    69412    777    108    

213
Парсинг цен на маркетплейсах – «Мониторинг цен» – расширение 1С для отслеживания и анализа цен конкурентов на Wildberries, Ozon, Мегамаркет и т.д.

Маркетплейсы Сайты и интернет-магазины Программист Пользователь 1С 8.3 1С:Управление нашей фирмой 1.6 1С:ERP Управление предприятием 2 1С:Управление торговлей 11 1С:Комплексная автоматизация 2.х 1С:Управление нашей фирмой 3.0 Платные (руб)

Сервис парсинга цен на маркетплейсах помогает отслеживать и проводить анализ цен для Ozon, Wildberries, Мегамаркет и т.д. только для одного региона – Москва и Московская область. Выполняйте анализ и контролируйте цены Ваших конкурентов сразу в системе 1С.

2440 руб.

29.05.2023    14055    52    43    

31
Оплата товара "Долями" в 1С:Розница 3.0 (для работы с сервисом dolyame.ru)

Сайты и интернет-магазины 1С:Предприятие 8 1С:Розница 3.0 Розничная и сетевая торговля (FMCG) Россия Платные (руб)

Готовое интеграционное решение для оплаты покупок Долями в 1C:Розница 3.0. Реализовано в виде расширения. Интеграция сервиса dolyame.ru для приема платежей в рассрочку. Поддерживает работу от разных юридических лиц. Работа: в составе РИБ, отдельно от РИБ, тонкий, толстый клиент, web-клиент (через интернет-браузер). Интегрировано в Чек ККМ, Рабочее место кассира (РМК)

26840 руб.

02.11.2024    3980    16    4    

13
Простой мониторинг цен (так просто ещё не было)

Прайсы Оптовая торговля Ценообразование, анализ цен Сайты и интернет-магазины Пользователь 1С:Предприятие 8 1C:Бухгалтерия 1С:Управление торговлей 11 Управленческий учет Платные (руб)

Легкая обработка для мониторинга цен практически любого сайта (парсинга), не требует специальных знаний при настройке.

7076 руб.

17.04.2017    34470    31    28    

43
Синхронизация 1С и OpenCart

Оптовая торговля Розничная торговля Сайты и интернет-магазины Системный администратор Программист 1С:Предприятие 8 1С:Управление торговлей 10 1С:Управление нашей фирмой 1.6 1С:Управление торговлей 11 Управленческий учет Платные (руб)

Внешняя обработка для обмена данными с интернет-магазином OpenCart. Позволяет быстро наполнить магазин товарами, затем обновлять цены и добавлять новые товары. Далее можно средствами OpenCart настраивать и дополнять карточки товаров как надо для магазина, при этом связь товаров с 1С не теряется.

5084 руб.

30.03.2018    49027    87    149    

91
Комментарии
Подписаться на ответы Инфостарт бот Сортировка: Древо развёрнутое
Свернуть все
1. swimdog 788 25.10.17 12:36 Сейчас в теме
Компонента не BadRabbit называется? ))
amoarok; +1 – Ответить
2. ollega 117 25.10.17 12:38 Сейчас в теме
HtmlAgilityPack_dll и ElisyNetBridge
+ – Ответить
3. mikl79 121 26.10.17 09:44 Сейчас в теме
Добрый день.
установил компоненту, но все равно пишет Установите компоненту и т.д.

по отладчику отловил, не выполняется функция ПодключитьВнешнююКомпоненту("Elisy.NetBridge4")

подскажите в чем проблема?
+ – Ответить
4. ollega 117 26.10.17 09:48 Сейчас в теме
(3) 1С должна быть запущена от имени Администратора, если это не помогает - значит нужно руками зарегистрировать компоненту, описано тут: https://infostart.ru/public/165910/
+ – Ответить
5. mikl79 121 26.10.17 11:04 Сейчас в теме
(4), у меня сервер 1с 32-разрядный
+ – Ответить
6. mikl79 121 26.10.17 11:09 Сейчас в теме
действительно, когда 1с запустил от имени Администратора загрузка пошла, в чем прикол?
+ – Ответить
7. ollega 117 26.10.17 11:11 Сейчас в теме
(6) значит прав не хватает 1Ске на работу с компонентой.
+ – Ответить
8. mikl79 121 26.10.17 11:12 Сейчас в теме
только валюта создалась не корректная, в наим-ии, например, LTC¶ Litecoin,
а Сокр. наим-е пустое
+ – Ответить
9. ollega 117 26.10.17 11:14 Сейчас в теме
(8) Значит что-то в сайте изменилось за это время, у меня нормально сканировалось. Поправлю - залью снова. (попозже)
+ – Ответить
10. mikl79 121 26.10.17 11:15 Сейчас в теме
и до сих пор грузит, до каких времен он будет грузить?
+ – Ответить
11. ollega 117 26.10.17 11:18 Сейчас в теме
(10) 1000 с лишним валют - грузит долго первый раз. Может час.
Прервать загрузку всегда можно нажатием CTR+Break
+ – Ответить
12. mikl79 121 26.10.17 11:33 Сейчас в теме
спасибо, для себя приятно узнал, что в УФ реализовали ОбработкаПрерыванияПользователя и Состояние, наконец-то
+ – Ответить
13. top_1c 4026 07.11.17 12:21 Сейчас в теме
Эта компонента ПодключитьВнешнююКомпоненту("Elisy.NetBridge4") если демо, сколько раз она работает?
+ – Ответить
14. ollega 117 07.11.17 12:25 Сейчас в теме
(13) У клиента стоит уже около года и не жалуется...
+ – Ответить
15. top_1c 4026 07.11.17 12:31 Сейчас в теме
(14) хм... а я сначала обрадывался всё круто отработало. А потом отвалилось напрочь. Подумал может количеством запусков как-то ограниченно. Там постоянно выскакивает окно - что версия ограниченная.

Глюк смог поправить путем перезапуска скриптов в корне "софтины" unreg.vbs и reg.vbs
+ – Ответить
16. ollega 117 07.11.17 12:44 Сейчас в теме
(15) Хм, может кому полезна будет эта информация, у самого проблем не возникало подобных.
+ – Ответить
17. top_1c 4026 08.11.17 12:05 Сейчас в теме
(16) Добрый день. Если не сложно помогите разобраться в методах.
Запилил такой код при разборе страницы: 

	НодыСтраницы = HAP.DocumentNode.SelectNodes(".//div");
	Результат = "";
	Для i = 0 По НодыСтраницы.Count - 1 Цикл
		Результат = Результат + "Нод " + i + " [" + ЧтоТутНаписать + "] InnerText ========================" 
		+ НодыСтраницы.get_Item(i).InnerText + Символы.ПС + "========================";		
	КонецЦикла;


Хочу получить сам нод, как он представлен в хтмл... т.е. к примеру <div class="detail-list">
Я попробовал НодыСтраницы.get_Item(i) , он мне вернул [COMОбъект] :)))
+ – Ответить
18. top_1c 4026 09.11.17 14:30 Сейчас в теме
(17) вопрос не актуален разобрался.
Не разобрался только как получить ноды скрипта...
+ – Ответить
19. ollega 117 10.11.17 13:21 Сейчас в теме
(18) С этим всем уже самостоятельно. Занят постоянно)
+ – Ответить
20. fratriaArzgir 11.07.21 09:26 Сейчас в теме
Обработка еще актуальна? Или на текущий момент она не работоспособна?
+ – Ответить
21. ollega 117 07.10.21 13:09 Сейчас в теме
(20) вообще без понятия, допилить немного никогда не поздно будет. Вообще лучше питоном парсить, чем 1С)
+ – Ответить
Для отправки сообщения требуется регистрация/авторизация