#важноуслышать #мониторинг #ценообразование #реформа #парсинг
[7.1]
Парсинг, искусственный интеллект и взаимодействие с торговыми площадками
Ранее никогда об этом не говорили. Сейчас запущена система парсинга с элементами искусственного интеллекта. Сопоставляется номенклатура, публикуемая на сайтах, с ресурсами, представленными в КСР. Когда говорится о парсинге, важно понимать, что просто собирать информацию сайтов — это ерунда, которую может сделать любой программист, другое дело - как реализовать привязку.
Основная проблема — это поставщики и производители, а также подача информации. Они зашли в ФГИС ЦС, зарегистрировались и… большая часть из них даже не понимают, как свою номенклатуру, свои товарные каталоги привязать к классификатору строительных ресурсов! Сделаны переходные ключи и сейчас есть понимание цен, которые были отмониторены через парсинг. Аналитики, собственно, только на первом этапе используют этот парсинг. Сейчас это делается за счет обучающейся программы, которая это систематизирует, формирует банк данных и т.д. В перспективе будет реализована передача с помощью этих таблиц данных крупным поставщикам. Такой опыт, например, уже есть с крупнейшими производителями кровельных, гидроизоляционных, звукоизоляционных и теплоизоляционных материалов и систем.
А потом наступает самое главное: систематизация этой информации. Эти таблицы сопоставляются с классификаторами. Делается проверочный проект и верификация этих данных у производителя, насколько они корректны и т.д., чтобы они их подтвердили. У производителей самих нет такого. Они вручную данные заносят, привязывая к позициям классификатора, тогда как здесь все это уже есть в таблице сопоставления. После ранжирования данных, понимаем, что есть условный "Петрович", который закрывает большую часть позиций. А есть всякая мелочевка, которая ничего из себя условно не представляет, ей можно меньше внимания уделять.
Еще один инструмент, который используется - это взаимодействие с торговыми площадками. Сейчас прорабатывается вопрос о возможности сделать площадку, которая будет собирать информацию со всех торговых площадок. И не просто собирать эту информацию, а систематизировать, агрегировать и также предоставлять в ГГЭ.
Информация, которая сейчас есть о ценах строительных ресурсов: как эта информация обосновывается и верифицируется через разные источники, как формируется единый банк данных - такого не было в принципе никогда, никакие региональные центры, которые «пиарили» себя и торговали ежемесячными индексами, ежемесячными каталогами текущих цен, рядом не стояли.
Поэтому мониторинг сейчас уже совершенно на другом уровне.
@smety
[7.1]
Парсинг, искусственный интеллект и взаимодействие с торговыми площадками
Ранее никогда об этом не говорили. Сейчас запущена система парсинга с элементами искусственного интеллекта. Сопоставляется номенклатура, публикуемая на сайтах, с ресурсами, представленными в КСР. Когда говорится о парсинге, важно понимать, что просто собирать информацию сайтов — это ерунда, которую может сделать любой программист, другое дело - как реализовать привязку.
Основная проблема — это поставщики и производители, а также подача информации. Они зашли в ФГИС ЦС, зарегистрировались и… большая часть из них даже не понимают, как свою номенклатуру, свои товарные каталоги привязать к классификатору строительных ресурсов! Сделаны переходные ключи и сейчас есть понимание цен, которые были отмониторены через парсинг. Аналитики, собственно, только на первом этапе используют этот парсинг. Сейчас это делается за счет обучающейся программы, которая это систематизирует, формирует банк данных и т.д. В перспективе будет реализована передача с помощью этих таблиц данных крупным поставщикам. Такой опыт, например, уже есть с крупнейшими производителями кровельных, гидроизоляционных, звукоизоляционных и теплоизоляционных материалов и систем.
А потом наступает самое главное: систематизация этой информации. Эти таблицы сопоставляются с классификаторами. Делается проверочный проект и верификация этих данных у производителя, насколько они корректны и т.д., чтобы они их подтвердили. У производителей самих нет такого. Они вручную данные заносят, привязывая к позициям классификатора, тогда как здесь все это уже есть в таблице сопоставления. После ранжирования данных, понимаем, что есть условный "Петрович", который закрывает большую часть позиций. А есть всякая мелочевка, которая ничего из себя условно не представляет, ей можно меньше внимания уделять.
Еще один инструмент, который используется - это взаимодействие с торговыми площадками. Сейчас прорабатывается вопрос о возможности сделать площадку, которая будет собирать информацию со всех торговых площадок. И не просто собирать эту информацию, а систематизировать, агрегировать и также предоставлять в ГГЭ.
Информация, которая сейчас есть о ценах строительных ресурсов: как эта информация обосновывается и верифицируется через разные источники, как формируется единый банк данных - такого не было в принципе никогда, никакие региональные центры, которые «пиарили» себя и торговали ежемесячными индексами, ежемесячными каталогами текущих цен, рядом не стояли.
Поэтому мониторинг сейчас уже совершенно на другом уровне.
@smety