Цены на товарных рынках понижаются только тогда когда рынок

Что такое трейдинг, и как начать торговать в плюс в 2023? Да, опять про трейдинг. Но…

Дисклеймер: В процессе написания статьи про трейдинг, было много споров. Хотелось написать сразу обо всем. Все сделать сразу правильно. Без воды, и по делу. Да ещё и объективно. Но в процессе стало понятно, что статью на 100+ тысяч слов читать никто не будет. Поэтому пробежимся галопом по основным аспектам, И оставим много ссылок. Очень много ссылок. Но не на сторонние ресурсы. А на книги!

Итак… статьи про трейдинг не пишут трейдеры. Им некогда. Они трейдят. Но кому-то их писать нужно. Причем писать простыми словами. Чтобы понял и новичок, и перед профи не сильно стыдно было. Поэтому начнем… Трейдинг это…

Просто о сложном. Что такое трейдинг. И чем можно торговать?

Трейдинг это процесс покупки или продажи чего бы то ни было, с целью на этом заработать. Да, Дядя Ваня на рынке, торгующий мясом — тоже своего рода трейдер!

Шутки в сторону! Трейдинг — это процесс покупки и продажи финансовых инструментов. Финансовыми инструментами в данном случае могут выступать:

1. Акции компаний.
2. Деривативы — (Контракты между участниками рынка, основанные на стоимости основного актива).
3. Товары.

А форекс? А криптовалюты? Форекс — в своем чистом виде, это торговля деривативами. Т.к. вы физически не покупаете разные валюты, а только играете на их трейдинг курсе. Тоже касается и опционов (не бинарных, хотя и их тоже), это обычно бумаги, которые дают вам право что-то выкупить, в какой-то срок по какой-то цене. И облигации, это торговля деривативами. И форварды тоже. И опционы на фьючерсы. И фьючерсы на опционы на форварды на свопы. И индексы тоже…

В общем, торговать можно чем угодно. Но большая часть того, что вы собираетесь продавать или покупать, это производные финансовые инструменты. Т.е. искусственные. И цена на них формируется с регулированием, которым занимаются люди, которым доверяют остальные участники рынка.

Регулирование, это не установка цены. Это скорей апробация обоснованности цены, сформированной на рынке.

Здесь конечно, возникает вопрос «а криптовалюты, децентрализация и всё вот это вот?». Вот у них нет регуляторов, и вы видите как их шатает? От 0 до 100-ни за 10 секунд, и обратно.

Вывод: трейдинг (торговля) — осуществление операций по покупке и продаже актива, в общественном месте (рынке).

Всё остальное тонкости, которые новичкам нужны не будут.

А где собственно, торговать? Виды рынков

Загвоздка… В идеальном мире. Для каждого вида финансового актива, должен быть свой рынок.

1. Межбанковские торги для валютных пар.
2. Фондовый рынок для акций и ряда деривативов.
3. Сырьевой рынок для опционов и фьючерсов на товары.

Заметьте, здесь нет слова «форекс», «валютный рынок» и «криптовалютная биржа». Во-первых, потому что криптовалюта создавалась как что-то «децентрализованное, на общем доверии» и вот это вот все (помним о Бутерине, и его децентрализованных биржах).

А во-вторых. Потому что Форекса не существует… Ну или его не должно существовать. И даже любимый всеми Dukascopy, и не любимый всеми Альпари существовать не должны. Как и другие трейдинг сайты.

Вообще здесь должно быть объяснение про то, что ликвидность, маржинальность и объемы банковских торгов настолько велики, что частное лицо никак не может повлиять на них. Должны быть причины объяснения, почему трейдер с его деньгами (пусть это даже будет миллион долларов) не может быть участником валютного рынка. Что банки используют межрыночный арбитраж, и пересылают друг другу миллионы долларов ежесекундно. Что это все необходимо для товарного оборота. Но на это можно посвятить отдельную статью. Как можно посвятить отдельную книгу, пытаясь простыми словами объяснить что фондовый рынок это…

По крайней мере, в идеальном мире. Поэтому спускаемся с небес на землю, и рассказываем, что такое «кухня». А если останется время, распишем, и почему это слово стало матерным!

Неидеальный мир: Много ненадежных бирж в оффшорах

Итак… Загвоздка. Для того, чтобы торговать чем-либо: акциями или деривативами. У вас должна быть… Лицензия трейдера!

А ещё, о ужас. Вы должны платить налоги! Налог подоходный, и рассчитывается как «разница между покупкой и продажей актива на процент в вашем государстве». (это упрощенная формулировка, просьба не бить сильно).

А значит. Трейдер должен… Иметь лицензию. Сдавать ворох отчетностей. А к межбанку его вообще не подпустят. А как платить налог на крипту? стоимость продажи минус 0? Так и обанкротиться недолго

В общем вопросов много. А ответ один — «Кухня». Он же брокер. Он же разводила. Он же… Выбирайте любое удобное для вас слово.

Но что такое эта ваша кухня? В Идеальном мире. Кухня это — брокер, которые собирает внутри своей платформы заявки трейдеров, объединяет их в пакеты, и исполняет их на ближайшем ликвидном рынке.

Заявки. Ликвидность. Пакеты. Рынки… В общем. Так, как у вас нет лицензии. а у брокера есть, то он может собрать все ваши пожелания «купить дешевле, продать дороже». Сесть на поезд, приехать на Уолл-стрит, и передать эти бумаги главному банкиру.

Главный банкир их подпишет. И потом брокер назад на поезде, приедет к вам и отдаст вам ваши акции. (все это можно и через интернет, но с поездом как-то аналогия ясней).

Но, давайте подумаем со стороны брокера. К примеру, есть 10 заявок на покупку доллара. И 10 заявок на продажу доллара. И они совпадают. Так зачем ему выводить эти заявки в общий рынок, если он может разрешить их внутри себя. Не выходя из дома скажем так.

Размер комиссионных не поменяется. А вот мороки сильно меньше… «А если ещё…»

Кухня в плохом смысле слова

И вот это вот «А если ещё…» и приводит нас к мошенничеству. А именно к тому, что брокеры создают маленькие, внутренние рынки, неправомерно. И разрешают все заявки внутри себя. Т.е. не выводя их на рынок.

Но количество заявок может быть неравномерным. И нельзя делать так, чтобы внутренний курс сильно отличался от внешнего (ну не может доллар у конкретного брокера стоить 30. А у другого 130).

Поэтому, брокер, становиться Контрагентом ваших сделок. И он начинает играть с вами. И в этот момент…

Ему становиться выгодно сделать так, чтобы вы сливали ваши деньги у него. Т.е. заработок смещается с «комиссионных» на «чистую прибыль». Ведь сделка все равно не выносится в общий рынок.

И дальше зависит только от жадности брокера.

Все они, делятся на:

1. Брокеров с умеренным преимуществом (комиссионные, плавающие спреды, внезапные комиссии на ввод и/или вывод средств).
2. Онлайн-казино. Манипуляции с котировками, баги, проблемы с ликвидностью и пр.
3. Купюроприемник. Залил деньги… и забудь. А потом ещё и менеджер позвонит, и скажет что на твоё имя кредит взяли.

А будет ли брокер прикидываться, что он «фортс, форекс, межбанк, криптовалютный, самый честный». Это уже совсем другая история.

Криптобизнесмены: просто помните, что когда вы проводите сделку не через холодный кошелек, и не напрямую через блокчейн, а на ваших любимых Exmo, Binance, CoinWallet, Etoro. Это все ещё брокеры кухни, которые взимают свою плату за скорость операций. В противном случае вся ваша «торговля по уровням сопротивлений через 9-ую волну мартингейла» уперлась бы в предел ликвидности и очередность на исполнение у майнеров…

Что там с промежуточными итогами?

Торгуйте где хотите. Проверьте брокера на честность. И выбирайте рынок, который вам больше импонирует. Или тот, на котором вы научи(лись)тесь торговать.

Можете заморочиться и выйти на реальные биржи. Но для этого ваш торговый капитал должен исчисляться со старта в тысячах долларов. Ну а многие биржи, предлагают начинать с 10-ти долларов или их эквивалента.

Так, что все мы торгуем на «кухнях». Просто выбираем ту, что с «Евро-ремонтом».

Три столпа трейдинга. Много книг и ссылок.

Итак… Мы разобрались с тем, где мы торгуем, и чем мы торгуем. Остался только один вопрос. И именно о нем:

• Написаны тысячи книг.
• Созданы миллионы каналов.
• Сделаны миллиарды курсов.

Ну и он ключ к вашим «заветным яхтам, машинам, пароходам, и путевкам на #сказочноеБали».

Итак, чтобы стать мультимиллионером, вам нужно прочитать, и НАУЧИТЬСЯ ПОЛЬЗОВАТЬСЯ В СОВЕРШЕНСТВЕ следующими пособиями:

1. Как играть и выигрывать на бирже. Психология. Технический анализ. Александр Элдер.— база по техническому анализу
2. Путь черепах. Из дилетантов в легендарные трейдеры. Куртис Фейс. — расчет математического ожидания, как ключ к вне системному трейдингу
3. Марк Дуглас. Трейдинг в зоне. — база по позиционному трейдингу
4. Р.Г. Хагстром «Уоррен Баффет. Как превратить 5 долларов в 50 миллиардов» (только для фундаментального анализа, внутри не все про Баффета).
5. Райан Джонс «биржевая игра». — очень много полезного про существующие системы ММ и РМ (мани и риск менеджмента).

Это далеко не все. Но эта та база. И вместо того, чтобы записываться на трейдинг обучение у очередного гуру, лучше прочтите эти книги. Методы описанные в этих книгах, пересказанные из уст в уста. Из книг в статьи. Из статей в платные курсы. А оттуда обратно в статьи. Перевранные доходят до вас.

В общем «Трейдинг с нуля это просто… Говорили они… Я прочитал эти ваши 3500 страниц… и все равно слил депозит, потом записался на новое обучение трейдингу. И снова слил депозит». Тут, если коротко, мало только прочитать, и/или выучить эти книги. Их ещё нужно уметь применять, и адаптировать к современным условиям.

Так, но мы же обещали три столпа трейдинга?

1. Анализ.
2. Психология.
3. Управление рисками.

Пользуясь анализом (их много) вы пытаетесь угадать (не спрогнозировать) движение выбранного актива (амплитуду, котировки, время).

При помощи управления рисками, вы учитесь ставить правильное количество денег на вашу «угадайку».

А психология поможет вам не войти в «азарт», перестать «бояться» и начать «торговать, а не играть».

И зачем нужны были 3500 страниц базовых книг? А вот тут и переходим к самому интересному…

Внимание. Дальше будет много терминов. Определений. Каких-то попыток объяснить сложные штуки простыми словами. Если автор где-то упрощает, или искажает, он делает это с целью объяснить вещи, а не потому что он не понимает, о чем говорит.

А что там быки, медведи и про играть на понижение… непонятно.

Я совершенно забыл, что статья для новичков. А значит перед тем как объяснять «тонкости волнового анализа в пятой подволне третьего тупого треугольника для биткоина», надо бы рассказать, как вообще происходит торговля на рынке.

Помним. Мы не в идеальном мире. И между нами и рынком брокер. Чаще всего кухня. Но иногда может быть и что-то реальное. Не суть.

Мы занесли брокеру денег. И теперь у нас на счету есть чем торговать. Мы смотрим на актив (валютная пара, фьючерс на железо, Эфир из мира криптовалют, неважно).

Быки

И думаем. Вот он сейчас пойдет вверх. Что надо делать? Правильно. Берем деньги. Покупаем актив. Ждем пока подрастет. Продаем. Вуаля… профит!

Это называется играть в длинную (на повышение). В длинную играют быки.

А теперь вопрос.

Вот у нас есть деньги. И мы сейчас точно уверены, что актив на который мы смотрим упадет. Что нам нужно делать? Вопрос очень неочевидный…

Медведи

В общем… Нам нужно у кого-то взять этот актив в долг… (подсказка, у брокера). Быстро его продать по текущей цене, и сидеть ждать. Дождаться пока актив упадет в цене до понравившегося нам уровня, выкупить его и отдать брокеру.

Брали мы в долг что? Актив. Отдали что? Актив. Он подешевел? Подешевел. А значит у нас остались деньги после его повторной покупки.

По-умному это называется «Шортить» (играть на понижение). Шортят медведи.

Если все пойдет хорошо, то вы зарабатываете. Если вдруг актив начал расти, вы теряете. Потому что должны выкупить его в указанный срок вне зависимости от его цены.

Собственно, из этого и состоит вся торговля. И когда вас спросят что такое трейдинг, вы с умным видом начнете рассказывать про медведей, которые взяли у кого-то в долг!

А что там с margin call, и leverage?

Хорошо, перед собственно анализом, остановимся ещё и на этом. Ранее мы говорили, что можем взять у брокера в долг. Но это в «долг» не обязательно может быть «товаром для шорта». Мы можем взять у брокера и денег в долг.

Мем смешной. Ситуация страшная!

Но Брокер не дурак, и деньги даёт не просто так. Он позволяет ими торговать. И только в определенной пропорции к уровню вашего депозита.

Допустим. У вас есть 10 долларов. Брокер может дать вам 100 долларов (леверидж х10), и позволить на них торговать. Но при этом, брокер будет внимательно за вами следить. И автоматически пересчитывать уровень вашего депозита, в зависимости от движения котировки.

Ну вот к примеру. Решили вы купить что-то, что стоит доллар. На 10 долларов, вы можете купить этого 10 штук. И если оно поднимется в цене на 10%. Вы заработаете 1 доллар.

А теперь давайте представим, что у вас есть 100 долларов. Из которых ваших, только 10. Если что-то вырастет на 10%. То вы заработаете 10% от 100 долларов. Т.е. вы удвоите деньги от вашего реального капитала.

Но если вы оказались не правы, то и стоимость ошибки вырастает пропорционально. И активу достаточно упасть всего с доллара до 90 центов, чтобы вы потеряли все свои сбережения.

Рискованно, да. А чтобы в случае негативного движения, вы ещё и денег брокеру не остались должны. Существует Margin call. Это когда котировка достигает определенной отметки, и брокер принудительно закрывает вашу позицию, потому что иначе вы будете неспособны её оплатить.

Надеюсь, получилось доходчиво. Но попрошу вспомнить про «кухни, скрытые комиссии, заинтересованность брокера, контрагентство» и другие умные слова, которые я написал ранее о хороших и нехороших брокерах, чтобы подумать о том, как пользоваться левериджем (кредитным плечом).

Анализ. Технический. Фундаментальный. Экспериментальный.

Коротко о сложном:

1. Фундаментальный анализ — не анализ.
2. Технический анализ — тоже не анализ.

Но это не главное.

Главное — что любые выводы, и прогнозы сделанные при помощи «анализа», не дают 100% гарантии движения выбранной котировки в указанную сторону. Все. Ваше обучение трейдингу закончено. Можете идти торговать… шутка. Теперь к сути.

Фундаментальный анализ котировок на бирже

Фундаментальный анализ котировок — это анализ всех текущих параметров, влияющих на цену актива. Чаще его применяют в отношении «классических» и институциональных рынков.

Абстрактный пример. Допустим есть завод. Завод стоит денег. Завод выпускает товар. Товар стоит денег. У нас есть данные о стоимости завода. О его товаре. И о его обороте. И допустим у нас есть данные о зарплатах сотрудников и налогах. В общем мы знаем, сколько этот завод зарабатывает.

Дальше. Допустим этот завод выпускает 1.000 акций. И за 1.000 акций, он хочет. Ну допустим миллион долларов. Мы прикидываем, сколько стоит завод. Сколько он зарабатывает. Есть ли у него перспективы выпускать/зарабатывать больше. И сравниваем эту сумму с запрашиваемым миллионом.

Дальше у нас есть три сценария. Завод может быть недооценен, в этом случае его акции через время вырастут. Завод может быть переоценен, в этом случае его акции со временем упадут. Завод может стоить ровно столько, сколько он стоит, тогда они будут стоить дальше миллион за 1000 штук.

В реальности все сложней. У нас есть долговые обязательства. Объемы производства, реновации, перспективы, тонкости индустрии. Разные финансовые инструменты. Пыль в глаза и куча других параметров.

Но вся суть фундаментального анализа, это оценить условную компанию. И вычислить, дороже ли она, или дешевле чем должна стоить.

Лучше всего это описано у Р.Г. Хагстрома. И всякие крутые инвесторы (типа У.Баффета, покойного Сороса и пр.) только и делали, что оценивали компании по куче разных параметров, и покупали или продавали их акции в соответствии с результатами анализа. Не всегда верно. Но именно так это и работает.

Технический анализ и причем тут психология толпы

Технический анализ… Куда более веселая штука. В общем это психология в картинках. Вы показываете человеку бабочку. А он говорит, куда пойдет трейдинг курс криптовалют. Шутка конечно, но недалека от правды.

В общем, вся суть технического анализа сводится к психологии толпы. Толпа при схожих ситуациях ведет себя схожим образом.

Следовательно, если у нас есть 1000 похожих ситуаций, мы можем говорить о том, что вероятней всего в 1001-ый раз, все пойдет тем же путем.

Но есть проблема. У трейдера на руках, нет психологических портретов всех участников рынка. Да и сам он является участником рынка. Следовательно, лицо заинтересованное.

Ну и как при помощи картинок, определить что сейчас думает толпа?

1. По паттернам. Их называют фигуры.
2. По уровням. Поддержки и сопротивления.

Если грубо говоря. То в первом случае, мы приближаем и отдаляем график, в поисках разных «Плечиков», «треугольников», «кепочек», «тапочек» и других абстрактных форм. И по том, на каком этапе они рисования, предполагаем что дальше произойдет.

Треугольник. Пример тупой. Треугольник острый.

Как бы так объяснить попроще

Разберем на фигуре треугольника. Вот открываем мы график (не важно, свечной, или просто), и смотрим как у нас котировки вверх. Вниз. Вверх. Вниз. Но смотрим, что периоды между вверх и вниз, сокращаются. И зазор между ними все меньше.

Это означает, что «толпа», начала сомневаться в том, что текущие трейдинг курсы правильные. Они начинают бороться между собой. Те, кто торгуют на понижение, давят вниз. Те кто торгуют на повышение, жмут вверх. И в определенной точке, (в точке схождения треугольника), у нас происходит смена направления тренда. С переходом на следующий уровень.

Т.е. вот пока все шло в точку, у нас была борьба. Но потом «быки» или «медведи» победили, и у нас произойдет резкий (относительно) скачок котировок. К примеру, на картинке из интернета, мы увидели, что после схождения треугольника победили «быки», и трейдинг курс медленно но верно пошел вверх.

А ведь треугольник это довольно простой пример. В реальности. Используются разные виды скользящих средних, и инструменты помогающие выявить эти паттерны. К примеры по накладыванию скользящих средних разных таймфреймов (временных периодов торговли), можно как и при помощи треугольника определить смену тренда. (при пересечении разных скользящих, тренд измениться).

Итог. Инструментов анализа графика много. Все рабочие. Все нужно уметь использовать. Все отражают возможное действие толпы, на основании похожего паттерна.

Т.е. Весь этот анализ графиков, это всего лишь попытка переиграть такого же трейдера, находящегося по другую сторону экрана от вас. А отсюда следует простой вывод, который вы прочтете у каждого гуру на платном вебинаре. «Не играй против рынка, он тебя сожрет».

В общем. ЭЛДЕР. ЭЛДЕР. И еще раз Элдер!

Волновой анализ Эллиота. Эзотерический. С использованием пентаграм.

Волновой анализ, это очень странная штука. Это просто набор формул, по которым смотрит трейдер, и вычисляет в рамках какой волны какого потока сейчас находится рынок, и что вот он обязательно сейчас откатиться на 12-ую волну 45-го потока, а значит время покупать.

Выглядит как бред сумасшедшего. Звучит как бред сумасшедшего. НО. Народ использует волновой анализ, и при этом успешно торгует. Не все, но адепты которые в нем разобрались, говорят что эта эзотерическая штука работает.

А если работает — не тронь. Я пытался разобраться в волновом анализе. Но сломался. Поэтому подробней рассказать о нем не могу.

Могу посоветовать только В. Сафонов. «Практическое использование волн Эллиотта в трейдинге».

Ой на опасную же дорожку я встал. В общем. Все активы работают на пересечении фундаментального и технического анализа.

Т.е. есть реальная цена, к которой стремиться актив (по фундаментальным показателям), и настроения рынка, которые могут изменить направление (технические параметры). Обычно на этих пересечениях и осуществляется движение.

Так вот, бытует мнение, что у криптовалют нет фундаментального фактора. Ведь их:

1. Никто не регулирует.
2. Никто не контролирует.

И их цена может быть такой, какой захотят участники рынка. И якобы этим объясняется то, что вчера биткоин стоил 2 доллара, а завтра 50 тысяч. Но здесь все не совсем так.

Т.е. да, настроения рынка, сильно преобладают над фундаментальными факторами. Но это все исключительно за счет малой ликвидности рынка.

Ликвидность — способность быстро обращать товар в деньги. И обратно.

В общем. Если простыми словами. То рынок криптовалют, та ещё черепаха. И когда 100 человек хотят продать биткоин, а только 10 хотят его купить, и у рынка нет тормозов, то происходит большое, большое падение, пока не найдется ещё 90 желающих купить биткоин уже по новой цене. Тоже касается и покупки. А из-за того, что оно все децентрализованное, да ещё и по непроверенным биржам сложено, да ещё комиссии майнерам. В общем, реально, каждый кто решит продать или купить биткоин, рискует обвалить рынок. Это конечно преувеличение, но близкое к правде.

Так вот… фундаментальный фактор ценообразования. Говорят, что его нет. Но он есть. Как суслик!

У криптовалюты, нет прямого регулятора, который придет и скажет трейдерам «биткоин не может стоить дешевле доллара», но есть:

1. Усилия майнеров по поддержанию сети.
2. Амортизация оборудования и повторные невозвратные инвестиции.
3. Сложность вычислений самой сети.
4. Комиссии по передаче средств внутри сети (а не внутри этих ваших бирж).

В общем. Есть… какое-то… реальное… количество… бумажных денег… которые заморожены в крипте и/или оборудовании. Все эти бумажные деньги, являются «якорной ценой», ниже которой криптовалюта не падает.

Это не значит, что она не может упасть. Она может все что угодно. Эти факторы вторичны. Но все майнинговые фермы. Заводы, производящие оборудование. Дата-центры. Биржи, и пр. рассчитывают все исходя из этой якорной цены.

Рассчитав 100-ни параметров, можно пока-что, смело утверждать, что вот ниже «этой вот точки», криптовалютный рынок дальше не упадет. Но что будет послезавтра, нужно пересчитывать завтра.

Но технически якорная цена существует, и если вы институциональный инвестор, то вам будет полезно её знать, чтобы видеть «дно, откуда постучаться снизу»

Манименеджмент. Серийный. Несерийный. Сложный.

Манименеджмент. Уфф… Это очень сложная и простая штука одновременно. Ладно. Давайте перестанем говорить о трейдинге. И представим… Что мы в казино!

Серийный ММ

Перед нами рулетка. И на ней есть только красное и черное. И в кармане у нас, опять 10 фишек по доллару. Допустим мы поставили на черное. И оно не сработало. И у нас осталось 9 долларов. Что мы должны сделать, чтобы отыграться и выйти в плюс?

Правильно — поставить 2 доллара (не важно на черное или на красное). И если мы угадали. Мы отыграли наш проигрыш, и можем начинать сначала. Если не угадали. То надо ставить 4 доллара. Чтобы отыграть весь проигрыш, и заработать доллар сверху.

Так вот — эта штука называется Мартингейл. И она яркий представитель, серийных систем управления риском. Есть ещё антимартингейл, пирамида, треугольник и прочие. Но суть всегда в том. Что наше следующее действие, базируется на результатах предыдущего.

Мартингейл выглядит идеальным (и многие памм счета его используют), но давайте зададим вопрос. Допустим у вас есть 1000 долларов. Сколько ошибок подряд вас обанкротят?

9 ошибок подряд достаточно, чтобы полностью обнулить свой счет мартингейлом. А с другой стороны, все что мы делаем, это зарабатываем 1 доллар. В теории, имея бесконечное количество денег. Мартингейл всегда в выигрыше. Но денег не бесконечно.

Фиксированный ММ

С фиксированными системами управления капитала все проще. У вас есть 100 долларов. И вы торгуете (или играете в рулетку) фиксированным процентом от ваших денег. Допустим это 10%. Значит на первую ставку вы можете поставить 10 долларов. В случае удачи, сможете поставить на следующую ставку 11 долларов. В случае неудачи 9.

Там есть определенные рычаги, и коэффициенты. Которые считаются оптимальными:

1. От депозита.
2. От волатильности.
3. От выставленных стопов.
4. От стиля торговли.
5. От размера депозита.

Но все сводится к фиксированной фракции, которую вы один раз рассчитали, и по ней ставите.

Сложные виды ММ. Фиксировано-пропорциональная фракционная торговля

Помните нашу аналогию про «казино»? Забудьте! Теперь вы пони на лугу, который ест травку.

Вот так, можно максимально просто объяснить, что такое фиксировано-пропорциональная фракционная торговля. Ну или можно почитать «Райан Джонс. Биржевая Игра».

Если предельно упростить. То это одна из моделей гибрида, который больше похож на «фиксированную ММ», но с элементами пересчета, который учитывает динамику роста депозита в дальнейшем.

Грубо говоря, это определенный компромисс, который использует вашу серийность, и при увеличении вашего депозита увеличивает риски (потому что вы это можете себе позволить), а при снижении вашего депозита от условной базы. Снижает риски.

Зачем нужен ММ?

Здесь должны быть выводы. Рекомендации какой ММ лучше, на каком рынке как использовать. Все это чушь. ММ нужен для одной простой вещи.

Есть несколько основных стратегий торговли. Одна из самых популярных «следование за трендом». Когда вы при помощи инструментов технического анализа, находите точку входа в тренд, и держитесь её, потом находите точку выхода из тренда, и зарабатываете миллион.

Есть только одна проблема. Технический анализ настолько точный. Что 9 из 10-ти ваших прогнозов, скорее всего будут убыточными (а если вы новичок, то и 9 из 9-ти). Задача МаниМенеджмента, распределить ваши деньги таким образом, чтобы вы пользуясь всего одним удачным прогнозом, смогли перекрыть все убытки, и заработать деньги.

То есть, чтобы вы не слили все до тех пор пока не сделаете главный прогноз. И это та штука, о которой вам обычно не говорят ни брокеры, ни успешные трейдеры, никто. Что именно ММ, позволяет им не слить весь депо.

А те трейдеры, которые не пользуются ММ. Обычно быстро сгорают. Да, быстро делают много денег. И потом также быстро их теряют (знаю минимум 4-х таких, лично).

Психология… Или математическое ожидание?

Так… Сейчас о серьезном. Вообще, над психологией принято ржать в трейдинге. Каждый гайд вам будет рассказывать о «азарте», из-за которого вы сливаете депо. О «страхе», который не позволяет вам заработать даже если вы идеальный аналитик. И о прочих «эмоциях».

В реальности психология должна решить две проблемы.

Абстрагироваться

Первая. И главная. Одна должна помочь вам абстрагироваться от удержания убыточной сделки. Это самый главный бич, из-за которого сливаются депозиты. Вот сделали вы неправильный прогноз. И все, рухнул биток. Что делать нужно? Правильно — закрыться пока не потеряли последние штаны. Но по большей части народ будет сидеть, и ждать «а вдруг туземун», брать кредит, чтобы не получить «margin call», продавать квартиру, сдавать тещу на органы. Ну в общем вы поняли. А нужно взять и отпустить, как бороду!

Вот этот вопрос решает психология. Там куча методов, уловок, секретов, рассказов, бизнес-идей и прочей мути.

Управление своими деньгами

Вторая проблема, которую закрывает психология, отвечает на вопрос, почему я сейчас пишу для вас эту статью, а не зарабатываю миллионы на своих знаниях (а у меня поверьте их, мягко скажем до… много в общем). И это проблема управления деньгами.

Т.е. пока я сижу и смотрю на рынок со стороны, я такой беру графики, смотрю на инструменты, и делаю неплохие прогнозы (ну они сбываются). А вот дай мне денег, и скажи торгуй… Все руки трясутся. Все возможные сценарии в голове проносятся. Уже думаю, как я буду расплачиваться почкой, если вдруг просажу чужие деньги. И вообще, а может выйти из позиции раньше. А может зайти позже?

И возможно я даже не ошибусь, и сделаю все правильно. Но эта штука настолько «вымораживает», что иной раз проще смириться и не торговать вовсе. Чем сидеть и плакать из-за потерянных 100 долларов на бирже.

Ну в общем. Эти две вещи и закрывает Психология. Но Психология, она для новичков. Есть путь самурая. И он называется «расчет математического ожидания, и коэффициентов происходящих событий».

Секретная «джедайская» методика, которой не пользуются даже профессионалы

В общем «расчет математического ожидания», это очень крутая штука, которая может

1. Пересчитать всю стратегию управления капиталом
2. Решить все проблемы с психологией.
3. При хорошо выверенном анализе зарабатывать деньги.

Там есть много формул. Подробней «Куртис фейс. Путь черепах». В чем суть.

Суть в том, что мы садимся перед листком, монитором, не важно, и смотрим на график. На графике мы всегда видим 2-3 сценария событий. В любой закрытый канал по трейдингу зайдите и сами увидите, как их аналитика на деле выглядит.

В общем. Мы берем, и прикидываем, исходя из текущего графика, нашего опыта, инструментов и индикаторов вероятность обоих событий. График вверх 35%. График вниз 65%. И каждому из этих событий выставляем весовые коэффициенты.

И дальше в соответствии с этими коэффициентами мы и действуем. Мы можем торговать сразу в обе стороны (чего делать вообще нельзя, но можно, речь идет о самохеджировании, которое крайне убыточно из-за комиссий). В общем математическое ожидание, позволяет снизить риски, за счет того, что вы будете играть в обе стороны, но делать не равноценные покупки/продажи активов, а в соответствии с рассчитанными коэффициентами.

А позицию, которая не оправдала ожидания, главное вовремя закрыть.

Звучит надуманно. Но просто представьте, сколько трейдеров:

1. Теряет деньги из-за неправильного ММ.
2. Теряет деньги из-за эмоций, или боязней открыть/закрыть сделку вовремя.

А тут у вас панацея. Система, которую вы прикрепляете к своему анализу, и работаете в обе стороны. Да она съедает часть вашего дохода, но она же при этом избавляет вас от всех потенциальных ошибок.

Осталась ерунда какая-то. Научиться торговать. Да и все. К математическому ожиданию, кстати приходят многие трейдеры, которые достаточно долго на рынке. Кто-то к ней приходит интуитивно, и рассчитывает всё «на глаз», кто-то рассчитывает прямо по формулам. Но люди, которые на рынке годами, и даже десятилетиями (и все это время работают в плюс), так или иначе используют расчет математического ожидания движения котировки.

О чем не рассказали

Так, в общем… Итак очень много букв. Надеюсь кто-то дочитает. Все рассказать о трейдинге в одной статье. Да ещё простыми словами, да ещё и так, чтобы дочитали до конца… Ну сами понимаете…

Так вот, чего не затронул, но лучше бы вам с этим ознакомиться:

1. Методика анализа шума (для скальпинга и коротких таймфреймах).
2. О том, что такое вообще скальпинг и таймфреймы.
3. Почему инвестор не будет трейдером. А трейдер инвестором. (разные цели).
4. О корреляции и транзитности некоторых криптовалют.
5. О Свечах. О свечах не рассказал. Это важно для анализа!
6. О том, что не лезьте в бинарные опционы. Если вы научились чему-то кроме «рулетка и мартингейл», то трейдинг для вас будет эффективней чем бинарные опционы.
7. О повышении волатильности в условиях новостной торговли.
8. О волатильности. О новостной торговле.

В общем, много чего не рассказал… обидно, но я думаю, тот кто ищет, тот найдет. Плюс, более подробно, с иллюстрациями, примерами.

Где искать? Я бы посоветовал книги. Потому что в отличие от разных сайтов, баз знаний брокеров, и про, авторы книг не сильно заинтересованы в ваших деньгах, и могут себе позволить пространные объяснения на 25 страниц, о том, что такое короткий хвост у японской свечи.

Вместо итогов. План действий начинающему трейдеру

Итак, допустим, ты захотел стать трейдером. Прочитал мои 5.000 слов и такой «ну нафиг все это. Сложно.» И в принципе будешь прав. Но если ты все таки решишься идти дальше. Вот несколько советов.

1. Не торопись читать все те книги. Они тебе пригодятся, но чуть позже.
2. Выбери ментора, кто поможет тебе структурировать обучение и ответить на волнующие вопросы.
3. Открой центовый счет на любой интересующей тебя бирже. Влей туда 5 долларов. И поиграй. Проиграешь, выиграешь не важно. Поймешь вообще, как все работает изнутри.
4. Потом подбери хорошего брокера. Если это крипта, тут сам решай. Если нет, то что-то с регулятором внутри твоей страны, а не в оффшоре.
5. Открой где-нибудь демо-счет.
6. Открой Ru.investing.com.
7. Сравни котировки в терминалах. (с точностью до 5-го знака после запятой. Это важно!)

После этого, можешь начинать потихоньку торговать. Можешь смотреть разную аналитику. Учить базу по книгам. Но есть нюанс. Если ты выучил где-то, безумно крутую стратегию, с которой ты завтра уже станешь миллионером, и будешь сидеть на берегу моря и ничего не делать… Проверь её на демо-счете, хотя-бы с недельку. И посмотри, получается ли у тебя с ней.

Даже натренировавшись хорошо на демонстрационном счете, будь аккуратен. Вливай на новую биржу немного денег. Возможно ты страдаешь той же болезнью что и я, и будет хорошо, если ты узнаешь об этом на 100 долларах, а не на 1000.

Ну а там уже в процессе, ты и про осцилляторы узнаешь, и ММ-ку себе подберешь, и возможно мат-ожидание рассчитаешь. Подберешь рынок, стиль торговли, тайм-фреймы. Углубишься в теорию, обожжешься на «копировании сделок», своим умом дойдешь, что мартингейл не выход, подберешь наконец инструменты, которыми ты сможешь управлять…

Помни просто, что трейдер это не про золотые горы. Это больше про бизнес. Где ты потихоньку покупаешь/продаешь, пользуясь своими знаниями. И постепенно наращиваешь капитал. Наращиваешь, наращиваешь. А потом обнаруживаешь, что можешь что-то вывести, и на это жить. Но до этого у тебя ещё долгий путь!

• трейдинг это
• трейдинг
• что такое трейдинг
• трейдинг обучение
• трейдинг с нуля
• обучение трейдингу
• Фондовый рынок
• Валютный рынок
• трейдинг курсы
• облигации это

• Финансы в IT
• Криптовалюты

фондовый рынок

Китайские акции упали до самого низкого уровня со времен до пандемии Covid-19, поскольку последние усилия Пекина по поддержке фондового рынка не смогли остановить распродажу, вызванную замедлением роста ВВП, кризисом ликвидности в секторе недвижимости и геополитической напряженностью.

23 октября 2023, 19:09 — Новости

Лондон вернул себе корону крупнейшего фондового рынка Европы, обойдя Париж, который был крупнейшей европейской биржевой площадкой с ноября 2022 года.

19 октября 2023, 13:55 — Новости

Финансирование терроризма, скрытый банк и заблокированные активы. История одного из крупнейших игроков фондового рынка, который почти год находится под санкциями. (укр)

5 сентября 2023, 10:30 — Публикации

Один из крупнейших банков Уолл-стрит JPMorgan Chase, опираясь на свою модель, прогнозирует, что вероятность экономического спада, заложенная в цены на финансовых рынках, на самом деле резко снизилась по сравнению с максимумами 2022 года.

21 января 2023, 17:00 — Новости

Значительные падения на рынках акций и облигаций за 2022 год впервые за всю историю снизили общую стоимость мирового государственного капитала и государственных пенсионных фондов на 2,2 трлн долларов.

1 января 2023, 18:00 — Новости

Вторжение РФ в Украину привело к падению российских акций — на конец 2022 года акции РФ подешевели сильнее, чем другие бумаги во всем мире.

19 декабря 2022, 11:10 — Новости

Корпорация Microsoft купит 4% акций Лондонской фондовой биржи (LSE) в рамках десятилетнего партнерского соглашения.

12 декабря 2022, 16:17 — Новости

Мировые акции снизились в среду на фоне того, как ведущие банкиры с Уолл-стрит предупредили о высокой вероятности рецессии, сдерживая оптимизм относительно смягчений COVID-ограничений в Китае.

7 декабря 2022, 12:35 — Новости

Акции на азиатском рынке потерпели сильнейшее падение за последние две недели, в то же время доллар вырос на оптимистичных данных по экономике США.

6 декабря 2022, 11:15 — Новости

Что такое индивидуальные инвестиционные счета, и как они помогут стимулировать украинцев инвестировать в развитие экономики? (укр)

Дмитрий Вербицкий
руководитель проекта инвестиционных продуктов в ПАО «МТБ БАНК»
30 ноября 2022, 17:39 — Колонки

Фондовый индекс S&P 500 во вторник упал до самого низкого уровня почти за два года из-за беспокойства по поводу суперагрессивного усиления политики ФРС США.

28 сентября 2022, 10:12 — Новости

На новостях об объявлении оккупантами «референдумов» о присоединении к России захваченных территорий Донецкой, Луганской, Херсонской и Запорожской областей на российских фондовых биржах наблюдается значительный обвал.

20 сентября 2022, 16:40 — Новости

Что скрывается за «успешными брокерами», обещающими бешеную доходность, и как не попасть на крючок к аферистам. (укр)

6 сентября 2022, 10:15 — Публикации

С 8 августа Национальная комиссия по ценным бумагам и фондовому рынку снимает почти все ограничения на осуществление сделок на рынках капитала и организованных товарных рынках, которые были введены с началом большой войны

4 августа 2022, 19:55 — Новости

Доллар впервые за 20 лет сравнялся с евро. Как этот тренд влияет на переоценку активов в разных регионах и к каким экономическим последствиям приведет ? (укр)

Максим Корецкий
финансист, основатель Blackshield Capital AG
2 августа 2022, 18:48 — Колонки

Наблюдательный совет Мосбиржи рекомендовал годовому общему собранию акционеров не выплачивать дивиденды за 2021 год.

29 марта 2022, 16:23 — Новости

На торгах 29 числа на Мосбирже помимо всех бумаг из российской юрисдикции, добавятся еще российские бумаги из иностранных юрисдикций.

28 марта 2022, 22:21 — Новости

На Мосбирже после открытия с возможностью торговать всеми российскими бумагами стоимость акций большинства компаний снизилась, а индекс биржи также просел.

28 марта 2022, 16:05 — Новости

Центробанк решил, что до следующих торгов на Московской Бирже будут допущены российские акции, российские корпоративные региональные и муниципальные облигации, а также иностранные акции.

26 марта 2022, 13:13 — Новости
Рынок акций РФ завершил торги в пятницу откатом, индекс МосБиржи упал на -3,7%, индекс РТС на 2,7%.
25 марта 2022, 14:29 — Новости

Индекс Московской биржи по итогам первого дня торгов, после месячного перерыва, вырос на 4,43%. Индекс РТС закончил день падением, снизившись на 9,11%.

24 марта 2022, 14:35 — Новости

После почти месячного перерыва Центробанк принял решение возобновить торги на рынке акций Мосбиржи 24 марта.

23 марта 2022, 14:23 — Новости

Фондовый индекс S&P 500 закончит 2022 год примерно на 1% ниже текущих уровней, поскольку цены на сырье растут, а перспективы глобального экономического роста ослабевают на фоне вторжения РФ в Украину.

14 марта 2022, 17:17 — Новости

Банк России принял решение не возобновлять торги в период с 14 по 18 марта 2022 года на Московской Бирже в секции фондового рынка

12 марта 2022, 19:44 — Новости

Банк России решил не возобновлять торги на Московской бирже 9 марта в секциях фондового и срочного рынков

9 марта 2022, 08:47 — Новости

Правительство Украины будет просить Конгресс США запретить корпорациям, уплачивающим налоги в России, доступ к фондовому рынку США

8 марта 2022, 08:20 — Новости

Отток инвестиций с акций европейских компаний достиг 6,7 млрд долларов за неделю, закончившуюся 2 марта.

4 марта 2022, 11:42 — Новости

Индекс Nasdaq Composite упал на открытии 24 февраля на 449,61 пункта, или 3,45%, до 12 587,88 пункту после того, как Россия начала полномасштабное вторжение в Украину

24 февраля 2022, 17:10 — Новости

Дальнейшее обострение ситуации на Донбассе может замедлить восстановление мировой экономики после коронакризиса. Как российская агрессия влияет на международные рынки? (укр)

23 февраля 2022, 09:45 — Публикации

Январь 2022 года стал худшим началом года со времен финансового кризиса для американского фондового рынка

1 февраля 2022, 19:53 — Новости

Главные новости

Украинские «шахеды», снаряды и коррупционные лазейки в Укроборонпроме. Интервью с директором Германом Сметаниным

Что изменилось в работе госхолдинга с появлением нового руководителя, какие приоритеты в производстве оружия, беспилотников и что происходит с ракетной программой. (укр)

6 ноября 2023, 08:00 — Богдан Мирошниченко, Дмитрий Денков

Украина теряет валюту из-за «черного» зерна. Как власти пытаются перекрыть схемы с экспортом урожая

Миллиарды долларов не возвращаются в страну. Как недобросовестные экспортеры выводят валюту из Украины и почему правоохранители, Нацбанк и правительство только сейчас начали активно бороться со схемным экспортом зерна. (укр)

1 ноября 2023, 08:00 — Ярослав Винокуров, Дана Гордийчук

Украинскую голубику cмакует Люксембург. Как ягода с Житомирщины ворвалась на европейские рынки

Украинская компания «Никдария» переориентировалась с азиатских рынков на ЕС и теперь поставляет голубику в супермаркеты Испании, Германии и других европейских стран, обходя Польшу. История ягодного экспортера. (укр)

23 октября 2023, 09:00 — Владимир Рыхлицкий

© 2005-2023, Экономическая правда. Использование материалов сайта возможно лишь при условии ссылки (для интернет-изданий — гиперссылки) на «Экономическую правду».

Все материалы, размещенные на этом сайте со ссылкой на агентство «Интерфакс-Украина» , не подлежат дальнейшему воспроизведению и/или распространению в любой форме, иначе как с письменного разрешения агентства «Интерфакс-Украина».

Материалы с плашкой PROMOTED и НОВОСТИ КОМПАНИЙ являются рекламными и публикуются на правах рекламы. Редакция может не разделять взгляды, которые в них промотируются.

Материалы с плашкой СПЕЦПРОЕКТ и ПРИ ПОДДЕРЖКЕ также рекламные, однако редакция участвует в подготовке этого контента и разделяет мнения, высказанные в этих материалах.

Редакция не несет ответственности за факты и оценочные суждения, изложенные в рекламных материалах. Согласно украинскому законодательству ответственность за содержание рекламы несет рекламодатель.

• Реклама на сайте
• О проекте
• Обратная связь

Облачная SaaS-платформа РИТЕЙЛИКА. Блог компании.

Мониторинг цен конкурентов в торговых точках и интернете

Upd: 26.11.2021 35842 0
Поделиться
Поделиться

• мониторинг цен конкурентов
• парсинг цен конкурентов
• анализ цен конкурентов
• исследование цен конкурентов
• изучение цен конкурентов
• сравнение цен конкурентов
• контроль розничных цен
• мониторинг цен оффлайн

В современных, зачастую жестких и непримиримых, «на грани фола» условиях ведения бизнеса, никакая серьезная конкурентная борьба невозможна без отслеживания и анализа тех или иных аспектов деятельности конкурентов. И в первую очередь это касается всестороннего мониторинга ценовой политики других игроков рынка с целью недопущения получения ими каких-либо серьезных преимуществ и последующего оттока потенциальных покупателей по причине более выгодных цен. Конечно, помимо более низких и выгодных с точки зрения покупателей цен, дополнительными факторами конкурентной борьбы являются развитые системы лояльности, включая различные скидки, акции, бонусы и распродажи. Также свой вклад вносят и удачные рекламные мероприятия, особенно те, которые в открытой или завуалированной форме «обстебывают» и выпячивают любые недостатки конкурентов. Однако вне всяких сомнений – именно наиболее выгодная цена является тем ключевым мотиватором, фундаментом и своеобразным «краеугольным камнем», на котором чаще всего и базируется финальное желание покупать у вас или у вашего конкурента.

Зачем нужен мониторинг цен конкурентов?

Отслеживание и контроль розничных цен «оффлайн»

Автоматическое распознавание ценников

Парсинг сайтов интернет-магазинов и прайс-площадок

Способы защиты от парсинга и методы их обхода

Юридические аспекты и сложности мониторинга цен

Зачем нужен мониторинг цен конкурентов?

Регулярно проводимый мониторинг и анализ цен конкурентов предназначен для удержания под неусыпным контролем ценовой политики других участников рынка. Цель данного мероприятия — это получение информации для своевременной реакции на действия тех, кто путем демпинга и прочих ценовых ухищрений пытается вытеснить других игроков, существенно нарастить свое присутствие в занимаемой нише и увеличить объем продаж. Сбор данных о ценовой политике конкурентов позволяет не только всесторонне изучать стратегию ценообразования наиболее успешных и «топовых» компаний на рынке, но и по косвенным признакам своевременно выявлять игру на понижение цен, а также наличие «специальных прайсов» и «особых условий» на те или иные позиции, а также целые группы товаров.

К примеру, у двух конкурирующих между собой и примерно равных по объемам продаж компаний имеется единый поставщик, который отгружает свой товар и тем и другим. При проведении мониторинга цен, инициированным одной из компаний (назовем ее – «А»), выясняется, что розничная (отпускная) цена у конкурирующей компании (назовем ее – «Б») на определенный товар равна той цене, по которой поставщик отгружает свой товар компании «А». Т.к. наценка на товар вряд ли может быть нулевой или отрицательной, и мы не рассматриваем примеры компаний, которые в погоне за объемами продаж и своей капитализацией «покупают за рубль, а продают за 90 копеек», это может означать что у конкурирующей компании «Б» имеются какие-то особые привилегии и условия на данный товар. Цена поставки данного товара для компании «Б» ниже, чем для компании «А». Все это позволяет компании «Б» устанавливать такую наценку, которая уравнивает розничную цену с ценой закупа для компании «А».

Конечно, если учитывать, что данные по цене были получены некорректные, например, сработала хитрая защита от «парсинга» интернет-магазина, или цена в каталоге на сайте одна, а при оформлении заказа из корзины уже совсем другая и т.д. Либо, если речь идет о сборе цены в торговой точке, выяснилось, что на самом деле сотрудники магазина попросту забыли или не успели обновить ценник. Однако если отбросить эти факторы, отмести в сторону идею целенаправленного демпинга и признать достоверность собранных данных, то получается, что у компании «А» есть весомый повод призадуматься по поводу своей ценовой политики и собственных поставщиках.

Стоит также отметить, что анализ и сравнение цен конкурентов становится особенно актуальным для многих региональных ритейлеров, которые зачастую не в силах сопротивляться продолжающейся экспансии со стороны крупных федеральных сетей без применения современных информационных технологий и сервисов. В последнее время идет массовое поглощение даже крупных и финансово устойчивых региональных игроков, которые проигрывают «федералам» прежде всего по части ценовой политики, которая вовремя не отслеживается и не корректируется с учетом изменений цен других участников рынка.

Многие специализированные СМИ пестрят сообщениями о внезапно прошедших или планирующихся поглощениях. Поглощаются даже достаточно крупные сети, закрываются старейшие магазины, которые были открыты десятки лет назад, и только потому, что неподалеку появляется магазин, супермаркет или гипермаркет федеральной сети. По нашему опыту и по опыту наших клиентов из числа региональных сетей, одним из действенных способов стойко «держать оборону» в ценовых войнах, успешно сопротивляться демпингу и параллельно контролировать качество работы своей компании — это активно использовать сервисы мониторинга цен конкурентов, систематически выполнять аудиты магазинов и удаленных филиалов компании по электронным чек-листам, а также «держать руку на пульсе», отслеживая лояльность покупателей по методу NPS.

В том время как розничные сети борются в «оффлайне» со своими локальными конкурентами и с экспансией федеральных сетей, у интернет-магазинов проблема мониторинга и сравнения цен намного более насущная и актуальная. Почему? Потому что в случае продуктовой розницы, покупатель вряд ли поедет в другой магазин из-за более высоких цен на отдельные товарные позиции в своей корзине, особенно если торговая точка расположена в относительном удалении. На такие «подвиги» обычно способны люди, у которых серьезно ограничен бюджет и/или есть масса свободного времени. Работающий человек, особенно живущий в мегаполисах с их постоянными пробками и толпами людей, в условиях нехватки времени, и что греха таить, природной лени, вряд ли пойдет или поедет куда-то еще из-за пачки творога или упаковки спагетти, которая дешевле на 5-10 рублей.

Но это все касается крупных городов, а в городах с меньшим населением, где помимо локальных игроков на рынок активно «вклиниваются» федеральные сети, т.е. там, где на единицу площади наблюдается высокая плотность распределения магазинов конкурентов – без системы мониторинга цен никак не обойтись. Что же касается интернет покупок, то покупатель, который ищет и заказывает что-то в интернет-магазине, будь то новая «плазма», одежда или напольное покрытие, легко может открыть хоть десять вкладок в своем браузере и сидя в комфортной обстановке, не торопясь, сравнивать между собой цены в разных интернет-магазинах. Ну и конечно же, многие первым делом начинают поиск практически любых товаров на сайтах-агрегаторах цен, таких как Яндекс Маркет, где помимо возможности прицениться, они могут получить дополнительную информацию по техническим характеристикам, посмотреть фотографии, почитать отзывы других покупателей и т.д.

Грамотное ценообразование с постоянной оглядкой на ценовую политику конкурентов – это основа и фундамент хороших продаж, где оптимально уравновешено желание продавца продать, а покупателя купить товар по выгодной для обеих сторон цене. Иными словами, розничная цена на товар должна быть таким образом сбалансирована, чтобы продавец мог получить максимально возможную прибыль, а покупатель при этом не выбрал предложение конкурента. На продажах, особенно проводимых «онлайн» способом, не в последнюю очередь сказывается фактор установленной цены, а также то, какую цену на товар устанавливают конкуренты.

Часто бывает, что даже небольшая разница в цене, при прочих равных условиях (доставка, бонусы лояльности, отзывы на Яндекс Маркете и т.д.), может привести к тому, что товар приобретут у конкурентов. Поэтому контроль розничных цен, проводимый на регулярной основе как в «оффлайне» (торговых точках), так и в «онлайне» (интернет-магазине), направлен в первую очередь на то, чтобы:

• Установить сбалансированную и оптимальную (наиболее выгодную для себя) розничную цену на товары;
• Спланировать и скоординировать общую ценовую политику компании;
• Определить момент наступления необходимых условий, при которых возможно предоставление бонусов и скидок;
• Оказывать своевременное «ценовое давление» и «прессинг» на конкурентов;
• Отсеивать и фильтровать поставщиков, работая только с теми, кто предоставляет наиболее выгодные условия;

Кто же является основными потребителями услуг в рамках всестороннего исследования цен конкурентов? Это в первую очередь сотрудники коммерческого отдела компании, категорийные менеджеры, бренд-менеджеры, а также сотрудники отдела закупа и поставщики. У каждой из перечисленных категорий есть свои цели и задачи, неразрывно связанные с оперативным получением и обработкой больших массивов информации по товарам и ценам. В современных условиях ведения конкурентной борьбы, тот, кто в информационном плане лучше других «вооружен» различными сервисами и инструментами – тот и получает максимальное конкурентное преимущество, выигрывая войну за кошелек покупателей.

Отслеживание и контроль розничных цен «оффлайн»

С учетом сложившихся трендов на смещение фокуса торговли в «онлайн» и массового запуска интернет-магазинов даже старейшими компаниями, давно и прочно обосновавшимися на «оффлайн» рынках, на сегодняшний день существует несколько распространенных способов изучения цен конкурентов: непосредственный сбор данных в торговых точках и «парсинг» сайтов. В последние годы на рынке появилось определенное количество специальных веб-сервисов, которые предлагают автоматический сбор цен с сайтов интернет-магазинов, а также с сайтов специализированных товарных агрегаторов, прайс-площадок и маркетплейсов.

Однако среди них нет тех, кто бы предлагал комплексный подход, предоставляя возможность в одном сервисе не только «парсить» сайты, но и удобным способом собирать данные «в полях», т.е. в торговых точках. Ведь ни для кого не секрет, что цены в интернет-магазине и торговых точках могут существенно различаться, а некоторые позиции, продающиеся в магазинах, могут по тем или иным причинам отсутствовать в каталогах на сайте. Кроме того, в некоторых сферах бизнеса, к примеру, в продуктовом ритейле, многие компании не считают нужным или экономически обоснованным запускать интернет-магазины, поэтому единственным способом хоть как-то выполнить контроль розничных цен конкурентов — это получить в свое распоряжение прайс-лист или пойти в магазин и собрать данные любым доступным способом.

Некоторые компании, за неимением лучшего, до сих пор используют такие «архаичные» инструменты как блокнот или тетрадь, куда вписывают цены, перебивая потом все это вручную в Excel для получения сводных таблиц. Другие пытаются наговаривать цены в диктофон, либо использовать какие-либо вспомогательные сервисы или программы, которые позволяют хоть как-то фиксировать данные не на бумаге. Третьи для сбора информации успешно используют специальные облачные сервисы, экономящие значительное количество денег, времени и сил. Данные сервисы позволяют легко фиксировать цены конкурентов с помощью мобильных устройств, отслеживая геолокацию посещений и автоматически синхронизируя собранные данные «в облако». Удобство использования собственных мобильных устройств позволяет сотрудникам выполнять в два, а то и в три раза больше «обходов» торговых точек конкурентов, при этом также полностью отпадает необходимость ручного переноса данных в удобную для анализа форму.

Вся собранная информация становится доступной руководству и сотрудникам коммерческого отдела компании в личном кабинете на сайте сервиса, где можно формировать сводные отчеты, выгружать данные в Excel в «сыром виде» и получать прочие метрики, связанные с анализом ценовой политики конкурентов. Учет цен с помощью мобильных устройств, находящихся «на руках» собственных сотрудников и внештатных исполнителей в рамках специального облачного сервиса, позволяет унифицировать метод сбора данных и исключить разнородные источники информации, которые придется потом стыковать и интегрировать в единое целое. Такой подход весьма выгоден компании по ряду причин, указанных выше, касающихся существенной экономии людских и временных ресурсов.

Как устроены подобные сервисы? В мобильном приложении, помимо фиксации цены товара, специалист, который выполняет мониторинг, может дополнительно приложить фотографии ценника и добавить любое количество сопутствующих комментариев. Отсутствующий товар может помечаться опцией «нет данных», а позиции, которые являются необязательными для мониторинга – могут пропускаться. Помимо имеющегося поиска товаров по наименованию и артикулу, встроенная функция сканирования штрихкода на ценнике позволяет быстро отфильтровать объемный список SKU по соответствующему товару и выполнить автоматическое позиционирование на найденной позиции.

Акционный товар может дополнительно помечаться опцией «акция», а те позиции конкурента, цена на которые отличаются от розничной цены компании на определенный процент, могут иметь дополнительную опцию обязательности прикладывания сопутствующей фотографии и/или комментария. Стоит отметить, что процент отклонения цены для каждой позиции сугубо индивидуален и зафиксирован в общем списке товаров для мониторинга. Сбор данных в торговых точках конкурентов может выполняться полностью в автономном режиме, при этом собранная информация будет автоматически синхронизирована в «облако» в тот момент, когда появится доступное интернет соединение.

Мониторинги могут быть заранее запланированы на сайте сервиса. Планы обычно создаются либо по выбранным торговым точкам, либо по регионам или брендам конкурентов. Планированием и распределением планов по исполнителям обычно занимается специально выделенный сотрудник-координатор из коммерческого отдела или специального отдела мониторинга. Запланировать мониторинги можно также по собственным магазинам, при этом планы будут созданы только по тем торговым точкам конкурентов, которые по своим географическим координатам попали в «радиус конкуренции» выбранных собственных магазинов.

Радиус конкуренции настраивается в сервисе каждой компанией индивидуально на глобальном уровне, и может составлять от 200 метров до нескольких километров в зависимости от масштаба розничной сети и ее «плотности» распределения по территории. Созданные планы могут быть назначены также на конкретного исполнителя. Мониторинги также могут «спонтанно» создаваться прямо в мобильном приложении без предварительного создания плана на сайте сервиса.

Исполнителями, или т.н. «монитористами», могут выступать как штатные сотрудники компании из специально созданного отдела мониторинга или коммерческого отдела, так и сотрудники собственных магазинов, которые будут самостоятельно отслеживать цены в близлежащих магазинах конкурентов. Если компания достаточно крупная и ассортимент, который отслеживается, состоит из многих позиций, то за «свою» группу товаров могут отвечать сотрудники, курирующие определенные товарные направления (категорийные менеджеры). Если компания небольшая, то мониторингом могут заниматься буквально все подряд, включая руководителя.

В качестве исполнителей также могут привлекаться «люди со стороны», это могут быть как сотрудники специализированных агентств, так и те, кто в рамках «краудсорсинга» подрабатывает путем выполнения задач, связанных со сбором цен в торговых точках или оценки качества работы магазинов по электронным чек-листам. По всем этапам мониторингов соответствующим сотрудникам может настраиваться получение информационных push и email-уведомлений, в том числе по вновь созданным и просроченным по дате выполнения мониторингам. Стоит отметить, что для работы в сервисе обычно не требуется закупать специфические мобильные «девайсы», достаточно тех, которые уже находятся «на руках» людей в личном пользовании. Поддерживается самый широкий спектр устройств на платформах Android и iOS. Схематично организацию процесса мониторинга цен конкурентов можно представить в следующем виде:

В мобильном приложении список товаров на мониторинг представляет собой некую форму электронного чек-листа, где списки (чек-листы) сгруппированы по товарным категориям. Например, в случае продуктового ритейлера, все товарные позиции, которые относятся к крупам и пряностям, попадают в категорию «Бакалея», а творог, ряженка, простокваша, сыр, брынза, йогурт и сметана – в категорию «Молочные продукты». Товары также могут быть разбиты на отдельные списки, например – «Маяки», «Мясо и рыба», «ФРОВ», «Собственное производство» и «СТМ». У DIY-ритейлера списки могут называться к примеру «Водоснабжение», «Декорация», «Дерево», «Напольные покрытия», «Сантехника», «Строительство» и т.д. Списки товаров могут корректироваться вручную в соответствующих справочниках на сайте сервиса, либо (что намного чаще) автоматически загружаться в сервис на периодической основе.

В розничной торговле особое внимание уделяется товарам группы KVI, по которым покупатели определяют ценовой уровень предложения всей торговой точки. В группу KVI попадают бренды или определенные товары, специально выделенные, постоянно присутствующие на полках, хорошо известные покупателям и пользующиеся регулярным спросом. Данная группа очень важна и в зависимости от сферы бизнеса обычно составляет от трех до пяти процентов от всего товарного ассортимента. В сервисе, именно KVI товары обычно отслеживаются чаще всего, т.к. мониторинг данного списка дает относительно четкое представление, где компания выигрывает по части ценовой политики, а где проигрывает.

В рамках интеграции с учетной системой компании, будь то 1С, SAP, GESTORI и т.д. настраивается двунаправленный обмен данными, основанный на использовании API (интерфейса получения и передачи данных) или путем обмена файлами по защищенному протоколу SFTP. Через интеграцию с учетной системой в сервис передаются не только систематически обновляемые списки товаров на мониторинг, но и фотографии образцов товарных позиций.

По нашему опыту, наработанному при тесном сотрудничестве с рядом крупных сетей, у которых имеется обширная товарная номенклатура, образцы фотографий товаров существенно облегчают поиск и сопоставление позиций даже у опытных «монитористов», что уж говорить о «внештатных» сотрудниках и других людях, которые периодически привлекаются для выполнения подобного вида сбора данных «в полях». Обратно в учетную систему также могут передаваться «сырые данные» (цены, фотографии, комментарии), если имеющихся отчетов на сайте сервиса будет недостаточно. Сырые данные обычно загружаются в аналитическую систему на стороне компании (Qlikview, Power BI и т.д.) и на их основе строятся дополнительные, «углубленные» отчеты с детализацией в различных разрезах.

Стоит особо заострить внимание на возможность работы полностью в автономном режиме, когда исполнитель мониторинга фиксирует цены на своем мобильном устройстве при плохом или полностью отсутствующем интернет соединении. Проблемы с интернет связью могут возникать спонтанно по самым разным причинам. Например, торговая точка конкурента находится в помещении на цокольном этаже или где-нибудь в «глубинке», удаленной от ближайших крупных населенных пунктов. Любой другой причиной может быть какая-то возникшая неисправность самого мобильного устройства, напрямую влияющая на стабильность работы и доступность интернета.

Отсутствие интернет соединения не должно помешать выполнению задания, особенно если исполнитель потратил много времени, чтобы добраться до нужной торговой точки. Поэтому, для беспроблемного сбора цен, в грамотно спроектированный сервис закладывается возможность «отложенной» синхронизации данных в «облако». При отсутствии стабильного и доступного интернет соединения, «мониторист» в штатном режиме выполняет назначенный мониторинг по списку товаров на своем мобильном устройстве. После этого, как только он попадает в зону покрытия где есть стабильный интернет или скоростной WiFi, все собранные данные синхронизируются на сервер, «в облако». Полученная информация практически сразу становится доступной во всех оперативных и аналитических отчетах.

Функция геолокации мобильного устройства служит для подтверждения визитов исполнителей мониторингов в торговые точки конкурентов. По опыту наших клиентов, далеко не все сотрудники, особенно внештатные, «разовые», добросовестно относятся к возложенным задачам даже получая за это неплохое вознаграждение. Попытка обмануть обычно заключается в том, чтобы на самом деле не посещать магазин по заданию, а просто ввести цены на товары случайным образом, находясь при этом дома или в другом месте. С помощью функции геолокации подобные ухищрения легко выявляются и пресекаются, потому что в отчетах четко видно, был ли посещен объект мониторинга или нет.

Еще одним способом защиты от подобного рода недобросовестных манипуляций служит опция обязательности ввода фотографии ценника и комментария по каждому товару в списке. В сервисе каждый этап выполнения мониторинга, будь то взятие в работу и закрытие, а также любая сделанная фотография и комментарий, сопровождаются фиксацией даты и времени, что дает дополнительное подтверждение, когда и в какое время исполнитель был «на объекте», и был ли он там на самом деле.

Насколько часто следует проводить «оффлайновый» мониторинг? Обычно это зависит от размера сети, активности и количества конкурентов. Бытует мнение, что чем меньше розничная сеть или магазин, тем чаще следует проводить анализ цен конкурентов. Почему так происходит? Чем больше сеть, тем больше у нее товарооборот и тем выгодней условия, по которым данная сеть работает со своими поставщиками. Поэтому крупные ритейлеры могут позволить себе продавать товар по более сбалансированным ценам и часто давать покупателю предложение ниже, чем дают конкуренты меньшего масштаба.

Таким образом, поставленный на поток процесс изучения цен конкурентов в первую очередь актуален для магазинов и сетей меньшего размера, которые вынуждены противостоять тем, кто крупнее. Как правило, отслеживается только небольшая часть ассортимента, в основном товары, относящиеся к группе KVI. Также проводится ABC-анализ и в отслеживаемые позиции попадает только часть товаров группы «А», дающих наибольшую выручку. Практически никто и никогда не «мониторит» в «оффлайне» весь ассортимент конкурента, особенно если он насчитывает десятки тысяч позиций. На это просто ни у кого не хватит ни времени, ни сил.

Сбор данных «в полях» с помощью мобильных устройств может быть дополнен «парсингом» интернет-магазинов конкурентов, и все это выполнено в рамках единого сервиса и информационного пространства. Фактически данные будут стекаться в систему сразу из двух источников: из «оффлайна» и «онлайна», взаимно дополняя друг друга. Различие в ценах, собранных из разных источников на один и тот же товар, позволит лучше изучить и понять, как, каким образом и насколько отличаются цены конкурентов в торговых точках и в интернете.

По аналогии с планированием «оффлайн» мониторингов на сайте сервиса, «парсинг» интернет-магазинов также может быть распланирован на выполнение в определенное время с заданной периодичностью. Данный функционал позволяет компании сэкономить, получив решение «два в одном», чего не могут дать сервисы, которые «заточены» исключительно под сбор данных «онлайн», т.е. только под парсинг сайтов. Однако если компания уже использует «онлайновый» сервис для сбора и анализа цен конкурентов, то можно организовать интеграцию и данные, собранные «оффлайн», передавать в уже используемый сервис с помощью API и через другие каналы обмена.

Автоматическое распознавание ценников

К наиболее перспективным направлениям в рамках изучения цен конкурентов являются системы автоматического распознавания ценников, основанные на широком использовании алгоритмов искусственного интеллекта и машинного обучения. Наибольший «прорыв» в распознавании, классификации и детализации данных на изображениях в последнее время совершен в области так называемых сверточно-рекуррентных нейронных сетей. Системы распознавания ценников устроены следующим образом: на вход подается фотография ценника товара, выполненная исполнителем в мобильном приложении, на выходе после обработки изображения предоставляется информация о наименовании товара, его цене, штрихкоде, признаке наличия акции и других параметрах (вес, производитель и т.д.)

Процесс распознавания обычно состоит из нескольких этапов. На первом этапе выполняется «обрезка» и выделение «тела» ценника из общей фотографии, куда помимо самого ценника обычно попадает часть полки, самого товара или даже соседних позиций. На втором этапе производится выделение ключевых фрагментов, таких как наименование товара и его цена. На финальном этапе производится непосредственное распознавание текста и на выходе получаются искомые данные. Зачастую, за каждый этап распознавания отвечает отдельная сверточная нейронная сеть.

К еще одному перспективному направлению относятся системы распознавания полки целиком, когда исполнителем фотографируется вся полка или ее значительная часть. Несмотря на ряд успехов в этом направлении по направлению автоматизации задач мерчендайзинга (выявление «дыр» в выкладке и отсутствующих ценников, акционный товар, соответствие планограммам и т.д.), до промышленной эксплуатации подобных систем в задачах распознавании цен пока еще довольно далеко.

У автоматического распознавания ценников с помощью технологий машинного обучения есть определенные недостатки, и самые главные из них – необходимость первичного обучения, систематического переобучения, а также скорость сбора и обработки данных. Для того, чтобы максимально качественно распознать ценник, исполнителю мониторинга выдвигаются определенные требования по фотофиксации. Во-первых, необходимо тщательно «прицелиться» в ценник под определенным углом, иначе распознавание может получиться некорректным. В качество распознавания информации также может легко вмешаться плохое освещение или слабая фотокамера в мобильном устройстве. В момент фотографирования, в «рамку» не должно попадать других ценников или товаров, кроме того, рамки самого ценника должны целиком попасть на фотографию.

Помимо всего этого, системе распознавания нужно уметь распознавать копейки, и данные, написанные от руки или в сокращенном виде. К дополнительным сложностям относится и распознавание сразу двух или даже трех цен, одна из которых это цена по акции или цена для владельца бонусной карты. Нельзя сказать, что все это непреодолимые трудности, т.к. технологии постоянно совершенствуются и задачи постепенно решаются, однако до сих пор никто не дает стопроцентной гарантии распознавания и многие из перечисленных факторов накладывают определенные ограничения на широкое использование систем автоматического распознавания ценников.

Вышеперечисленные недостатки создают определенные сложности непосредственному исполнителю мониторинга — человеку, ведь в итоге фотографию ценника пока что делает именно человек, а не машина, хотя эксперименты в области использования роботов ведутся. Именно человек, несмотря на свои ограниченные физические ресурсы и возможности, на сегодняшний день является самым скоростным и идеальным стопроцентным классификатором изображений, а вовсе не «супернавороченная» нейронная сеть. Дополнительные требования, предъявляемые к качественному фотографированию ценников, да еще под определенным углом и дистанцией, с попаданием в «рамки», могут существенно замедлить сбор данных.

К примеру простой ручной набор цены в мобильном приложении может делаться за 3-5 секунд, тогда как на фотографирование может уйти все 10-20 и более секунд, а неудачное фото и вовсе, придется делать заново. Если учесть, что в списке товаров на мониторинг могут быть сотни позиций, сделать такое большое количество фотографий с определенными требованиями к съемке может быть физически тяжело и весьма затратно по времени. Кроме того, человек, который тщательно «прицеливается» своим смартфоном в каждый ценник привлекает намного больше внимания, нежели тот, что «набивает» цены вручную, а излишнее внимание со стороны персонала торгового зала может помешать качественному сбору данных. Также возникает проблема фотографирования ценников товаров, расположенных на нижних и верхних полках. И если стоя на своих ногах, человек может лишь слегка наклониться (поднять голову) или отойти подальше, чтобы увидеть цену, то для того, чтобы правильно сфотографировать ценник для последующего распознавания, придется как следует изогнуться, чтобы «поймать» определенный угол обзора в соответствии с предъявляемыми требованиями.

К другим, пока еще непреодолимым недостаткам нейронных сетей и других алгоритмов машинного обучения, стоит также отнести обязательность предварительного обучения на большой выборке данных, служащих в качестве образцов. Нейронным сетям нужно предварительно «скормить» большое количество образцов, чтобы система могла обучиться и распознавать ценники с высокой степень достоверности. Т.к. внешний вид ценников у разных розничных сетей и брендов различается, то обычно нейронные сети предварительно «натаскивают» под определенные форматы. А вот при изменении формата, нейронную сеть придется переобучать заново. По краям и на самих ценниках могут попадаться различные артефакты в виде смазанности, наложения, нечеткости и пересечения полосками.

Часть ценников даже в пределах одного магазина или сети может иметь разные шрифты. Бывает, что формат ценников меняется, но не синхронно во всех магазинах, а поэтапно, в итоге в одних торговых точках до сих пор выставлены старые ценники, а в других уже новые. Если съемка производится со вспышкой, на фотографии ценника могут возникнуть блики, которые будут перекрывать текст и мешать процессу распознавания. Трудности могут возникнуть и в том случае, если ценники расположены вплотную друг другу без малейшего зазора между ними, таким образом в одном ряду «сплошняком» могут находиться десятки и более позиций. Сфотографировать даже один из них так, чтобы в кадр не попали рядом стоящие, может оказаться достаточно нетривиальной задачей. Ну и самое главное, если фотография ценника для распознавания делается без привязки к «своему» списку товаров, когда исполнитель мониторинга просто фотографирует все подряд что видит, то в этом случае появляется дополнительная задача «матчинга», т.е. стыковки и сопоставления распознанных товаров с собственной номенклатурой. А решить эту задачу также крайне непросто, учитывая, что на ценниках часто пишут только название товара и его цену.

Парсинг сайтов интернет-магазинов и прайс-площадок

Парсинг (граббинг) цен интернет-магазинов – это автоматической сбор данных в интернете с целью получения нужной информации для принятия решений касательно формирования собственной ценовой политики. Сбор данных с сайтов интернет-магазинов обычно осуществляется специальными «грабберами» или «сетевыми пауками». Сетевой паук — это специальная программа-бот, которая маскируется под реальных пользователей и осуществляет массовый сбор данных сразу в нескольких десятках, сотнях и даже тысячах параллельных потоков. Если обычный человек за раз может открыть в браузере и просмотреть только одну страницу прайс-листа или карточку товара, то грамотно разработанный сетевой паук, прикрываясь «прокси» и другими средствами сетевой маскировки, за один заход может «спарсить» сразу сотни, а то и тысячи страниц.

Учитывая, что в мире существуют миллионы различных SKU и сотни тысяч сайтов конкурирующих друг с другом компаний, можно только себе представить тот огромный трафик, который генерируется из-за огромного потока запросов от ботов, днем и ночью «парсящих» сайты. К примеру, в одном только цифровом или DIY ритейле в каталогах и прайсах могут быть представлены десятки и сотни тысяч наименований, а в автозапчастях для иномарок общая номенклатура может составлять многие десятки миллионов артикулов. Некоторые компании разрабатывают собственные системы и сервисы для отслеживания и изучения цен конкурентов, другие пользуются сторонними облачными решениями, предоставляющими доступ к своим услугам на платной основе.

Помимо разработки сетевых пауков и парсеров, одной из основных задач, с которой сталкиваются сервисы мониторинга цен конкурентов, является задача сопоставления товарных позиций, т.н. «матчинг». Полученные в процессе парсинга товарные позиции нужно состыковать, свести друг с другом, чтобы в итоге получить возможность строить отчеты и сравнивать цены в сводных таблицах, определяя минимальную и максимальную цену на один и тот же товар. Задача это довольно сложная, учитывая огромный объем существующих SKU и часто решается с помощью применения регулярных выражений и прочих продвинутых алгоритмов машинного обучения.

Многие товары могут иметь одинаковый артикул, но быть разного цвета или размера, и это будет считаться разным товаром с разной ценой. Другие категории товаров, особенно не имеющие отношения к цифровой и бытовой технике, электронике, автозапчастям, часто имеют одно только название и не имеют других отличительных признаков и спецификаций, таких как артикул производителя, серийный номер или штрихкод. Данные категории товаров очень сложно автоматически сопоставлять друг с другом, поэтому некоторые сервисы часто берутся работать только с продавцами технически сложной продукции — цифровой и бытовой техники, аксессуаров, т.е. там, где есть уникальные идентификаторы или параметры, и есть возможность хоть за что-то зацепиться при «матчинге» позиций друг с другом. Ибо каких-либо надежных способов стыковки двух абсолютно разных товаров, имеющих одинаковое название на вроде «платье жен. Китай, зеленое», пока еще не придумали.

Отдельной и весьма нетривиальной задачей является парсинг цен с некоторых товарных агрегаторов (прайс-площадок, маркетплейсов). Обычно эти сайты имеют самую изощренную и устойчивую защиту от парсинга, т.к. владельцами данных сайтов часто являются крупные и известные технологические компании, которые обладают существенными ресурсами для затруднения и даже полного пресечения работы сетевых пауков. Некоторые «умельцы», которые смогли придумать, как обойти защиту известных сайтов-агрегаторов, продают доступ к специальным API для получения данных по ценам товаров за немалые деньги. Однако защита от парсинга со стороны прайс-площадок постоянно совершенствуется, латаются «старые дыры», закрываются существующие бреши, в итоге подобные сервисы приходится или закрывать, или вводить квоты на количество выполняемых запросов в секунду и отменять старые тарифы, позволявшие ранее парсить цены в несколько параллельных потоков.

Одной из ключевых возможностей сервисов мониторинга цен конкурентов является «репрайсинг», т.е. автоматический расчет своей оптимальной (рекомендованной) цены с учетом минимально возможной цены и собранных данных о ценах конкурентов. Для формирования оптимальной цены могут применяться специальные формулы расчета по группам, брендам и отдельным товарным позициям. При наступлении каких-либо событий, связанных с аномальными отклонениями цен на отдельные группы или товарные позиции, пользователям сервиса настраивается отправка специальных информационных уведомлений. У многих интернет-магазинов каталоги обновляются ежедневно и даже по нескольку раз за день, поэтому сервис должен подстраиваться под график обновления цен каждого интернет-магазина, чтобы на выходе предоставлять своим клиентам наиболее свежие данные. Это позволяет оперативно реагировать на любые резкие скачки цен в рамках развязанных конкурентами «ценовых войн» и прочих малоприятных проявлений демпинга.

Имеющаяся отчетность должна давать возможность анализа и сопоставления цен в самом широком диапазоне срезов данных: по регионам, городам, брендам, производителям, конкурентам и т.д. с выводом динамики изменений за прошлые периоды времени. Отчеты в том числе должны давать возможность легко выявлять трудно объяснимые флуктуации (скачки) цен на тот или иной товар. Функционал сервиса мониторинга цен конкурентов может быть востребован не только розничными продавцами, но и производителями, для анализа цен на аналогичный товар по другим брендам. В этом случае сервисом должна решаться задача сопоставления товаров-аналогов от разных производителей.

Сервис также может служить в качестве эффективного инструмента по определению розничного демпинга, когда производитель контролирует наличие и цену собственного товарного ассортимента у своих дилеров и у «конечных» продавцов. При поступлении фактов о подозрительно низких ценах, отклоняющихся в меньшую сторону от рекомендованных производителем цен, достаточно легко выявляются продавцы «серой» и контрафактной продукции. Какую еще пользу может извлечь производитель? Конечно же, проконтролировать наличие своего товара на «виртуальных полках» интернет-магазинов, чтобы продуктивнее работать над расширением представленности ассортимента там, где это действительно необходимо.

Способы защиты от парсинга и методы их обхода

При сборе информации о ценах конкурентов, на сервера, которые отвечают за работоспособность интернет-сайтов и интернет-магазинов, оказывается существенная нагрузка, которая может привести к замедлению работы или полной неработоспособности. Кроме того, многие компании испытывают естественное желание защититься от автоматического сбора своих цен конкурентами и стараются всячески этому помешать. В этом случае на сайте организуется ряд комплексных мер для защиты от парсинга и «граббинга», в рамках которых применяются различные трюки и ухищрения, направленные на выявление и блокировку ботов.

Иногда защита бывает достаточно сложной, и чтобы ее преодолеть, разработчикам «сетевых пауков» нужно обладать высокой квалификацией и большим опытом работы. Некоторые компании организуют защиту с помощью определения ботов по косвенным признакам и специально «подмешивают» в выдачу цен некорректные значения или вовсе блокируют запросы на получение страниц с данными. Практически всегда используется какая-либо многоступенчатая комбинация, состоящая из одновременного применения сразу нескольких методов защиты. Дополнительной сложностью преодоления подобных защит является то, что они периодически меняются и совершенствуются, поэтому сервисам онлайнового мониторинга цен конкурентов приходится постоянно «держать ухо востро», превентивно отслеживая любые изменения для корректного получения данных.

Стандартной практикой защиты от парсинга служит динамическая выдача контента посредством так называемых AJAX-запросов, когда веб-сервер в ответ на стандартный GET-запрос сперва возвращает «каркас» html-страницы без данных, а затем выполняется дополнительный динамический POST-запрос, который собственно получает прайс-лист и выводит его на странице. Данная защита довольно легко обходится и полезна только в том случае, если сетевой паук не «заточен» под парсинг конкретного сайта и работает глобально по всем сайтам подряд, собирая данные «вслепую».

Еще одним вариантом защиты является проверка заголовков http-запросов, в которых проверяется наличие и корректное заполнение строки User-Agent и других параметров, которые должны в обязательном порядке присутствовать в заголовке запроса, инициируемого любым используемым браузером. Строка User-Agent всегда заполняется каждым браузером, туда прописывается обычно его название и текущая версия, тем самым браузер как бы «представляется» веб-серверу кто он есть такой при запросе данных. Дополнительно к проверкам обязательных параметров могут проверятся т.н. «cookies» на предмет наличия специфических «кук» (фрагментов данных обмена браузера пользователя с веб-сервером), оставляемых счетчиками систем веб-аналитики вроде Яндекс Метрики или Google Analytics. При отсутствии этих «фрагментов», защита может посчитать что запрос выполняется не браузером, а ботом, вследствие чего запрос будет отклонен, а IP адрес пользователя заблокирован. Грамотно разработанный парсер всегда маскируется под какой-либо распространенный браузер и способен эмулировать наличие любых cookies в запросах, так что преодоление данного способа защиты особого труда не представляет.

Еще одной распространенной практикой является ограничение количества запросов с одного IP-адреса в минуту, что позволяет предотвратить так называемый «hammering», или «долбежку» сайта большим количеством запросов в единицу времени. Этот способ «самообороны» также достаточно легко обходится, т.к. все «продвинутые» сетевые пауки и боты используют огромное количество прокси (промежуточных компьютеров, которые являются посредниками между компьютером пользователя и интернетом), в том числе и те, которые попадают в открытый доступ в виде отдельных списков. Данные прокси обычно выявляются сервисами, предоставляющими услуги по интернет-анонимизации, которые систематически сканируют интернет на предмет открытых портов и выкладывают найденные прокси в открытый или закрытый доступ по платной подписке.

Сетевой паук в процессе своей работы использует собственные базы прокси плюс непрерывно получает свежие списки, что позволяет ему постоянно маскироваться под все новые и новые IP-адреса и успешно выполнять запросы на получение данных. Другим вариантом защиты является встраивание в html-страницу «ловушек» в виде скрытых полей, которые на самом деле не могут быть заполнены человеком, однако которые заполняются ботами. Известны также такие варианты защиты как фиксация действий пользователя на сайте – определение движения мыши, прокрутка страницы и наведение курсора на элементы, таймауты заполнения полей и т.д.

Стоит упомянуть еще несколько способов существенного усложнения жизни авторам парсеров, которые нередко практикуются опытными разработчиками высоконагруженных интернет-магазинов. К этим способам относятся формирование динамической структуры html-страницы с «замусориванием» элементов и «подмешивание» на страницу случайных (рандомных) запросов на языке javascript. В первом случае динамическое формирование html-страницы не позволяет парсеру привязаться к жестко заданной структуре элементов, т.к. практически всегда при парсинге нужно опираться на какую-то логику расположения html-элементов.

В случае «подмешивания» на страницу произвольных скриптов, сложность состоит в том, чтобы с помощью парсера суметь выполнить случайный скрипт на языке javascript и передать полученное значение через динамический POST-запрос для того чтобы получить итоговые данные. Если для обычного браузера это не составит никаких проблем, то для большинства парсеров, которые не умеют выполнять код на javascript, это будет серьезным препятствием. Конечно, есть технологии, позволяющие ботам использовать «движок» javascript (PhantomJS/CasperJS и т.д.) для выполнения скриптов, однако они работают достаточно медленно, имеют проблемы с многопоточностью и не всегда способны корректно выполнять сложные конструкции случайного кода.

По нашему опыту, не существует в природе такой защиты от парсинга, которую нельзя было бы обойти. Любые способы защиты, их комбинация и дальнейшее совершенствование, способны усложнить жизнь разработчикам парсеров и сетевых пауков, однако нет каких-то непреодолимых проблем и все сервисы онлайн мониторинга цен конкурентов так или иначе решают свои задачи.

Юридические аспекты и сложности мониторинга цен

По законам Российской Федерации, цены на товары и услуги являются публичной и доступной информацией. Не существует такого закона, который в той или иной форме запрещал бы перепись, аудио, фото и видеосъемку ценников и другой публично доступной информации в торговых точках. Любые действия, препятствующие проведению сбора данных любым возможным в рамках закона способом, являются незаконными. Всякий креатив в виде грозных запрещающих знаков с перечеркнутыми фотоаппаратами и мобильными устройствами является не более чем страшилкой, придуманной руководством торговой точки.

Однако любой исполнитель мониторинга, который осуществляет сбор данных в магазине конкурента, может столкнуться с различными формами противодействия, как со стороны линейного персонала, так и со стороны охраны. Бывает и так, что директор магазина, узнав о фактах «снятия» информации по ценам при попустительстве работников торгового зала и охраны, может наложить суровое дисциплинарное взыскание вплоть до увольнения. Директора магазина тоже можно понять, ибо в рамках конкурентной борьбы, реакция на действия конкурентов может быть весьма жесткой. Поэтому со стороны штатных сотрудников магазина можно ожидать чего угодно, особенно если они четко знают, что их ждет наказание за отсутствие реакции на любые виды «ценового шпионажа».

Наиболее оптимальным и не привлекающим внимания средством сбора информации в магазинах является использование мобильных устройств, особенно если они входят в состав специального облачного сервиса мониторинга цен конкурентов. Парадоксально, но в современных реалиях человек, который переписывает цены на бумаге или наговаривает что-то в диктофон, сейчас привлекает куда больше внимания чем тот, который что-то печатает или фотографирует в своем мобильном устройстве. Почему? Потому что смартфоны и планшеты есть абсолютно у всех на руках и человек, который «строчит» на ходу смс сообщение или общается в Telegram и WhatsUp никого не удивит.

Однако есть и обратная сторона медали в случае использования на мобильных устройствах «продвинутых» систем вроде автоматического распознавания ценников. В этом случае исполнителю мониторинга приходится фотографировать каждый ценник, да еще с учетом определенных требований к фотографии, при которых должен выдерживаться определенный угол съемки, быть отключенной вспышка, чтобы не было бликов, сделано точное попадание «прицела» камеры в рамки и т.д. Все это привлекает к человеку, фотографирующему каждый ценник, намного больше внимания, нежели к тому, что просто вводит цены, проходя по списку товаров в мобильном приложении. Со стороны, человек, который вводит цены вручную, выглядит более естественно, т.к. никто на самом деле не знает, что он там «набивает» у себя в смартфоне.

При выявлении факта мониторинга персоналом магазина, самым худшим вариантом будет попытка ввязаться в конфликт, «покачать права». Лучше всего попытаться по-хорошему договориться, пообещав вести себя незаметно. Если попытка договориться не удалась, и мониторинг периодически выполняет штатный сотрудник компании, то лучше по-тихому удалиться из торговой точки, т.к. конфликтных людей запоминают намного чаще и продолжают помнить намного дольше. Однако если сбор цен выполняет «разовый» исполнитель (например, студент или пенсионер), который вряд ли еще раз вернется в эту торговую точку в той же самой роли, то он вполне себе может и поспорить в случае развития конфликтной ситуации, или «давить на жалость», рассказывая о своем тяжелом финансовом положении.

Если исполнитель мониторинга сам по себе неплохой психолог, то он может вербально воздействовать на другую сторону, придумав какую-нибудь уважительную причину или легенду, поддавшись на которую, ему позволят закончить начатое. Наиболее частыми аргументами, которые услышит исполнитель во время развития конфликтной ситуации, будут: «наш магазин — это частная собственность, где мы сами устанавливаем любые правила и порядки» и «цены – это коммерческая тайна». Со всеми этими аргументами можно легко поспорить. Человек, который фотографирует ценники или переписывает цены ни коим образом не портит товары, т.е. не совершает никаких противоправных действий в отношении неприкосновенности частной собственности. Второй аргумент, касающийся коммерческой тайны, вообще несостоятелен в отношении магазина, т.к. главный признак коммерческой тайны — это ограниченный доступ к ней определенного круга лиц. В случае магазина, где всем желающим напоказ выставлены цены на товар, оперирование понятием коммерческой тайны является некорректным. Другое дело, если бы речь шла о попытке проникновения в служебные и подсобные помещения, однако торговый зал — это вполне себе публичное место, где законы о коммерческой тайне не действуют.

Что же касается автоматического сбора информации по ценам на сайтах интернет-магазинов, то парсинг является законным, если в процессе его выполнения не происходит нарушения законодательства. Согласно действующему законодательству Российской Федерации, парсинг проводится на вполне законных основаниях, если в процессе сбора информации в интернете:

• Не нарушаются авторские и смежные права;
• Не осуществляется неправомерный доступ к охраняемой законом информации;
• Не выполняется сбор сведений и данных, составляющих коммерческую тайну;

Подытожив имеющиеся законодательные нормы и правила, можно утверждать, что любая форма автоматического сбора информации разрешена в том случае, если инициатор этих действий придерживается следующих правил:

• Контент, извлекаемый с помощью парсинга, не является объектом защиты авторского права;
• Процесс парсинга не нарушает работу сайта и не превращается в DDOS-атаку;
• В процессе извлечения информации не собираются никакие личные данные пользователей;

Конечно, можно немного поспекулировать на предмет пункта о нарушении работы сайта в результате повышенной нагрузки на него из-за действий ресурсов, автоматически собирающих данные. Однако доказать, что конкретный парсинг нарушает работу сайта довольно сложно, т.к. можно легко сослаться на работу любых поисковых систем, которые регулярно занимаются тем же самым в намного большем объеме. Кроме того, поисковые системы заняты сбором всего контента сайта, включая не только прайсы, каталоги и отдельные страницы товаров, но и любые формы текстового контента, такие как блог компании, контактная информация и т.д. В то время как парсер работает узконаправленно на получение конкретной информации в виде цен, поисковые системы собирают все подряд.

Что такое инфляция

Инфляция — это устойчивое повышение общего уровня цен на товары и услуги в экономике. Обратный процесс — снижение общего уровня цен — называют дефляцией.

Индекс потребительских цен как показатель инфляции

Об изменении цен в экономике дают представление различные показатели ценовой динамики — индексы цен производителей, дефлятор валового внутреннего продукта, индекс потребительских цен. Когда говорят об инфляции, обычно имеют в виду индекс потребительских цен (ИПЦ), который измеряет изменение во времени стоимости набора продовольственных, непродовольственных товаров и услуг, потребляемых средним домохозяйством (т.е. стоимости «потребительской корзины»). Выбор ИПЦ в качестве основного индикатора инфляции связан с его ролью как важного показателя динамики стоимости жизни населения. Кроме того, ИПЦ обладает рядом характеристик, которые делают его удобным для широкого применения — простота и понятность методологии построения, месячная периодичность расчета, оперативность публикации.

Периоды, за которые измеряется ИПЦ, могут быть различными. Наиболее распространены сравнения уровня потребительских цен в определенном месяце года с их уровнем в предыдущем месяце, соответствующем месяце предыдущего года, декабре предыдущего года.

Статистическое наблюдение за ценами, необходимые расчеты и публикацию данных об ИПЦ в России осуществляет Федеральная служба государственной статистики.

Особенности российской потребительской корзины

В России, как и в целом в странах с формирующимися рынками, характерной чертой потребительской корзины является достаточно высокая доля в ней продовольственных товаров (в 2014 г. — 36,5%). Цены на них отличаются достаточно высокой изменчивостью. В значительной степени колебания инфляции на рынке продовольствия определяется изменениями объемов предложения, в первую очередь — урожая сельскохозяйственных культур в нашей стране и в мире, который существенно зависит от погодных условий. Поскольку доля продовольственных товаров в потребительской корзине высока, колебания цен на них могут оказывать значительное влияние на инфляцию в целом.

Другой особенностью российской потребительской корзины, используемой для расчета ИПЦ, является наличие в ней товаров и услуг, цены и тарифы на которые подвержены административному воздействию. Так, государством регулируются тарифы на ряд услуг коммунального хозяйства, пассажирского транспорта, связи, некоторые другие. Кроме того, цены на табачные изделия, алкогольную продукцию существенно зависят от ставок акцизов.

Потребительский спрос удовлетворяется за счет товаров и услуг как отечественного, так и иностранного производства. Статистические данные о доле импорта в ИПЦ отсутствуют, но представление о ней в части товаров может дать удельный вес импорта в структуре товарных ресурсов розничной торговли (в последние годы — около 44%). Заметная доля товарного импорта в потребительской корзине обусловливает значимость влияния на инфляцию изменений обменного курса рубля.

Факторы инфляции

Цены могут расти быстрее или медленнее. В первом случае говорят о повышении инфляции, во втором — о ее снижении. Существуют различные причины изменения инфляции. Рассмотрим их на примере ускорения роста цен. Если уровень спроса на товары и услуги превышает возможности предложения по его удовлетворению, говорят о проинфляционном влиянии факторов со стороны спроса. В отдельных случаях на опережающий рост спроса могут повлиять слишком доступные кредиты, ускоренный рост номинальных доходов экономических субъектов. Часто эти источники избыточного спроса называют «монетарными факторами инфляции» — давлением на цены в связи с созданием излишнего количества денег.

Инфляция может расти и тогда, когда дисбаланс на рынке товара или услуги возникает по причине недостаточного предложения, например, из-за неурожая, ограничений на ввоз продукции из-за рубежа, действий монополиста.

Инфляция может быть вызвана ростом издержек на производство и реализацию единицы продукции — из-за удорожания сырья, материалов, комплектующих, повышения расходов предприятий на заработную плату, налоги, процентные платежи и других затрат. Повышение издержек может привести также и к снижению объемов производства и, далее, к формированию дополнительного проинфляционного давления из-за недостаточного предложения.

Рост цен на импортируемые компоненты затрат может быть обусловлен как повышением мировых цен, так и снижением курса национальной валюты. Кроме того, ослабление национальной валюты может напрямую влиять на цены конечной ввозимой из-за рубежа продукции. Общее воздействие изменения обменного курса на динамику цен называют «эффектом переноса» и часто рассматривают как отдельный фактор инфляции.

Экономическая теория выделяет как особый фактор инфляционные ожидания — предположения относительно уровня будущей инфляции, формируемые субъектами экономики. Ожидаемый уровень инфляции учитывается производителями при принятии решений, касающихся установления цен на их собственную продукцию, ставок заработной платы, определения объемов производства и инвестиций. Инфляционные ожидания домохозяйств влияют на их решения о том, какую часть средств, имеющихся в их распоряжении, направить на сбережение, а какую — на потребление. Решения экономических субъектов влияют на спрос и предложение товаров и услуг и, в конечном счете, на инфляцию.

Негативные последствия высокой инфляции

Высокая инфляция означает понижение покупательной способности доходов всех экономических субъектов, что негативно отражается на спросе, экономическом росте, уровне жизни населения, настроениях в обществе. Обесценение доходов сужает возможности и подрывает стимулы к сбережению, что препятствует формированию устойчивой финансовой основы для инвестирования. Кроме того, высокой инфляции сопутствует повышенная неопределенность, которая затрудняет принятие решений экономическими субъектами. Все вместе это отрицательно влияет на сбережения, потребление, производство, инвестиции и в целом — на условия для устойчивого развития экономики.

Преимущества ценовой стабильности

Ценовая стабильность означает сохранение низких тем­пов роста потребительских цен, таких, которыми экономические субъекты пренебрегают при принятии решений. В условиях низкой и предсказуемой инфляции население не боится сберегать в национальной валюте на длительные сроки, поскольку уверено, что инфляция не обесценит их вклады. Долгосрочные сбережения, в свою очередь, являются источником финансирования инвестиций. В условиях ценовой стабильности банки готовы предоставлять ресурсы заемщикам на длительные сроки по сравнительно низким ставкам. Таким образом, ценовая стабильность создает условия для роста инвестиций и, в конечном счете, — для устойчивого экономического развития.