Лично/общественный дневник Эльдара Муртазина

То, что мы видим, зависит от того, куда мы смотрим.

Записи с тэгом analytics

Встретил на днях фразу, что 65 процентов статистических исследований вранье. Кто-то в комментариях спросил, — «Что и это?». Справедливый вопрос и очень точное описание происходящего сегодня на рынке.

Например, компания Online Market Intelligence решила дешево и сердито пиарить свою работу, для этого был создан отчет Топ20 брендов любимых среди россиян. В качестве методики используются онлайн-опросы, все это проходит уже второй год.

Вот тут на страничке указывается, как проводятся опросы — города-миллионики, 1500 человек. По 500 человек из Москвы и Питера, оставшиеся 500 человек распределяются по 11 городам. Хммм, примерно по 50 человек на город. Выборка не ахти какая репрезентативная, этого от силы хватит, чтобы изучить определенный сегмент и то, с очень большой натяжкой. Безусловно, «исследователи» в таких случаях прикрываются собственно созданными методиками, которые гарантируют надежный и точный результат, сходимость и повторяемость данных. Но все это вранье. Чтобы добиться минимально правдоподобной картинки рынка необходимо в городах миллиониках провести до 12-15 тысяч анкетирований. В Москве минимально необходимо проводить от 3500 анкетирований, так как социальная составляющая здесь сильнее разнится, чем в том же Волгограде. И это не моя прихоть. Мы работали с разными компаниями, это необходимый минимум, который дает картинку происходящего. Дорогое исследование, которое имеет смысл проводить для очень ограниченного круга задач. Как правило, мы придумываем обходные пути как вытащить на свет божий нужные данные и найти те категории граждан, что нам потребны в конкретном отчете. Но это так лирика.

Теперь давайте взглянем на результаты анкетирования по телефонам. Там наблюдается очень любопытная картина.

Вот тут результаты

Nokia #1 — 48.1%

Samsung #2 — 20.3%

SE #3 — 13.6%

HTC #4 3.6%

Motorola #5 — 3.3%

Siemens #8 — 2.3%

Sony #9 — 1.9 %

Попадание в список Sony вызывает сомнения, скорее всего люди просто путали Sony и Sony Ericsson. Это к вопросу о том, как проводилось исследование на уровне обработки данных. Никогда не поверю, что в России есть сколько-нибудь заметное кол-во работающих телефонов Sony. Слишком большой срок прошел.

Теперь давайте поговорим о Siemens. За годы работы в России было продано несколько десятков миллионов аппаратов. Много. На сетях сегодня работает около 240 тысяч аппаратов и их число уже два года стабильно (сокращается тысяч на 15-20, видимо аппараты умирают). Возможно, что на полках лежат сотни тысяч аппаратов, по домам. Но факт в том, что ими не пользуются и роста числа пользователей Siemens нет. Отсюда возникает вопрос, как в исследовании возникло так много пользователей Siemens. Это издержки выборки в городах миллиониках. Явно, что зацепили какую-то малобюджетную группу, отсюда такой перекос в данных.

К слову, в стране сейчас на всех сетях работает примерно 110 миллионов аппаратов. Думаю, что вы сможете посчитать, сколько от этого числа составляет Siemens. А потом посмотреть на данные опроса. И удивиться. Вот и я сижу удивляюсь.

Равно как и удивляюсь тому, что отличные аппараты HTC выше Apple. И знаете почему? Потому-что Apple iPhone продано в нашей стране в последние 3 года больше, чем HTC. А удовлетворение этими аппаратами как правило на уровне 90 процентов от купивших. Возникает вопрос, как такой феномен позволил HTC вырваться вперед. Ответ короткий — изъяны опроса, когда опрошенные не репрезентативны и не показывают реальную картинку мира. Могу продолжать и дальше, но в целом все понятно и так. Этот опрос и «исследование» завлекалочка для промотирование своей компании. Исследовательские компании часто делают подобную ерунду, чтобы дешево и сердито привлекать к себе внимание.

Наткнулся на вот такой пассаж:

В настоящий момент пользователь может выбирать среди довольно большого количества платформ смартфонов. Среди них основными являются Symbian, Android, iPhone OS, Windows Mobile, BlackBerry OS, Maemo, webOS и еще ряд менее распространенных. Относительно некоторых из них появлялись сообщения, что производители планируют отказаться от использования в том или ином объеме. Относительно других, наоборот, сообщалось о росте и распространении. В то время как одни компании сокращали число используемых платформ, другие расширяли портфолио или запускали собственные. Аналитик же агентства Rodman & Renshaw Ашок Кумар (Ashok Kumar), считает что в ближайшее время ситуация кардинально изменится.

Данный эксперт полагает, что от нынешнего изобилия производители откажутся, и борьба на рынке будет вестись между всего двумя: iPhone OS от Apple и Android от Google. Соответственно и выбор пользователя будет ограничен этими двумя платформами. Произойдет это по следующим причинам. Компания Apple запуском iPhone четвертого поколения и iPhone OS 4.0 привлечет к себе значительное внимание, которое приведет ко все большему распространению ее продукции. Если новая версия Symbian от Nokia не сможет привлечь пользователей, то последует сокращение интереса к ней, и компания будет вынуждена сделать основной ОС либо Android, либо Windows Phone 7. И, по мнению г-на Кумара, в настоящий момент обстоятельства складываются не в пользу Symbian.

Что касается недавно приобретенной компанией НР операционной системы webOS, то данный аналитик склонен оценивать ее перспективы не слишком оптимистично. Без радикального увеличения затрат на мобильное подразделение, покупка Palm не принесет ничего хорошего. Еще меньше перспектив г-н Кумар видит у BlackBerry OS. RIM «вряд ли сможет добиться большего, нежели удержать свою долю». И только относительно перспектив еще не вышедшей Windows Phone 7 не последовало никаких комментариев, кроме того, что она «остается темной лошадкой».

Что надо курить, чтобы делать такие "прогнозы". Где выдают такую траву, я тоже хочу и немедленно. Отчего происходит такое и как с этим бороться, давайте попытаюсь объяснить.

1. Существуют исследовательские компании, которые изучают все на свете и ничего конкретного. То есть отношение к рынку того или иного вида они имеют только в момент создания отчетов. Тогда в ход идет логика потребителя (каждый в США знает, что iPhone круче всего на свете, а Android тоже неплох. Nokia? Где вы видели Nokia — никто не хочет эти телефоны). Попытка свой личный опыт или опыт своего окружения проецировать вовне, обречена на провал. Вот и появляются заявления о том, что останется только двое.

Но что самое смешное, определенная логика в таких словах есть. Останется три, четыре ключевых ОС, которые и будут доминировать на рынке смартфонов. И это факт. Кто это будет можно сказать с закрытыми глазами для ближайших 3-4 лет — iPhone, Android, Symbian, Bada (MeeGo будет развиваться, но станет ли она значимой, огромный вопрос, в любом случае ее стоит рассматривать в паре S60-MeeGo — кто-то из них не выживет).

2. BlackBerry OS. Надо быть очень ориентированным на устройства человеком, чтобы не увидеть перспектив у Blackberry в области сервисов, которые компания и предоставляет и делает это отлично. Надо быть совершенно незнакомым с цифрами продаж и носить гордое имя аналитика, чтобы не увидеть, что доля этой ОС растет и в штучном выражении продажи выросли по сравнению с пятилетней давности периодом.

Не относится сюда, но та же Nokia переняла некоторые приемы Apple. До выхода N8 нагнетается история вокруг аппарата, то он быстрее, чем N97, то еще какие новости вылезают и подаются в правильном ключе. Вот только Nokia не подозревает, что к моменту выхода в сентябре, аппарат будет смотреться на фоне Android телефонов не очень интересно. Попробовав 3.0 от Google могу сказать, что мне искренне жаль эти потуги создания флагмана на MeeGo после N8. Расстрельная команда из Google уже зарядила пулеметы, модельки которые выйдут в конце года, мягко говоря перевернут все с ног на голову. И тут рубка будет идти на встречных курсах с iPhone OS 4.0. Правда на стороне Android будет куча разных моделей и куча разных возможностей.

Но это так мысли вдруг посетили меня, после прочтения этой ерундовой новости об "аналитике".

Мне очень понравился вот этот пассаж:

“As expected, the first quarter of this year has been extremely challenging for Sony Ericsson due to continued weak global demand.  We are aligning our business to the new market reality with the aim of bringing the company back to profitability as quickly as possible,” said Dick Komiyama, President, Sony Ericsson. “The management intends to pursue an additional cost saving program targeting a further annual operating expense reduction of Euro 400 million, to be completed by mid-2010.”

Про слабость рынка и спроса это уже на протяжении года стандартные предложения в пресс-релизах от компании. Другие как-то умудряются не уходить в минус при этом "слабом" спросе. Пугает, что сокращения пойдут и дальше, а новая волна экономии ничего толкового не принесет. Сами загоняют себя в угол и не хотят из него выйти. Напомню, что компания уже уволила 2000 сотрудников, а теперь в рамках новой программы, хочет сократить еще 2000 рабочих позиций. Безусловно, согласен, что раздут и сильно штат многих подразделений. Но с другой стороны в первую очередь под сокращение попадут "ненужные" профессии, такие как инженеры, дизайнеры, контроль качества и  так далее.

 

  Q1 2008

  Q4 2008

  Q1 2009

Number of units shipped (million)

22.3

24.2

14.5

Sales (Euro m.)

2,702

2,914

1,736

Gross margin (%)

29%

15%

8%

Operating income (Euro m.) 

184

-262

-369

Operating margin (%)

7%

-9%

-21%

Restructuring charges (Euro m.)

129

12

Operating income excl. restructuring
charges (Euro m.)

-133

-357

Operating margin excl. restructuring charges (%)

-5%

-21%

Income before taxes (IBT) (Euro m.)

193

-261

-370

IBT excl. restructuring charges (Euro m.)

-133

-358

Net income (Euro m.)

133

-187

-293

 

 

 

 

Average selling price (Euro)

121

121

120

Кому доверяю так это Gartner, профессионалы.

По ссылке рынок ПК в первом квартале, все не так оглушительно плохо, как могло быть

Появилось новое "исследование" о роуминге — читать вот здесь
Несет джинсой просто невыразимо, а учитывая предыдущее "исследование" о Евросети, то и вовсе плохо.

Выдержка:
"На вопрос, известно ли респондентам о том, что в 2009 году операторы «большой тройки» изменили стоимость услуг в роуминге, подавляющее большинство ответило, что им известно об увеличении стоимости со стороны Билайна и Мегафона, а также об увеличении стоимости услуг МТС в роуминге на деловых направлениях и о снижении на наиболее популярных туристических".

Нормальный человек не ответит так, как сформулирован ответ в конце предложения. Но это бог  с ним. Другое дело, что я тоже могу при желании набрать хоть 20000 респондентов, которые ответят, что пользуются услугами сети "Муртазин и сыновья", их устраивает качество услуг, наличие фирменных телефонов и так далее. Будет ли в реальности существовать такая компания и влиять на рынок? Нет и еще раз нет. Вот ровно также, подобные "исследования" это попытка подогнать видение рынка под представления отдельных компаний, товарищей. Дело делается дурное, нехорошее, так как яма копается для всех подобных работ, которые автоматически будут скомпрометированы. Прекрасно, что мы их больше не делаем, в связи с отсутствием необходимости.

Ребята из SPB Software делают отличный софт, один из лучших. Голова на плечах варит от и до, но когда дело касается "аналитики" я бы поостерегся на них рассчитывать. Феерический пресс-релиз был выпущен на днях

Цитата из пресс-релиза:

Опрос проводился на сайте компании с 10 по 24 ноября 2008 года. Целями опроса, помимо стандартного определения социально-демографических параметров аудитории, являлось изучение лояльности пользователей к брендам — компаниям-производителям устройств, сотовым операторам, а также выявление основных сценариев использования КПК, коммуникаторов и смартфонов. С 2004 года компания Spb Software провела уже пять подобных опросов. Изначально исследование было нацелено только на пользователей програмного обеспечения компании Spb Software, однако позднее опрос приобрел более глобальный статус — на протяжении последних лет в нем участвуют все, кому не безразлично происходящее в мобильной индустрии.

В этом году опрос впервые был расширен за пределы платформы Windows Mobile — в нем участвовали также пользователи других платформ и, в первую очередь, Symbian (владельцы смартфонов Nokia и Sony Ericsson).

В текущем опросе приняли участие несколько тысяч человек из 22 стран мира, включая Россию и страны СНГ. По сравнению с 2007 годом количество участников возросло на 50 %. Русскоязычную версию анкеты заполнило 15 % от общего числа респондентов.

«Безусловно, результаты нашего опроса не являются стопроцентно точной картиной потребительских предпочтений на рынке КПК, коммуникаторов и смартфонов», — комментирует Василий Филиппов, директор по производственным операциям и один из основателей компании Spb Software, — «Во-первых, опрос все-таки несет на себе некое „историческое наследие“ в виде превалирования респондентов-пользователей платформы Windows Mobile. Во-вторых, мы собираем активную пользовательскую аудиторию, которая интересуется тематикой мобильных платформ. Это не совсем среднестатистический пользователь. И тем не менее, наше исследование за прошедшие годы стало неким стандартом на рынке, который использует множество компаний как один из способов оценки характеристик целевой аудитории и сценариев использования мобильных устройств.»

По факту слово репрезентативность не относится к этому опросу. Придя в гей клуб, и проводя опрос присутствующих можно понять следующие вещи:
— Человечество состоит только из мужчин;
— Женщины это непонятный побочный и никому не нужный продукт;
— Лучше **** попа товарища…

Ну и так далее. Очень репрезентативно. Тот же SPB зарекомендовал себя программи для WM и львиная доля пользователей оттуда и пришла к ним. Об этом и сказано, что делает дальнейшие выкладки бесполезными. Можно опросить еще людей в метро, например, задать такие вопросы:
— Вы находитесь в метро? 
— Вы знаете что такое метро? 
— Вы спускались под землю? 

И так далее по списку.

Но окончательно меня добили выводы из "опроса".
Вот они.
 

Общие выводы из данных опроса:

  • Позиции безусловного лидера пользовательских предпочтений — компании HTC — на русскоязычных рынках слабее, нежели вообще в мире. На просторах СНГ конкуренцию лидеру составляют ASUS и E-TEN/Glofiish
  • Русскоязычный пользователь коммуникатора или смартфона моложе зарубежного «коллеги» и более вероятно является менеджером высшего и среднего звена
  • На русскоязычных рынках как минимум в два раза более популярно одновременное использование двух SIM-карт
  • Доля «взломанного» и нелицензионного ПО для мобильных платформ на «русском» рынке все еще как минимум в два раза выше, чем вообще по миру
  • Русскоязычные пользователи более требовательны к функциональной составляющей мобильных устройств
  • 0,25 % русскоязычных участников опроса не смогли дать уверенный ответ относительно своего пола. 🙂

Ванга и та не смогла бы удалено предсказать кем являются пользователи, то ли менеджерами среднего и высшего звена, то ли продавцами в Черкизово.
Использование двух СИМ-карт возможно почти ТОЛЬКО на рынках СНГ (сомневаюсь, что в опросе приняло участие много китайцев). В Европе двухсимочных аппаратов нет вовсе или очень мало, говорить серьезно о них нельзя. Единственные два рынка в мире это Китай и Россия — большие, заметные рынки в пределах своей ниши.
Ну и так далее. Все-таки даже проводя подобный опрос можно составить анкету "правильно", так чтобы результаты были релевантными и интересными не только в качестве очередного информационного повода. Вообщем-то, полное разочарование. Как использовать эту ерунду кто-то может в чем-то отличном от анекдотического пресс-релиза, не знаю.

В одной компании было мимоходом упоминание, что продавцы в салонах связи очень хорошо знают технологию Х, все наперебой ее, если не рекламируют, то вспоминают при вопросах покупателей. Проверили это в конце года с помощью secret buyers или mysterry shopping, как это называем мы. Смешно, но мы занимаеся подобным проектом в телекоме дольше всех и не побоюсь этого слова — лучше всех. Так вот ответственно могу сказать, что если клиенту нужно очковтирательство внутри компании, то он этого легко добивается самостоятельно. Создавая сам анкету для разговоров. Например, говорит, обязательно надо спросить вот такой вопрос:
"А вы знаете технологию Х?"
Примерно 100 процентов ответов продавцов будет положительными. Не надо мудрить, все предельно просто. Но по факту это подтасовка реальности. Задайте вопросы иначе, выведете разговор по-другому и получите обратные результаты. Например, мы уверены, что технологию Х не знает никто, да и не вспоминает. Только на прямой вопрос, либо очень нереальный диалог и подводку продавца к нужному ответу можно получить необходимое, искомое.
Если в компании работают не очень глупые люди, то и стандартных исследовательских инструментов, они могут нарисовать такую картину мира, что создастся впечатление о полной и безоговорочной победе технологии Х на одной шестой части суши. Но в реальности этого нет и близко. Разница в восприятии очень велика. А ведь наверх в штаб-квартиру и другие отделы идут подобные "исследования" на основании которых принимаются некоторые весьма значимые решения. И получается, что это полная профанация.

P.S. Меня настолько поразила цитата, что не доверяя тем данным, что у нас уже есть прошелся по ряду магазинов в центре. Моя душа спокойна. Никто не знает технологии Х.

Powered by WordPress Web Design by SRS Solutions © 2021 Лично/общественный дневник Эльдара Муртазина Design by SRS Solutions