ФИЛЬМ РЕВОЛЮЦИЯ
ВЕБ-ДАННЫХ
Революция веб-данных
2022 | 10мин. 12с. | Технологии и бизнес
В этом коротком документальном фильме рассказывается о том, как общедоступные данные меняют видение, мышление и подход компаний к принятию решений.
Революция веб-данных
Как общедоступные данные меняют видение, мышление и подход компаний к принятию решений
Говорят, что когда сеть магазинов Walmart только открылась, Сэм Уолтон следил за работой магазинов, подсчитывая количество машин на парковке.
А что, если бы он мог подсчитать количество автомобилей в каждом Walmart и сопоставить эти данные с местными рекламными акциями, чтобы оптимизировать свою рекламу?
Или отслеживать изменения цен каждого конкурента по почтовому индексу онлайн, чтобы оптимизировать собственную стратегию ценообразования?
Или фиксировать марку, модель и возраст каждого автомобиля, чтобы определить оптимальные места для размещения автоцентров?
С момента открытия первого магазина Walmart прошло уже 60 лет, и сегодня высочайший потенциал сбора веб-данных позволяет нам ответить на эти вопросы. Вот почему залы заседаний, производственные лаборатории и отделы маркетинга многих ведущих компаний сегодня все больше напоминают разведывательные органы.
Эта революция отчасти имеет технический характер: обширные сети прокси-серверов, созданные специально для крупномасштабного сбора веб-данных, позволили собирать, структурировать и интерпретировать данные новыми, невероятно эффективными способами. Это можно сравнить с тем, как Salesforce преобразовала управление взаимоотношениями с клиентами, а Slack — офисную электронную почту.
Есть здесь и философский подтекст: искусство лидерства теперь зависит не столько от умения найти правильные ответы, сколько от умения задать нужные вопросы. Правильно сформулируйте вопросы, и вы получите просто-таки несправедливое, по мнению стороннего наблюдателя, конкурентное преимущество.
Но самостоятельно подобрать нужные вопросы получается не всегда.
Сколько времени вы тратите на исследования, прежде чем принять важное решение? Многие из нас скажут, что не особенно много. Людям свойственно делать предположения, чтобы упростить этот сложный мир — для этого они выявляют закономерности, опираются на опыт, делятся советами и следуют своей интуиции.
Этот способ мышления зачастую позволяет получить удивительно хороший результат, но вместе с тем он имеет и множество минусов, таких как эффект недавнего (проявляется, когда мы слишком полагаемся на наиболее свежие воспоминания), предвзятость подтверждения (бессознательный поиск информации, подтверждающей наши убеждения) и ошибка нарратива (склонность человека верить красивым историям, а не актуальным данным).
Революция в области общедоступных данных требует более рационального подхода. К принятию деловых решений нужно подходить без предубеждений — даже при рассмотрении ситуаций, которые, как нам кажется, нам прекрасно знакомы.
Отказ от предположений может помочь вам выявить новую информацию незамыленным взглядом. Вы сможете выявить очевидные связи, которые раньше не замечали — например, взаимосвязь между количеством автомобилей на парковке и итоговым количеством долларов.
Данные позволяют определить динамику рынка по продуктам, ценам, запасам, цепочкам поставок и поведению потребителей. Они рассказывают о действиях потребителей, помогают определить важнейшие тенденции и даже предугадать дальнейшие шаги ваших конкурентов.
Сбор информации из общедоступных веб-данных является переломным моментом. Компании, не обратившие внимания на подъем Интернета и мобильной экономики, дорого заплатили за свою невнимательность. Пропустите революцию веб-данных — и вы можете стать следующей Blockbuster Video.
Как быстро идет развитие? В Bright Data мы обрабатываем 15 миллиардов запросов в день, что в полтора раза больше, чем все поисковые системы мира вместе взятые. Это число неуклонно растет.
Ответы ждут вас. И вот некоторые из наиболее характерных вопросов, которые задают наши клиенты:
Инвестиционный аналитик спрашивает:
«Какова динамика розничных цен на отбеливатель?»
Мика — аналитик в бостонском хедж-фонде, где он отвечает за генерирование новых инвестиционных идей. Просматривая данные по акциям, он обратил внимание на одну химическую компанию. Показатели компании выглядели убедительно, но он хотел понять, удастся ли ей сохранить свою ценообразовательную способность в условиях инфляции.
И тогда его осенило: поскольку компания была одним из крупнейших поставщиков отбеливателей, Мика мог бы отслеживать цены на отбеливатели на всех рынках, где компания их реализует. Он выявил четкую тенденцию роста розничных цен, которая подтверждала, что компания сохраняет свою ценообразовательную способность и, вероятно, сможет защитить свою маржу.
Среди инвесторов такие общедоступные веб-данные называют альтернативными данными. Большинство хедж-фондов используют их в дополнение к традиционным источникам, таким как данные о прибыли и годовые отчеты. Также к альтернативным данным можно отнести воздушную съемку оптовых баз, отслеживание социальных сетей для выявления настроений инвесторов и мониторинг погоды для прогнозирования урожая.
Ожидается, что мировой рынок альтернативных данных ежегодно будет расти на 46,5%, и к 2026 году будет оцениваться в 13,91 млрд долларов.
Источник: Доклад о мировом рынке альтернативных данных 2022
Директор по маркетингу спрашивает:
«Как люди продают мой продукт в Интернете?»
Джилл возглавляет отдел маркетинга модного европейского бренда, где отвечает за поддержание безупречного имиджа бренда и работу с клиентами.
Она, в частности, следит за тем, чтобы все фотографии соответствовали требованиям бренда. Описания должны быть правильными. Промо-акции должны следовать сезонным кампаниям. Несанкционированные распродажи или скидки недопустимы. Доставка должна производиться в кратчайшие сроки.
Но как обеспечить целостность бренда в мире, где количество онлайн-реселлеров исчисляется десятками тысяч? Для команды Джилл ответом стали общедоступные веб-данные. Ее специалисты постоянно ищут в Интернете информацию о своих продуктах и передают результаты алгоритму, который уведомляет их о всех интересных находках.
Масштабный поиск текста, изображений, аудио и видео используется для защиты всех видов брендов и их интеллектуальной собственности. Он помогает художникам выявлять случаи использования их работ в Интернете и позволяет социальным сетям блокировать загрузку нелицензионных материалов.
Bright Data ежедневно сканирует около петабайта данных. Это 500 миллиардов страниц текста или более 100 000 фильмов в DVD-качестве.
Даже если вы ищете иголку в стоге сена, мы сможем ее найти.
Генеральный директор туристической компании спрашивает:
«Как предложить своим клиентам самые выгодные туристические предложения в мире?»
Компания Берта целиком и полностью полагается на веб-трафик. Его задача — гарантировать, что сайт компании и в будущем останется платформой, на которой можно будет найти наиболее полные и точные данные по предложениям туристических агентств, отелей и авиакомпаний.
Хотя многие поставщики туристических услуг предоставляют ему основную информацию, такую как цены и расписания, через API, эти данные нередко фрагментарны, неактуальны или неполны.
Какое решение нашел Берт? Он ведет постоянный сбор наиболее актуальных предложений по всему Интернету. Он получает данные в формате, который позволяет его команде алгоритмически сортировать и представлять их клиентам, чтобы они могли легко найти оптимальную цену, кратчайший маршрут, нужную дату и даже бесплатный Wi-Fi, если это им необходимо.
Собираете ли вы предложения по кредитным картам, ищете ли компании по уходу за газонами или агрегируете какие-либо другие данные, веб-данные — это мощный инструмент, который существенно повысит вашу эффективность. Он подойдет и для конечных поставщиков — например, отели на сайте Берта могут собирать данные, чтобы понять, как их тарифы соотносятся с тарифами конкурентов.
Музыкант will.i.am, занимающийся инвестициями в технологической сфере, однажды сказал: «WWW — это дикий, дикий Запад».
Сбор общедоступных веб-данных привносит фокус и структуру в хаос Интернета.
Основатель стартапа спрашивает:
«Как мне выделить свой продукт среди конкурентов?»
Майя разработала отличный продукт — наушники со встроенным эквалайзером, который позволяет персонализировать звук с учетом возрастных изменений. Но она понимает, что без эффективной бизнес-стратегии ее продукт никогда не выйдет на рынок.
Первым ее шагом стало использование инструментов сбора общедоступных данных для поиска конкурентных товаров на Amazon и других сайтах розничной торговли. Она создала базу данных с ценами, характеристиками, рейтингами и остальной информацией, которая помогла бы ей позиционировать свой продукт в оптимальном сегменте рынка.
Далее необходимо было настроить постоянное отслеживание данных конкурентов — начиная с цен, скидок, уровня запасов и сроков доставки и заканчивая такими данными, как цвета, ап-селлы и отзывы пользователей. Кроме того, каждый показатель можно было сегментировать по странам и регионам, вплоть до кода региона.
Все это дало Майе серьезное преимущество при настройке воронок продаж, ценовых стратегий и рекламных акций по электронной почте. Практически любая компания в сфере электронной коммерции может следовать этому подходу для сбора и структурирования веб-данных в реальные, пригодные для практического применения интеллектуальные данные.
Генеральный директор Bright Data Ор Ленхнер говорит: «Интернет — это крупнейшая в мире база данных. Теперь вы можете отправлять в нее запросы».
Представьте, что у вас есть поисковая система, созданная для предоставления вам действенной бизнес-аналитики.
Сбор веб-данных можно сравнить с походом в публичную библиотеку, где к вашим услугам сразу все книги. Такие компании, как Bright Data, заинтересованы в том, чтобы эта библиотека оставалась открытой. Поэтому они принимают дополнительные меры предосторожности для обеспечения ее целостности. Для этого мы используем этический кодекс, а также программные протоколы, которые предотвращают любое злоупотребление технологией.
Мы рассматриваем сбор и анализ общедоступных веб-данных как существенный фактор положительного развития общества. Это сильное конкурентное преимущество для бизнеса. Оно расширяет возможности выбора для потребителей. Кроме того, оно помогает решать некоторые из наиболее важных экологических и социальных проблем нашего времени.
Например, прохладным весенним утром прошлого года полиция выбила дверь одной из квартир на юге Чикаго. Ворвавшись внутрь, полицейские арестовали двух человек, подозреваемых в торговле людьми. Полицейские спасли четырех женщин в возрасте от 17 до 26 лет и изъяли наличные, наркотики и оружие.
Аресты были произведены в рамках операции, в ходе которой велся сбор данных из онлайн-объявлений о сексуальных услугах, а для выявления потенциальной деятельности по торговле людьми использовались интеллектуальная обработка данных и сетевой анализ.
Эта статья подготовлена в рамках нашей постоянной программы The Bright Initiative, направленной на популяризацию сбора общедоступных веб-данных для развития в таких областях, как права человека, соблюдение нормативов, изменение климата, общественное здравоохранение и безопасность в Интернете.
Сегодня темпы внедрения веб-данных быстро ускоряются. Пользователи, от риэлторов до портфельных менеджеров, от производителей до музыкантов, от стартапов до транснациональных корпораций, задают нужные вопросы и находят ценные ответы во всех возможных областях.
Представьте, что вы — единственный человек на Земле, имеющий доступ к Google. Вы бы, наверное, сдавали все возможные экзамены, опережали всех на карьерной лестнице и поражали друзей своими сверхъестественными знаниями. Вероятно, было бы понятно, что у вас есть некое секретное преимущество.
Теперь подумайте о том, как Мика предлагает лучшие инвестиционные идеи. Джилл формирует кристально-чистый имидж бренда. Берт доминирует в сфере путешествий. Майя развивает свой стартап. Не говоря уже об актах правосудия и героизма, которые стали возможны благодаря чудесным веб-данным.
Инструменты сбора веб-данных — это своего рода суперспособность. Если при нынешних темпах изменений вы не сможете задействовать их сейчас, в будущем вы можете безнадежно отстать. Вам ведь знакомо ощущение беспомощности, которые испытываешь, когда оказываешься в каком-то незнакомом месте без Wi-Fi?
Но доводить до этого необязательно. Ведь инструменты разложены перед вами. Вам просто нужно правильно сформулировать вопрос, а затем…
Просто спросите.
