50 новых инструментов для анализа и визуализации данных

50 новых инструментов, демократизирующих процесс анализа и визуализации данных от Леонардо Мерфи.

Подобно тому как ранее мы стали свидетелями перехода на платформы сбора данных, работающие по принципу «сделай сам», теперь мы также можем наблюдать за развитием целого нового класса инструментов для самостоятельного изучения и визуализации данных. Это необязательно замена SPSS, SAS, R и других традиционных аналитических наборов программ – последние представляют собой системы корпоративного уровня и зачастую по-прежнему необходимы для проведения более сложного и продвинутого статистического анализа. Однако у новичков довольно много преимуществ перед существующими инструментами: они менее дорогие (во многих случаях бесплатные), более гибкие, проще в использовании и построены с учетом потребностей самых разных пользователей. Сегодня можно найти множество инструментов, которые могут помочь даже самому неопытному пользователю быстро освоиться и начать работать со сложными видами анализа, создавая превосходные визуализации на основе различных типов данных.

Демократизация процесса анализа данных идет полным ходом.

Конечно, большой выбор различных программ, доступных аналитикам и исследователям, существовал всегда, так что само по себе расширение их арсенала не является революционным событием. К примеру, если говорить только об отрасли маркетинговых исследований, за прошедшие годы платформы сбора данных на основе опросов интегрировали в свои предложения достаточно продвинутые инструменты анализа данных, однако они, в большинстве случаев, ограничиваются сбором данных в рамках соответствующей системы и не особенно хорошо подходят для синтеза массивов внешних данных. Даже несмотря на тот факт, что зачастую они способны на гораздо большее, обычно их использование ограничено управлением полевыми исследованиями и некоторыми возможностями клиентского доступа к данным на ранних этапах исследования и не включает в себя полностью интегрированного процесса подготовки отчетов по полученным данным.
С начала моей работы в области маркетинговых исследований в конце прошлого века стандартный рабочий процесс обработки данных состоял, в основном, из следующих действий: экспорт данных в разделенном формате в SPSS, их очистка с помощью этого приложения, экспорт в WinCross или другое приложение для сведения данных в таблицы, а затем создание массивов перекрестных табличных данных и документов в формате Excel на основе полученных таблиц. Программное обеспечение типа e-Tabs и MarketSight позволяло упростить некоторые из этих процессов и, конечно, в ряде организаций возможности систем сбора данных использовали в большем объеме или же разрабатывали собственные решения с применением макросов, однако большинство представителей этой отрасли ограничивались стандартизованными технологическими операциями.
Следует отметить, что в большинстве случаев от специалистов по анализу рынка требовалось лишь проанализировать массивы дискретных данных и подготовить разнообразные графические иллюстрации по основным полученным результатам. Однако в начале 2000-х эта ситуация начала меняться с появлением таких инструментальных панелей, как Xcelsius, Crystal Reports, Dundas Charts и многих других, поскольку мы начали осознавать потребности клиентов в новых способах работы с полученными данными. Однако зачастую эти платформы по-прежнему работали в рамках принятого поэтапного процесса, включавшего в себя сбор данных в одной системе, их экспорт в статистическое приложение для очищения и анализа и последующий экспорт в базу данных на SQL или даже в крупноформатные таблицы типа Excel, чтобы с ними можно было работать с использованием этих инструментальных панелей. Такая система работы была громоздкой и часто приводила к сбоям. Немногие поставщики услуг в области маркетингового анализа начали работать с системами таких инструментальных панелей и были довольны сложившейся ситуацией, что позволило специалистам в области информационных технологий и бизнес-анализа возглавить революцию в сфере визуализации данных на ее ранних стадиях с использованием этих и подобных им инструментов.
Ввиду того, что интерес клиентов не угас (а, по сути, даже вырос в плане объемов и четкости представления данных), технические специалисты сделали то, что они делают всегда: создали новые, более эффективные модели, которые разрушили существовавшую парадигму. Во всех областях – от синтеза до визуализации – и для всех возможных типов данных появились инструменты, которые невероятно упростили процесс использования данных для эффективного анализа. Большинство этих инструментов не требуют навыков программирования или даже какой-либо серьезной подготовки – все процессы управляются методом «указания и щелчка», а большая часть наиболее сложной работы проходит без участия пользователя.
Я экспериментировал с некоторыми из этих платформ, наиболее подходящими для традиционных методов исследования, и далее в этой статье я расскажу вам о нескольких самых любимых, а также изложу свои мысли об их применимости в области маркетинговых исследований. Эту статью ни в коем случае нельзя считать полным перечнем существующих возможностей или даже подробным отчетом по ним, это скорее краткое введение в работу с некоторыми инструментами, о которых вы, возможно, еще не слышали, которое было создано именно для того, чтобы вы могли с ними познакомиться.
Также следует упомянуть, что в данной статье не рассматривались платформы Infotools, Research Reporter и Tableau так как я не пользовался ими лично, хотя и слышал только хорошие отзывы пользователей в их адрес. В частности, Infotools, похоже, стремится расширить существующие границы и сделать процесс анализа и визуализации данных для исследований более легким и эффективным для всех типов проектов в этой области.
Именно эти и названные ниже компании помогают изменить процедуру обнаружения полезных инсайтов, делая процесс анализа данных более доступным для тех из нас (включая меня самого), кто не являются дипломированными специалистами по статистике или анализу данных.

OfficeReports

Программа OfficeReports – это настоящее сокровище. Она помогает решить давнюю проблему многих специалистов по маркетинговым исследованиям, упрощая процесс перевода данных из программ обработки статистических показателей напрямую в основное приложение для подготовки отчетов – Microsoft Office. Она не изобретает велосипед заново, но значительно совершенствует его. Мы можем сколько угодно горевать по поводу своей зависимости от PowerPoint и Excel, и все же именно они являются стандартным коммерческим программным обеспечением всего мира. Сотрудники Office Reports прекрасно это понимают и потому разработали программу, которая выглядит, ощущается и функционирует, как дополнение к Office, и справляется со всем этим очень и очень хорошо.
OfficeReports позволяет, ни больше ни меньше, превратить Microsoft Office в полноценное приложение для проведения полного анализа данных и подготовки отчета по ним для исследований. OfficeReports добавляет кнопку «Меню OfficeReports» на панель PowerPoint и Word. Через меню OfficeReports вы можете вставить массив данных в документ или презентацию и затем с легкостью работать с этими данными, создавать таблицы и графики. И все это прямо в Microsoft Office.
Посмотрите этот краткий ознакомительный видеоролик:

Second Prism

Second Prism входит в группу компаний Survey Analytics. Это облегченная версия базы данных для Mobile Adapter, которая позволяет быстро и безопасно публиковать динамично меняющиеся отчеты на мобильных устройствах. Ее графическое представление отличается четкостью и интуитивной понятностью, а вся система в целом разработана для предоставления возможности поделиться полученной информацией с другими членами рабочей команды или третьими лицами в социальных сервисах. Если обеспечение доступа к интерактивным диаграммам и графикам с мобильных устройств является приоритетной задачей, Second Prism – это надежная платформа, позволяющая реализовать эту возможность удобным для пользователя способом.
Посмотрите видеоролик с кратким обзором продукта, приведенный ниже.

Databoard

Databoard Databoard – новинка мира удобных для использования инструментов работы с данными от Google. Это простое, интуитивно понятное и бесплатное приложение, которое служит наглядной иллюстрацией новой парадигмы открытых данных. На Gigaom несколько недель назад появился обзор, посвященный этой программе, и вот что в нем сказано:
Новая программа от Google Databoard так хороша не из-за статистических данных, полученных компанией в рамках различных исследований в индустрии мобильных устройств, а скорее потому, что она бесплатна, симпатична и с ней легко начать работать. Она, конечно, не сможет в обозримом будущем заменить собой целые аналитические или исследовательские компании, однако если бы я сам занимался бизнесом, в котором за отчеты по маркетинговым исследованиям выставляют счета на сотни тысяч долларов, то я бы не стал относиться к Databoard чересчур легкомысленно.
В двух словах новый сервис можно описать так: сотрудники Google провели множество исследований, посвященных тому, как люди пользуются мобильными устройствами, и теперь создали сервис, с помощью которого вы легко можете получить доступ к основным резутатам этих исследований, а затем поделиться ими с другими людьми или же преобразовать их в инфографику. Вы также можете просто скачать отчеты по этим исследованиям целиком. Это невероятно простая и, теоретически, невероятно полезная программа.
Сейчас я пытаюсь понять, какими могут быть следующие шаги компании по развитию Databoard. Если они будут включать в себя предоставление пользователям возможности загружать собственные массивы данных или привязывать их к данным потребительских исследований Google, тогда я, пожалуй, соглашусь с Gigaom в том, что это – первый звоночек для всей отрасли маркетинговых исследований. В данный момент это превосходный ресурс, позволяющий изучить вторичные данные и создать на их основе некоторую базовую инфорграфику, а, кроме того, это вполне понятный указатель возможных будущих перемен.

DataMarket

DataMarket – это гибридное решение, выполняющее сразу несколько функций:

• Это портал открытых данных, предоставляющий возможность просмотра и анализа тысяч публично доступных массивов данных. Необычен он тем, что вы можете самостоятельно отбирать переменные из множества отдельных массивов и комбинировать их или же создавать перекрестные сводки данных. Хотите установить взаимосвязь между уровнем безработицы в Ирландии и индексом Доу-Джонса в любой определенный день и проанализировать его с точки зрения стандартных демографических показателей? Data Market позволит вам реализовать это на практике.
• Вы можете официально оформить платформу как собственный концентратор информации. Загрузите свои данные и предоставьте желающим возможность просматривать и анализировать их. И, опять-таки, здесь реализована возможность получения мгновенного доступа к множеству переменных из различных массивов данных и проведения довольно сложного анализа – и все это делается по одному щелчку мыши.
• Систематизируйте и находите нужные вам данные. Поисковый сервис программы Datamarket обладает превосходной функциональностью и позволяет систематизировать данные множеством различных способов в соответствии с вашими потребностями. Это очень гибкая система классификации, которая создает вашу библиотеку прямо в процессе работы с данными.

Вот ознакомительный видеоролик программы.

Q Research Software

Я являюсь поклонником Q Research Software вот уже несколько лет. Эта компания стала нашим партнером по обработке и доставке данных на нескольких последних этапах работы по проекту исследований GRIT благодаря надежности своей платформы. В отличие от других упомянутых решений, это полноценная альтернатива SPSS, SAS и другим системам. Разработанная австралийской фирмой Numbers, Inc. программа Q предлагает надежный и простой для понимания интерфейс, который отвечает требованиям как новичков, так и продвинутых пользователей, включая в себя такие функции как анализ выбора, многовариантный анализ, прогнозное моделирование и интерактивная панель инструментов для создания диаграмм и работы с данными, позволяющая визуализировать полученные результаты и подготавливать по ним соответствующие отчеты.
Одной из ее характеристик, которая мне очень нравится, является возможность отбирать и комбинировать переменные из любого массива данных, загруженного мной для проведения дополнительного анализа. Также впечатляет функция, позволяющая с легкостью соединить или перекодировать данные прямо в процессе работы. Меня удивляет тот факт, что компания IBM или какой-либо из ее конкурентов до сих пор не выкупили Q – это по-настоящему хорошо проработанная аналитическая система, и я подозреваю, что в самое ближайшее время найдется кто-то, кто приобретет ее, чтобы вывести на следующий уровень.
Следующий видеоролик поможет вам получить представление об этом удивительном инструменте:

Statwing

Statwing – одна из компаний, которые были приглашены в качестве участников конкурса Insight Innovation Challenge, прошедшего в IIeX Philadelphia в июне. Еще до презентации своего проекта она показалась интересной многим участникам, а уже после нее этот интерес возрастал в геометрической прогрессии. И нетрудно понять, почему. По их собственным словам, предложенная ими программа позволяет: Проанализировать статистические взаимосвязи без специализированных знаний. Визуализировать имеющиеся данные одним щелчком мыши. Благодаря Statwing процесс работы с данными становится интуитивно понятным и прекрасным.
И именно это она обеспечивает. У нее невероятно простой пользовательский интерфейс, за которым скрыты очень сложные рабочие модели. Она подбирает подходящие статистические тесты автоматически, с учетом выбросов или других проблем имеющихся массивов данных. Эта программа представляет результаты работы четко, в соответствующем визуальном оформлении и интерактивном формате. Неудивительно, что на компанию обратили самое пристальное внимание представители технической отрасли и бизнес-аналитики – она действительно помогает даже начинающим пользователям проводить сложные виды анализа и создавать эффектные визуализации.
И, наконец, давайте взглянем на Dapresy. Dapresy широко используется многими фирмами, занимающимися маркетинговыми исследованиями, благодаря имеющемуся инструментарию и функциям подготовки отчетов (с чем она очень хорошо справляется), но от прочих ее отличает возможность интеграции механизма создания инфографики и дизайнерской студии, что помогает пользователям быстро и без лишних затрат создать собственную графическую библиотеку. Вот чуть более подробное описание с официального сайта проекта:
Dapresy Pro создает веб-порталы для загрузки динамичных онлайн-презентаций и отчетов, своевременно предоставляя четкие, применимые на практике результаты анализа данных, полученных в ходе исследований, и другой коммерческой информации, поступившей с рынков, от пользователей и потребителей.
Помимо возможности создания превосходных панелей инструментов для работы с инфографикой, система предлагает полностью интегрированные модули для обработки, статистического учета и анализа данных, построения таблиц с перекрестными ссылками, а также составления диаграмм и автоматического обновления данных.
Можно найти множество примеров результатов работы системы в разделе Ideabox, и как пользователь я могу сказать, что создавать похожие высококачественные визуализации и интерактивные панели довольно легко. Все это произвело на меня столь сильное впечатление, что я планирую начать использовать некоторые возможности Dapresy в GRIT уже на следующем этапе работы.
Это лишь несколько из недавно вышедших программ, которые я изучил лично. В действительности их намного больше, особенно если углубиться в обширную зону бизнес-аналитики и больших данных. Такие инструменты как DataHero, Wolfram Alpha, BigML, LavaStorm и ManyEyes все чаще вытесняют традиционные статистические программы, используемые исследователями. Конечно, некоторые из них далеки от простоты во всех смыслах этого слова, однако многие были разработаны с тем, чтобы серьезно облегчить задачу анализа данных, полученных из множества различных источников. Эпоха, в которую статистики и аналитики были узкоспециализированными экспертами, стремительно подходит к концу, так как эти инструменты позволяют любому желающему с легкостью выполнять ту же работу. И все же навыки профессионалов по работе с данными останутся востребованными, хотя уже, скорее, в сфере развития информационных технологий, чем в аналитике, так как в игру вступает все больше и больше инструментов, позволяющих автоматизировать этот процесс для любого пользователя.
И чтобы сделать эту статью действительно полезной для вас, я хочу познакомить вас с восхитительной интерактивной таблицей, созданной в Computerworld, в которой представлены разнообразные совершенно бесплатные инструменты: Инструменты визуализации и анализа данных. Для удобства я скопировал саму таблицу – она приведена ниже – убрав из нее интерактивные элементы.

*Программа Highcharts бесплатна для некоммерческого использования, а также распространяется по цене $80 в большинстве случаев лицензирования для использования на одном сайте.
**В то время как встраиваемые программы бесплатны, пакет Excel (который необходим для их работы) таковым не является.

Надеюсь, вы протестируете хотя бы некоторые из представленных в этом списке программ лично. Существует гораздо больше доступных специалистам по маркетинговым исследованиям инструментов, чем SPSS, WinCross, Excel и PowerPoint, и многими из них легче пользоваться. Изучите их возможности и найдите решения, которые могут помочь вам сделать процесс анализа и визуализации данных дешевле, проще и эффективнее.