Энциклопедия маркетинга. Гибридная бизнес-аналитика с Power BI

Потребность в аналитике больших объемов данных, с целью аудита, выявления проблем и генерации новых знаний, высока в любой связанной с ИТ области.

Направление информационной безопасности не исключение. Для сбора и корреляции разнокачественных источников данных принято использовать системы класса SIEM (Security information and event management). При этом для оперативного решения задач, встающих перед службой информационной безопасности, хорошо подходят и системы бизнес аналитики (Business Intelligence).

Power Pivot / Power View

Надстройки позволяют обрабатывать и визуализировать большие объемы данных из нескольких источников. В общих чертах работа с надстройками сводится к следующим этапам:

1. Исходя из задачи определить источники информации
2. Загрузить данные в Power Pivot
3. Провести дополнительную обработку данных и связать таблицы между собой (создать модель данных)
4. Вывести на PowerView интересующие графики и отчеты

Пример: Аудит web сервиса

В компании есть web сервис, с помощью которого внешние пользователи регистрируются на прием и подают заявления. Количество ресурсов (время приема) ограниченно, кто не успел - ждет следующей недели, значит - возможны злоупотребления. Межсетевые экраны фиксируют атаки на сервис, больше всего в момент открытия регистрации на прием.

Требуется провести аудит, чтобы понять нагрузку на сервис, кто из пользователей и организаций наиболее активен, как пользователи связаны с атаками, есть ли аномалии в работе сервиса.

Исходные данные: логи web сервера, БД web приложения, БД web aplication firewall

Объединяя исходные данные на одном листе PowerView получаем удобный инструмент аналитики. Ответы на перечисленные вопросы становятся буквально "видны". Кроме того, становятся доступны новые знания, например были выявлены взаимосвязи пользователей между собой (по почте, IP адресам) что позволило лучше понять происходящие процессы и пресечь злоупотребления.

Power BI

С 2016 у Microsoft появился отдельный продукт, позиционирующийся как сервис бизнес аналитики. Power BI базируется на тех же компонентах и логике что и Power Pivot, но является отдельным приложением, а не надстройкой к Excel. Возможностей по аналитике значительно больше, есть дополнительные плагины, в том числе для визуализации связей . Так же доступен хороший учебный курс .

Пример: Аудит подключений пользователей

В компании есть терминальные сервера, к которым подключаются внешние пользователи. Требуется провести аудит активности внешних пользователей на терминальных серверах, а так же внутренних пользователей на контроллерах домена, выявить подозрительную активность, в том числе по неудачным подключениям.

Исходные данные: Windows event logs с серверов, каталоги Active Directory, таблицы Microsoft security events description.

Помимо общей статистики, о том какие пользователи и организации работают больше всего или в какое время на сервера идет наибольшая нагрузка по результатам аудита были выявлены такие инциденты:

1. Использование учетных записей пользователей с нескольких узлов, в том числе одновременно, что означало компрометацию учетной записи;
2. Активности в нерабочее время, когда пользователь не мог быть на своем рабочем месте;
3. Брутфорс пароля. На сервере фиксировались события неправильного ввода пароля пользователем, но блокировки учетной записи не происходило, т.к. между попытками ввода пароля проходило достаточно много времени чтобы сбрасывался счетчик неудачных попыток авторизации. Учитывая, что в день таких событий по одному пользователю было более 30 предположение о том, что это человеческий фактор, было исключено.

Резюме

Если Power Pivot стал для меня скорее вынужденным инструментом для решения конкретных задач то Power BI это настоящее открытие, дающее весьма широкие возможности для оперативного анализа всего и вся. Недостатком Power BI является то, что он не SIEM и не умеет осуществлять сложных корреляций и слать оповещения. Но как инструмент для получения новых знаний и проведения периодических аудитов Power BI подходит отлично.

Преимуществом визуального анализа является то, что в процессе анализа часто выявляются знания, о которых ранее было ничего не известно. Появляются ответы на вопросы, которые не задавались, но не потому, что не важны, а потому что предвидеть все не возможно.

А какие инструменты для анализа данных используете вы? Какие нестандартные источники данных при визуальном анализе дают полезные службе ИБ результаты?

Microsoft Power BI - это набор средств бизнес-аналитики для анализа данных и предоставления ценной информации. Контролируйте свой бизнес с любого устройства в любой точке мира в режиме реального времени!

В основе концепции Power BI следующие идеи:

1. Красочная современная графика Современные технологии с учётом последних трендов в анализе данных.		2. Самостоятельный анализ (Self-BI) Бизнес-пользователи могут самостоятельно анализировать и создавать интерактивные панели без помощи ИТ-отдела.		3. Мобильность Приложения для мобильных устройств на базе Windows, Android и iOS.
4. ВСЁ и СРАЗУ! Анализируйте сразу все ваши данные в удобном формате. Встроенные коннекторы к большинству систем и сервисов.		5. Представление данных Большой набор визуальных представлений.		6. На одном языке с вами Просто спросите у Power BI: “Какая маржа по всем проектам за II квартал 2018 года?”, и система сразу даст ответ в виде интерактивной панели.
7. Единый центр анализа Больше не надо искать информацию о делах компании по разным папкам и файлам. Вся аналитика формируется в ОДНОМ интерактивном интерфейсе.		8. Общий доступ Общий доступ ко всем приложениям с любых устройств.

Интерактивный (кликабельный) демо-пример

Получить демо

Стоимость и функционал Power BI

Получить демо

Зачем Вам Power BI?

С Power BI вы сможете анализировать все данные своей компании, как облачные, так и локальные. Включив воображение и используя визуальные инструменты Power BI, вы создадите интерактивные отчёты за считанные секунды в режиме реального времени. Система сама автоматически устранит проблемы с форматированием данных. Работая с Power BI, вы сможете подключить базы данных SQL Server, модели Analysis Services и другие источники данных к одним и тем же интерактивным панелям в Power BI.

Какие знания нужны для работы с Power BI?

После внедрения системы бизнес-пользователю не потребуется специальных знаний, чтобы эффективно работать с данными. Удобный, интуитивно понятный интерфейс позволит быстро и легко изменить или создать аналитику в нужном представлении.

Проект внедрения Power BI

BI команда компании Первый БИТ - это команда экспертов отрасли, имеющая большой опыт внедрения проектов на различных платформах. Мы комплексно закрываем все потребности клиента в рамках внедрения бизнес-аналитической системы Power BI:

• Обследование ваших бизнес-процессов
• Формирование и согласование требований к BI-системе
• Подключение к источника данных и их консолидация
• Построение модели данных и разработка отчётности
• Обучение ваших сотрудников (бизнес-аналитиков и разработчиков)
• Профессиональная технологическая поддержка вашей компании в будущем

Примеры решений на Power BI

Чтобы создавать понятные отчеты и обновлять их в режиме реального времени современному бизнесу необходим мощный сервис для обработки информации. В комментариях к моим предыдущим читатели неоднократно просили написать мануал по работе с Microsoft Power BI. В этой статье я расскажу, как начать работу с данной платформой.

Кратко о возможностях Microsoft Power BI

Power BI — достаточно мощная и при этом бесплатная BI-платформа. Microsoft вкладывает много средств в развитие этого продукта, в связи с чем часто выходят обновления, расширяющие ее возможности. Вы можете использовать такие версии программы:

• Power BI Desktop предназначен для разработки модели данных и отчетов;
• Power BI Service — онлайн-аналог, который специализируется на мониторинге и анализе готовых отчетов, поэтому возможности конструирования и работы с данными там очень ограничены.

Как правило, декстопная версия используется в качестве конструктора, после чего разработанный файл публикуется в Power BI Service . Для дальнейшей работы скачайте Power BI Desktop по этой ссылке .

Для пользователей Microsoft Windows 10 есть отдельная версия Power BI Desktop, которую вы можете найти, перейдя по этой ссылке.

Откуда можно загружать данные?

Power BI имеет множество встроенных коннекторов к различным сервисам и базам данных, с помощью которых вы в считанные минуты можете загрузить в программу нужный набор данных из различных источников, связать их между собой и построить консолидированные отчеты и диаграммы. На момент написания статьи все доступные коннекторы распределены на четыре группы:

1. Группа «Файл»:

Как видите, в Power BI можно импортировать данные из наиболее известных баз данных и сервисов, используя различные форматы файлов. После загрузки информации из доступных источников в Power BI, перед вами открываются большие возможности по очистке и преобразованию данных, в связи с тем, что в платформе присутствует достаточно мощный ETL функционал. Загружаемые таблицы можно редактировать, а на основе их столбцов создавать расчетные столбцы и меры — таким образом вы можете преобразовать массивы информации в наборы данных со структурой, необходимой для построения визуализации.

Сформировав набор данных, загруженных из различных источников, вам станут доступны множество встроенных элементов визуализации:

• линейчатая диаграмма с накоплением;
• гистограмма с накоплением;
• линейчатая диаграмма с группировкой;
• гистограмма с группировкой;
• нормированная линейчатая диаграмма;
• нормированная гистограмма;
• график;
• диаграмма с областями;
• диаграмма с областями с накоплением;
• линейная гистограмма и гистограмма с накоплением;
• линейная гистограмма и гистограмма с группировкой;
• каскадная диаграмма;
• точечная диаграмма;
• круговая диаграмма;
• диаграмма дерева;
• карта;
• таблица;
• матрица;
• заполненная карта;
• воронка;
• датчик;
• многострочная карточка;
• карточка;
• ключевой показатель эффективности;
• срез;
• кольцевой график;
• визуальный элемент r-script (на данный момент включается в параметрах программы).

Все элементы имеют достаточно широкий спектр настроек, направленных на изменение нужных параметров: цвет, фон, название, границы и так далее. Если вам будет недостаточно стандартного набора, можно загрузить пользовательские визуальные элементы.

Больше полезных советов по аналитике — в нашей рассылке. Просто заполните форму:

Отправить

Как загрузить данные в Power BI Desktop?

1. Установите связь с Google Analytics

1.1. Приступим непосредственно к загрузке информации из представления Google Analytics. На вкладке «Главная» в группе «Внешние данные» жмем на кнопку «Получить данные»

.
После чего в диалоговом окне «Получить данные» в группе «Другое» выбираем сервис «Google Analytics» и жмем «Подключить». 1.2. Далее Power BI запросит вход в аккаунт Google.

1.3. Последний шаг — предоставить разрешение на просмотр данных в нужном представлении Google Analytics. 1.4. После клика по кнопке «Разрешить» мы автоматически возвращаемся в окно «Учетная запись Google», где будет оповещение, что вы вошли в систему. Жмем на кнопку «Подключение».
В открывшимся окне «Навигатор» вы увидите список всех доступных аккаунтов, ресурсов и представлений Google Analytics.
В каждом представлении присутствует одинаковый набор параметров и показателей, распределенных на 28 групп:

• Ad Exchange — информация об эффективности рекламы в Ad Exchange;
• AdSense — информация об эффективности показов рекламы AdSense;
• Adwords — информация об эффективности рекламных кампаний в Google Ads;
• App traking — информация о взаимодействии с мобильным приложением;
• Audience — демографическая информация о посетителях сайта;
• Channel grouping — группы каналов трафика;
• Content Experiments — информация о проводимых экспериментах;
• Contetn Grouping — классификация контента сайта по группам;
• Custom variables or colunms — пользовательские параметры и показатели;
• Google Marketing Platform — информация о эффективности в Google Менеджере рекламы;
• Ecommerce — данные электронной торговли;
• Event tracking — информация о событиях;
• Exceptions — исключения;
• Geo network — геоданные посетителей;
• Goal conversion — данные о достижении целей;
• Internal Search — информация об использовании поиска на сайте;
• Page Tracking — информация о страницах, которые просмотрели пользователи;
• Platform or device — операционные системы и устройства пользователей;
• Related product — связанные сервисы;
• Session — информация о сеансах;
• Site speed — скорость загрузки страниц;
• Social activities — показатели активности в социальных сетях;
• Social interaction — показатели взаимодействия трафика из социальных сетей;
• System — информация о системных показателях посетителей;
• Time — информация о времени совершения событий;
• Traffic source — информация об источниках трафика;
• User — информация о пользователях;
• User timings — длительность сеанса.

В качестве примера давайте выберем следующие параметры: Channel grouping —> Default channel grouping; User —> User Type; Time —> Month of year. В качестве показателей возьмем: Session —> Sessions; Session —> Bounces; Session —> Session duration. Хочу заметить, что в Power BI, как и при любом API запросе в Google Analytics, существует ограничение на максимальное количество запрашиваемых параметров (не более семи) и показателей (не более десяти).

1.5. Для того, чтобы загрузить выбранные данные в модель данных Power BI, жмем кнопку «Загрузить», которая располагается в нижнем правом углу окна «Навигатор».
Теперь загруженный набор данных отображается в области полей, и мы можем строить на основе этой информации любой доступный визуальный элемент.

2. Как загрузить данные из MySQL?

Чтобы показать функциональность Power BI, я сгенерировал и загрузил в MySQL данные о продажах. Следуя описанным ниже инструкциям, можно подключать любые доступные базы данных и после соединять всю загруженную информацию в одну таблицу или график.

2.1. Для загрузки данных о продажах из MySQL, как в описанном примере, необходимо воспользоваться командой «Получить данные», которая находится на вкладке «Главная».
2.2. В диалоговом окне «Получить данные» в группе «База данных» выбираем пункт «База данных MySQL». 2.3. После клика по кнопке «Подключить» в окне «База данных MySQL» вводим IP сервера, имя базы данных и текст SQL-запроса. Если вы не знакомы с SQL и хотите просто выбрать некоторые таблицы из базы данных целиком, то вводить SQL-запрос не следует, на следующем шаге у вас будет возможность выбора таблицы. Поскольку я загрузил тестовые данные с локального ПК, то в поле «Сервер» вместо IP я укажу «localhost».
2.4. Далее вводим учетные данные для доступа в MySQL и жмем кнопку «Подключение».
2.5. На этом этапе подключение к MySQL серверу установлено. В случае, если вы ранее прописали SQL-скрипт, то результат его работы будет загружен в модель данных. Поскольку мы не указывали запрос, в левой части диалогового окна «Навигатор» появится список доступных таблиц из указанной ранее базы данных. В моем случае доступна всего одна одна таблица «sales», все остальные — системные, в связи с чем ставим галочку напротив названия таблицы продаж и жмем «Загрузить».
Теперь в модель данных Power BI загружены данные из двух источников: Google Analytics и MySQL.

3. Как упорядочить данные?

После того, как все необходимые данные загружены, необходимо привести их к нужному виду. Наиболее удобный способ редактирования данных — перейти в режим «Данные», с помощью одноименной команды, расположенной на левой панели рабочего окна Power BI. В режиме данных вы можете изменить тип данных, хранящихся в любом столбце, создавать новые столбцы и меры, используя возможности языка формул DAX, заменять значения хранящиеся в столбцах — в общем делать с данными все, что считаете нужным. В нашем случае следует изменить формат вывода поля «Sale» на денежный. В меню «Поля», которое в режиме «Данных» находится в правой части окна, выбираем нужный набор данных (в нашем случае «Данные из MySQL»), после чего кликаем на название столбца «Sales» и меняем формат данных, перейдя на вкладке «Моделирование» в группу «Форматирование».

4. Как установить связи между таблицами

Для того, чтобы строить визуализацию на основе данных из двух различных источников, необходимо настроить между ними связи. Power BI поддерживает три типа связей:

• многие к одному;
• один к одному;
• один ко многим.

Единственный подходящий для загруженных таблиц тип связи — многие ко многим. Он создается через промежуточные таблицы (справочники) и средствами создания двух связей типа многие к одному и один ко многим. В нашем наборе данных существует три параметра, по которым необходимо настроить связи между таблицами «Default Channel Group», «YearMonth», «UserType». Соответственно необходимо создать три одноименных справочника, которые будут содержать список всех уникальных элементов каждой из перечисленных категорий. В качестве примера мы загрузим список уникальных элементов по каждому полю из CSV файлов.

• channelGroup;
• yearMonth;
• userType.

4.1. Процесс загрузки CSV-файлов в Power BI так же прост, как и описанные раннее подключения к Google Analytics и MySQL: жмем кнопку «Получить данные», в группе «Файл» выбираем «CSV» и по очереди загружаем в модель данных три скачанных CSV-файла.

4.2. При загрузке таблиц «channelGroup» и «userType» необходимо указать, что первая строка — это заголовок столбца. Для этого перейдите в режим редактирования запроса, на вкладке «Преобразование» в выпадающем меню «Таблица» используйте команду «Использовать первую строку в качестве заголовка»:
Если на этом этапе вы все сделали правильно, модель данных будет состоять из пяти таблиц. Чтобы в этом убедиться, можно посмотреть в область полей либо перейти в режим визуального интерфейса просмотра модели данных (для этого кликните по иконке с изображением связей между таблицами на левой панели Power BI). Power BI самостоятельно определил некоторые связи, поэтому модель данных выглядит следующим образом.
4.3. Для дальнейшего создания всех связей нам необходимо изменить тип текущих связей на однонаправленные, в противном случае связи, которые мы планируем создать, будут неоднозначны и при их определении Power BI выдаст ошибку. Чтобы изменить тип связей необходимо дважды кликнуть по связи левой кнопкой мыши и в диалоговом окне «Изменение связи» поменять направление кроссфильтрации на однонаправленную.

Изменив направление кроссфильтрации связей, созданных автоматически, можно переходить к процессу создания остальных связей.

4.4. В Power BI существует два способа определения связей между таблицами: в визуальном режиме и с помощью диалогового окна «Управление связями». Чтобы создать связь в режиме визуализации модели данных, нужно перетащить с помощью мыши поле из одной таблицы в ту, с которой хотим создать связь. Давайте таким образом активируем связь по полю «Default channel group» в таблице «Данные из GA» с полем «Channel» в таблице «channel».
Как в предыдущих примерах, необходимо изменить направление кроссфильтрации на однонаправленную. Теперь модель данных выглядит следующим образом:
4.5. Оставшиеся связи мы будем создавать с помощью диалогового окна «Управление связями», для этого кликните на кнопку «Управление связями» на вкладке «Главная». Диалоговое окно «Управление связями» содержит все созданные ранее связи, для создания новых связей следует нажать на кнопку «Создать».

В окне создания связи необходимо указать таблицы и поля, по которым вы планируете настроить связь, а также указать кратность связи и направление кроссфильтрации.

4.6. Для создания связи между таблицей «Данные из GA» и «yearMonth» необходимо в окне создания связи установить следующие параметры.
Таким же образом нам надо связать таблицу «данные из MySQL» и «yearMonth».
Модель данных теперь выглядит следующим образом.
Как видите, таблицы «Данные из GA» и «Данные из MySQL» теперь связаны между собой через справочники и имеют друг к другу кратность связи многие ко многим.

5. Как построить визуализацию?

5.1. Чтобы создать визуализацию, вернемся в режим «Отчет», воспользовавшись одноименной кнопкой в меню, расположенном в левой части окна Power BI. 5.2. Далее построим диаграмму, на которой совместим данные из разных источников: из Google Analytics будут отображены данные о количестве сеансов, из MySQL — о количестве продаж.

5.2.1. В качестве элемента визуализации будем использовать вид «Линейная гистограмма и гистограмма с накоплением». 5.2.2. Перетягиваем поле «month» из таблицы «yearMonth» в область «Общая ось». 5.2.3 Перетягиваем поле «Session» из таблицы «Данные из GA» в область «Значения столбцов». 5.2.4. Перетягиваем поле «sales» из таблицы «Данные из MySQL» в область «Значения строк». В результате этих манипуляций в области отчетов будет построена диаграмма следующего вида.
Как видите, диаграмма сочетает в себе информацию о сеансах и продажах из двух разных источников.

5.3. Дополнительно можно воспользоваться опциями форматирования объектов визуализации, кликнув по иконке с кисточкой. В результате чего вы можете изменять цвета, размер, шрифт, фон и прочие параметры элемента визуализации.

6. Как настроить фильтры данных?

Для более удобной работы с фильтрами данных следует добавить на рабочий лист три среза.

6.1. Перетащите с помощью мыши в пустое место области отчетов следующие поля:

6.2. После чего по очереди выделите мышкой каждый из этих объектов и переключите в режим «Срез». В результате у нас получится лист с возможностью фильтрации данных по типу пользователя, источнику / каналу и месяцу года.
6.3. Если вам понадобится сменить аккаунт Google, к которому привязаны определенные представления Google Analytics, воспользуйтесь меню «Файл» —> «Параметры и настройки» —> «Настройки источника данных».
Далее вы можете менять параметры или удалять любой подключенный источник данных.
6.4. Поэкспериментируйте с элементами визуализации и выберите наиболее подходящие, (более подробно о правилах выбора диаграммы можно узнать из публикации «Как построить диаграмму и не облажаться»), после чего все диаграммы и таблицы обновляйте нажатием одной кнопки.
Перейдя по ссылке , вы можете скачать файл, приведенный в данной статье.

Как начать работу с Power BI Service?

Как я уже упоминал в начале статьи, помимо обычной стационарной версии, существует онлайн-сервис Power BI. Его функционал не такой обширный, но в целом для онлайн мониторинга основных показателей его вполне достаточно. Откройте Power BI Service перейдя по этой ссылке .

1. Как установить связь Power BI Service с Google Analitycs?

Чтобы открыть рабочую область, нажмите на кнопку с изображением меню. С помощью кнопки «Получение данных» начинаем процесс подключения к Google Analytics. Далее выбираем «Получить данные из веб-служб».
В списке доступных служб находим и выбираем Google Analytics.
Жмем кнопку «Подключится».
Для Google Analytics на данный момент существует только один способ проверки подлинности «oAuth», поэтому в диалоговом окне проверки подлинности ничего не изменяем и жмем «Войти».

Подтверждаем разрешение Power BI Service на просмотр данных Google Analytics.
1.3. Следующий шаг — выбор аккаунта, ресурса и представления Google Analytics.
После того, как вы нажмете «Импорт», в рабочей области автоматически будет сформирован набор данных, отчет и информационная панель.

2. Как работать с отчетами?

Также вы можете посмотреть все сформированные автоматически отчеты, для этого кликните в основном меню в области отчетов по пункту «Google Analytics».
2.1. Отчеты сгруппированы по страницам:

• Site trafic;
• System usage;
• Total users;
• Page performance;
• Top pages.

2.1.1. Соответственно страница Site traffic содержит информацию о сеансах и хитах, а также о поведенческих показателях пользователей.

2.1.2. Страница System usage содержит информацию о геолокации, операционной системе и типе устройства пользователей.
2.1.3. На странице Total User вы найдете информацию о количестве посетителей.
2.1.4. На странице Page Performance содержится информация о скорости загрузки страниц.
2.1.5. Последняя страница Top Pages отображает информацию о количестве уникальных просмотров, а также о количестве входов и выходов с сайта в разрезе страниц.
2.2 Можно изменить любой элемент отчета либо добавить новую страницу, для этого достаточно кликнуть по кнопке «Изменить отчет».
В нижней части экрана отобразится кнопка добавления новых страниц в отчет.
2.3. Как вы могли заметить, в онлайн версии Power BI нет возможности выбора параметров и показателей при загрузке данных из Google Analytics, в связи с чем вы можете работать только со стандартным набором полей, который в свою очередь состоит из пяти таблиц:

2.3.1. Calculaions :

• Avg.daily new users — среднедневное количество новых пользователей;
• Avg. daily new users (weekday) — среднедневное количество пользователей в разрезе дней недели;
• Avg. daily users — среднедневное количество пользователей;
• Avg.daily users weekday — среднедневное количество пользователей в разрезе дней недели;
• Avg. session duration (sec) — средняя длительность сеанса в секундах;
• Bounces MoM — прирост количества отказов за последние 30 дней;
• Hits MoM — прирост количества хитов за последние 30 дней;
• New users MoM — прирост новых пользователей за последние 30 дней;
• Session MoM — прирост объема сеансов за последние 30 дней.

2.3.2. Overwiev :

• Avg. session duration — средняя длительность сеанса;
• Bounces — количество отказов;
• Browser — браузер пользователя;
• Country — страна пользователя;
• Date — дата сеанса;
• DayOfMonth — день месяца, когда был совершен сеанс;
• DayOfWeek — день недели, когда был совершен сеанс;
• Device category — тип устройства;
• Hits — количество хитов;
• MonthName — название месяца;
• MonthYear — месяц года;
• Operating system — операционная система пользователя;
• Page / sessions — среднее количество просмотренных страниц на сеанс;
• Pageviws — общее количество просмотренных страниц;
• Sessions — количество сеансов;
• Year — год.

2.3.3. Page performance :

• Date — дата;
• DayOfMonth — день месяца;
• DayOfWeek — день недели;
• DomainLookupTime — время поиска домена;
• MonthName — название месяца;
• MonthYear — месяц года;
• PageLoadTime — время загрузки страницы;
• RedirectionTime — время редиректа;
• Year — год.

2.3.4. Pages :

• Date — дата;
• DayOfMonth — день месяца;
• DayOfWeek — день недели;
• Entrances — количество заходов;
• Exits — количество выходов;
• MonthName — название месяца;
• MonthYear — месяц года;
• Page — url страницы;
• PageTitle — название страницы;
• Pageviews — количество просмотров страницы;
• TimeOnPage(sec) — общее время, проведенное на странице в секундах;
• Unique pageviews — количество уникальных просмотров страниц;
• Year — год.

2.3.5. User :

• Date — дата;
• DayOfMonth — день месяца;
• DayOfWeek — день недели;
• DaysFromToday — количество дней с сегодняшнего дня;
• MonthName — название месяца;
• MonthYear — месяц года;
• New users — количество новых пользователей;
• Users — количество пользователей;
• Year — год.

Эти пять таблиц, загруженные из Google Analytics, не связаны между собой, так как в онлайн версии Power BI у вас нет возможности создавать связи. Но в Power BI Service можно публиковать файлы, разработанные в Power BI Desktop файлов.

Для этого достаточно быть зарегистрированным пользователем данной службы и нажать кнопку «Опубликовать». После чего начинается процесс публикации файла в службе Power BI.
Если вы все сделали правильно, то получите сообщение, что файл был успешно опубликован, и вы можете запустить автоматический анализ данных. Power BI Service выведет на экран найденные в данных закономерности.
В опубликованном файле при этом будут сохранены все существующие между таблицами связи.

Заключение

Сегодня я рассказал:

1. Как загрузить в программу нужный набор данных (я показал как это делать на примере интеграции с Google Analytics или загрузки данных из MySQL).
2. Как упорядочить данные, чтобы привести их к нужному для визуализации виду.
3. Как построить отчет, где будут отображаться данные из разных источников.
4. Как настроить фильтры данных, выбрать подходящие элементы визуализации и опубликовать результат для просмотра в онлайн-версии Power BI.

Power BI — мощный и многофункциональный инструмент, поэтому достаточно тяжело описать весь его функционал в рамках одной статьи. Ответы на базовые вопросы по работе с Power BI можно узнать из официального мануала, который вы можете найти по этой ссылке. На остальные — с радостью отвечу в комментариях.

Вам нужно подготовить бизнес-презентацию и на это у Вас есть пара дней. Но это может быть весьма непростой задачей даже для опытного пользователя, особенно когда данные находятся в нескольких источниках, в облачных и локальных, и Ваш ИТ отдел занят совершенно другими задачами и не может Вам помочь в подготовке презентации.

Было бы замечательно иметь под рукой доступные и понятные инструменты, которые помогли бы преобразовать и визуализировать Ваши данные для создания наглядной презентации, чтобы посмотреть на ситуацию «свежим взглядом».

Вам повезло. Power BI - это облачная бизнес-аналитика, которая помогает пользователям визуализировать и анализировать данные с большей скоростью, эффективностью и простотой. Вы можете зарегистрироваться на сайте Power BI и начать использование сервиса совершенно бесплатно.

1. Получите данные в несколько кликов

Подключитесь к источнику данных за считанные минуты. Нажмите кнопку Получение данных на панели навигации.

Затем выберите источник данных: пакет содержимого, файл, базу данных или примеры. Источник данных может располагаться в Вашей организации, локально или в облаке, или в онлайн-службах, например, Microsoft Dynamics, Salesforce.com, QuickBooks Online или Google Analytics. Соединять данные вместе очень просто.

2. Создание информационных панелей.

Информационные панели позволяют следить за важной информацией о деятельности организации. Информационная панель в Power BI является подобием панели приборов в автомобиле, на которой выводится важная информация о нем: скорость, уровень топлива и исправность двигателя, только в этом случае приводится информация о вашей компании.

Информационная панель показывает локальные и облачные данные в одном месте. Каждая плитка на информационной панели является визуализацией, созданной из данных одного или более набора данных.

Посмотреть, как устроена информационная панель, Вы можете на готовом примере данных по розничной торговле, который доступен в сервисе Power BI.

Как создаются информационные панели? Все просто!

Нажмите на иконку Плюс рядом с заголовком «Информационные панели » и введите название.

Подключитесь к источнику данных, используя данные из Ваших отчетов или наборов данных, которые уже доступны в Power BI, или добавьте новый источник данных. Закрепите плитку на информационной панели, измените ее размер и название. Плитки также можно перемещать по экрану и удалять в случае необходимости. Поэкспериментируйте с плитками и выберите подходящие для Вас параметры.

3. Общий доступ к информационным панелям

Ваши коллеги получат по электронной почте приглашение со ссылкой на информационную панель. При нажатии на ссылку, информационная панель добавляется к Вашим информационным панелям Power BI.

4. Просмотр информационных панелей на мобильных устройствах

Коллега прислал вам ссылку на информационную панель? Теперь Вы можете просмотреть ее на своем мобильном устройстве. Вы можете исследовать данные, комментировать плитки и делиться ими с другими из любой точки мира. Power BI доступен на устройствах под управление iOS и Android, работает на всех версиях Windows 8.1 и Windows 10 устройств, таких как планшет Surface Pro.

Вы слышали выражение: «Пусть факты говорят сами за себя»? Но иногда самый быстрый способ получить данные, это задать вопрос. В Power BI Вы можете запрашивать данные с использованием естественного языка.

Введите свой запрос в поле на информационной панели. Например: 2014 sales by month and territory as stacked bar.

В процессе набора своего запроса, Power BI выбирает лучшие визуализации для отображения данных по Вашему запросу и при этом визуализация динамически изменяется при изменении запроса. Потрясающе!

6. Создание впечатляющих отчетов

Используйте инструменты Power BI, чтобы впечатлить Ваших коллег интуитивно понятным представлением Ваших данных. Разные варианты визуализаций предоставляют возможность по-новому взглянуть на Ваши данные и оценить их в нужном разрезе.

Чтобы создать новый отчет, выберите набор данных, чтобы открыть, или щелкните правой кнопкой мыши и выберите Просмотреть .

Business Intelligence термин, который появился совсем недавно. Многие путают его с бизнес-аналитикой, однако, это не одно и то же. В бизнес-аналитике используются статистические средства, а в BI выполняется поиск и сбор нужной информации.

Весь процесс разделяется на несколько этапов. Сначала происходит поиск необходимых данных, потом выполняется их обработка и проверка показателей на отклонение, затем бизнес-аналитика и в конце отчетность. BI — довольно сложный софт, но в результате информация оказывается намного полезней.

Эту технологию можно применять для предоставления руководителям информации о достижении каких-либо целей компанией и ведения аналитики. С ее помощью можно выполнять анализ статистики, прогнозирование и обработку сложных задач. В некоторых программах BI главным является понятная и удобная структура для отчетности, где данные приведены в понятный вид, что упрощает управление компанией.

Сюда можно отнести визуализацию данных, OLAP-технологию и прочее. К тому же BI помогает обмениваться опытом и мыслями между принимающими участие в бизнес-процессе. Это позволяет принимать более корректные решения с учетом всех данных и точной информацию. Если принятие окончательного решения стоит за конкретным человеком, то он сможет ознакомиться с информацией и понять суть дела.

Активное распространение идеи Business Intelligence выполняет компания Microsoft. Для этой корпорации очень важно правильно обрабатывать поступающие данные. С помощью этой технологии компания проводит оценку собственных проектов, разрабатывает методы их развития, выполняет сравнение потенциала новых рынков, на которые собирается выпустить свои проекты.

По заявлению самой корпорации, лучше сделать цифры информативными, интересными и понятными. К тому же ежегодно в человеческий мозг поступает все больше данных, а если они не будут корректно обработаны, то многие их просто пропустят и не заметят.

Чтобы решать собственные вопросы и помочь остальным компаниям правильно наладить бизнес, Microsoft выпустила сервис Power BI. С помощью него визуализировать большие объемы информации и представить их в виде ярких и понятных отчетах, при этом объединяя информацию с большого количества ресурсов. Данный инструмент способен собирать и структурировать данные, которые в последствии демонстрируются в приятном виде и предоставляют директорам корректно принимать решения.

Программа состоит из двух частей. Первая из них выполняет сбор информации, а вторая ее представляет. Вторая часть подвергалась серьезной обработке разработчиками. Именно этот модуль является основным во всем проекте. Если имеются данные в Excel или Google Analytics, тогда есть представление откуда можно брать информацию.

Что касается наглядной визуализации, то здесь все обстоит по-другому. Данный сервис предоставляет возможность сразу посмотреть данные, которые нужны для принятия решения. Также есть возможность ознакомиться с важной информацией об активности предприятия, и проследить состояние продукции или всей корпорацией. Если есть какие-то особенные требования, тогда можно изготовить собственную панель мониторинга и добавить в нее те данные, которые нужны.

Сервисом пользоваться довольно удобно и просто, к тому же он очень мощный. Программа поддерживает большое количество форматов. Кроме того, загружать данные можно с различных сервисов и баз данных. Неважно с каким продуктом работает фирма, в этой программе можно найти нужный инструмент для обработки информации. Пользоваться сервисом могут как менеджеры, так и владельцы крупных фирм. К тому же, если работать в пределах лимитов, то делать это можно бесплатно.

Как начать работать

Первым делом требуется пройти регистрацию на сайте программы. Здесь стоит учитывать, что поддерживается не каждая почта. Это означает, что ящики mail.ru и gmail.ru здесь не пройдут. Программа работает только с корпоративными клиентами. Здесь нужно, чтобы почта была зарегистрирована на собственном сайте или ресурсе корпорации.

Также может подойти почта с сайта учебного заведения. Государственные и военные учетки не подходят. Выполнив регистрацию и подтверждение электронки, необходимо придерживаться рекомендаций мастера. Поддержка аккаунта выполняется бесплатно. Здесь необходимо кликнуть на клавишу Get Started Free, и можно попробовать возможности программы. На всю регистрацию может понадобиться всего пара минут.

Изучить функции сервиса можно на сайте powerbi.com или в приложении Power BI Desktop, которое необходимо загрузить на компьютер. С помощью этого приложения выполняется обработка информации, которая находится на компьютере или облачном хранилище. Кроме того, оно помогает составлять наглядные отчеты.

После этого статистику можно перенести на сервер PowerBI, что позволит ознакомиться с ней все сотрудникам компании. После этого при каждом посещении сервиса будет выскакивать предложение загрузить новую информацию или запустить какой-либо старый отчет.

Основные функции

Основным назначением сервиса является обработка данных и отображение в корректном виде. С помощью сервиса можно создавать диаграммы и выполнять визуализацию сложных процессов. Но для получения результата необходимо найти источник. Приложение не способно самостоятельно собирать данные, но она может извлекать информацию из подготовленных файлов или серверов. Таких источников данным можно найти большое количество. Для их открытия, необходимо нажать на «Моя рабочая область» и кликнуть на клавишу «Получить данные».

Данный сервис отлично работает с Excel, который также разработан Microsoft. Нужно просто открыть файл, а потом заниматься приведением данных в надлежащий вид. Кроме того, есть возможность работать с таблицами XML и форматом TXT. Для этого можно использовать опцию «Загрузить и преобразовать» в Excel или Power BI Desktop. После этого нужно перенести данные на Power BI.
В теории данные CSV не поддерживаются, но в действительности они представляют собой «текстовики», которые разделены по строкам. Это позволяет легко их переносить в Excel, а потом в Power BI. В подобных файлах могут находиться адреса, фамилии и имена и прочее.

Сервис способен работать с самыми популярными облачными хранилищами, поэтому не нужно все хранить на винчестере. Из этой утилиты можно в онлайн-режиме подсоединять к разным хранилищам и базам данных. С базами данных сервис на компьютере не работает, однако, данные можно вытащить с помощью Excel или утилиту Power BI Desktop. Затем данные можно перегнать в тот формат, который поддерживает Power BI.

Недостатком в этом случае является тот факт, что на конвертацию базы данных может понадобиться довольно много времени. А если это крупная корпорация с большим объемом данных, то ждать придется долго. Достоинством этого является то, что перенести данные и получить готовую презентацию сможет любой, кто не полениться выполнить несколько манипуляций. Ни одна программа не способна работать со всеми существующими форматами.

Проще будет, если вся важная информация будет храниться в форматах Excel и CSV. В таком случае можно сразу начинать изготавливать панель мониторинга, обновление которой будет выполняться автоматически в онлайн-режиме. При этом пользователю ничего не нужно делать.

Отображение важной информации выполняется централизовано и моментально. Получить к ней доступ можно с любого устройства, которое работает под управлением Windows, Android и iOS.

После данные можно применять для принятия решения или непосредственно опубликовывать в сети с помощью опций программы. Также есть возможность отображать необходимую информацию в виде презентации на собственном ресурсе или блоге. Информация представляется довольно понятно и в наглядной форме. Программа располагает около 20-ю интегрированными визуальными элементами, к тому же юзеры постоянно добавляют свои разработки. В любом случае можно будет подобрать подходящий вариант.
Различия коммерческой и бесплатной редакции

Работать с утилитой можно на бесплатной основе. Существует две редакции данного продукта: Power BI и Power BI Pro за $10 в месяц. Отличаются они наполнением и приделами применения. Продвинутая версия располагает отчетами и панелями мониторинга, которыми могут пользоваться только подписчики.

Кроме того, только коммерческим юзерам разрешается использовать информацию со служб SQL Server Analysis и облачных контейнеры SQL Azure или Apache Spark. Помимо этого, в приложении Pro имеется такая функция, при которой презентация составляется в автоматическом режиме, но при условии ежедневного обновления информации.

Также разнится скорость обработки информации. Бесплатная версия обновляется со скоростью 10 тысяч строк в час, а вот у продвинутой этот показатель доходит до миллиона. Кроме того, владельцы Pro-версий могут работать с Office 365, чтобы управлять активность в сервисе. В этом случае они могут создавать, опубликовывать и просматривать файлы с дополнительными визуализаторами. Помимо этого, предоставляется глубокое внедрение в инструменты Data Catalog и Active Directory.

Если эти инструменты ничего не означают, тогда можно свободно работать со свободной редакцией программы. В ней можно работать с статистикой и панелями мониторинга, использующие различные службы. Она позволяет работать с CSV и Excel. Кроме того, бесплатная редакция сервиса позволяет работать с R-сценариями и визуальными объектами.

На сервисе можно пройти бесплатную регистрацию и в течение двух месяцев протестировать Pro-версию приложения. После этого можно понять необходимость полного набора или остановиться на бесплатном варианте.

Кроме того, начало пробного периода можно выполнить с использования одной из имеющихся функций. После этого появится предупреждение, и начнется отсчет пробного периода. В противном случае можно перейти в параметрах в пункт Manage Personal Storage и кликнуть на клавишу Try Pro For Free.

Преимущества Power BI

Работать с множеством функций программы можно свободно. Если же необходимо воспользоваться дополнительными функциями, то стоимость их довольно небольшая в сравнении с остальными подобными программами.

Компания Microsoft дорожит своей репутацией, поэтому можно не переживать, что важная информация попадет через их сервис в посторонние руки. Также не будет отключения серверов, а информация останется в целости. Кроме того, ни один сервис не способен обеспечить подобное внедрение в Microsoft Excel, Azure и SQL Server.

Помимо этого, корпорация постоянно вкладывает средства в развитие своего продукта. Каждый месяц появляются новые функции и новые форматы. У компании есть цель – сделать свое детище лучшим в сфере Business Intelligence.

Система способна подсоединяться к большей части баз данных на компьютере. К тому же все время увеличивается количество поддерживаемых облачных хранилищ. Помимо этого, сервис располагает большим количеством различных графиков, панелей мониторинга. К тому же пользователям разрешается делиться собственными расширениями.

Минусы Power BI

Программа ориентирована на Excel, однако, большая часть крупных организаций использует собственные сервера, и не используют данный софт. С помощью этого сервиса будет организовываться не самый удобный доступ к серверам предприятий. Программе не принуждает пользователей составлять коды SQL, в отличие от остальных подобных сервисов. Однако, те, кто до этого не связывались с Excel будут испытывать неудобства в работе с сервисом.

Кроме того, сервис плохо работает с огромными объемами информации. Pro-версия программы позволяет прорабатывать около миллиона строк в час, что для больших корпораций это не самый большой показатель. Если необходимо обрабатывать огромное количество информации, то этот сервис не сможет помочь. При переносе больших баз данных скорость работы довольно низкая. Иногда возможны сбои и задержки в процессе работы.

Кроме того, в программе отсутствует мониторинг качества данных. Сервис считает, что все файлы, которые в него поступают являться корректными и ничего не отсеивает. Другие подобные разработки способны выполнять очистку данных.

Программа обладает большим количеством настроек, что для начинающих пользователей может показаться сложным. Понять все тонкости сервис будет очень непросто. Однако, компания предоставляет инструкцию к сервису, к тому же на русском языке.

Итог

В общем, данный сервис предоставляет неплохой набор инструментов для бизнес-аналитики, с помощью которого можно обрабатывать информацию. Все нужные данные показываются в панелях. С программой можно работать свободно, если нет специфических запросов. Работать с сервисом можно на разных операционках.

Если для работы компания использует Excel, тогда данный сервис станет незаменимым помощником в создании бизнес-презентаций. С продвинутой версией можно работать бесплатно в течении двух месяцев, что позволит понять необходимость в таком варианте программы.