Содержание
Специалисты любого профиля должны уметь работать с данными — эта компетенция стала одной из ключевых в самых разных сферах: маркетинг, логистика, государственное управление и, конечно же, индустрия строительства.
При этом сегодня умение разбираться в аналитике и обработке данных достаточно просто освоить благодаря обилию различных открытых решений. О подобных инструментах и способах их использования рассказал BIM‑специалист Александр Пушкин в рамках BIM‑завтрака. Эксперт рассмотрел быстрые способы работы с данными для тех, кто не обладает глубокими техническими навыками и не имеет возможности привлечь внешние ресурсы.
Первый шаг: постановка задачи
Прежде чем приступить к выбору инструментов, необходимо чётко определить, какую задачу требуется решить. Это может быть визуализация производственных показателей, анализ финансовых потоков, построение отчётов или автоматизация рутинных операций.
Для структурирования идей и описания бизнес-процессов Александр Пушкин порекомендовал использовать интерактивные доски вроде Miro, Xboard и пр. Они позволяют наглядно представить логику задачи, выделить ключевые этапы обработки данных и определить источники информации, что особенно полезно командной работе на старте проекта.
Работа с данными
Одним из наиболее простых и одновременно мощных решений этой задачи является DBeaver — open-source программа, предназначенная для подключения к базам данных. Она позволяет взаимодействовать как с корпоративными хранилищами, так и с публичными источниками через операции просмотра таблиц, построения запросов и создания схем. Знать SQL при этом не обязательно.
Тем, кому нужно не только хранить, но и анализировать данные, отлично поможет Jupyter Notebook. Это интерактивная среда, позволяющая строить графики и визуализации, а также экспортировать отчёты, отлаживая код в режиме реального времени. Важно, что ошибки отображаются сразу, что существенно ускоряет обучение начинающих пользователей.
Специалисты, предпочитающие визуальное представление данных, также могут использовать Apache Superset — бесплатную BI‑систему, позволяющую создавать интерактивные доски. Superset не требует знаний программирования и даёт возможности:
- Подключаться к различным источникам данных
- Собирать дашборды из готовых визуализаций
- Делиться результатами с коллегами
- Использовать фильтры и виджеты для живой аналитики
«Все эти программы бесплатные, общедоступные, и вы можете уже начать решать свои задачи прямо сейчас, не выбирая какой-то софт для сиюминутной задачи», — подчеркнул Пушкин.
Также эксперт рассказал про Streamlit — фреймворк на языке Python, позволяющий создавать простые веб-приложения всего за несколько строк кода. Он подходит для тех, кто хочет быстро решить задачу в простом и понятном интерфейсе, например, просмотреть Excel-файлы с актуальными данными. Другими словами, даже без глубоких знаний фронтенд-разработки, с его помощью можно создать рабочий инструменты для выполнения повседневных обязанностей.
Ранее в блоге мы публиковали материал, в котором рассмотрели управление данными уже на более высоком уровне — в рамках BIM‑проекта.
Примеры реализации: от отчёта до дашборда
В качестве примера использования упомянутых приложений Александр Пушкин описал несколько практических кейсов:
- График календарно-сетевого планирования
Из Excel-файла, содержащего около 20 000 строк, с помощью Jupyter и Python был реализован анализ по цветовой маркировке данных. Визуальные признаки (цвет заливки ячеек) использовались как критерий определения стадии выполнения работ. Обработка данных позволила:
- Классифицировать задачи
- Отфильтровать невыполненные работы
- Автоматически построить визуализации для руководителей
- Генератор презентаций
Через функционал Streamlit было создано приложение, в котором пользователь мог выбрать объект из базы данных, указать определённые дополнительные параметры (например, количество рабочих) и получить автоматически сгенерированную презентацию в формате PowerPoint или PDF.
«Это просто мечта многих госкорпораций, когда получаешь PDF‑презентацию автоматически», — отметил Пушкин.
- Интерфейс загрузки данных
С помощью того же Streamlit разработали решение, которое сотрудники использовали для загрузки различных документов вроде согласованных реестров или протоколов. Файлы сразу попадали в общую базу, становясь доступными другим пользователям. Это повысило прозрачность документооборота и ускорило обмен информацией.
Выводы
Современные инструменты анализа данных доступны каждому, и чтобы начать их применять, не требуются дорогостоящее программное обеспечение, лицензии или опыт в программировании. По мнению Александра Пушкина, всё, что необходимо, — это чётко поставленная задача и желание пробовать.
А помощниками в этом деле выступят описанные выше приложения или правильно сформулированные запросы в чат-боты на основе ИИ. Они упростят задачи по написанию кода и даже выполнят простые операции на языке SQL. Все эти примеры показывают, как с помощью простых инструментов можно выстроить цифровую экосистему, работающую на эффективность и конкурентоспособность компании.
Смотрите полное выступление Александра Пушкина:
Понравилась статья?
2
А что вы думаете по этому поводу? Поделитесь с нами
Комментарии 2
Я почему именно об этом, потому что.активно идет импортозамещение и западные программы не только не актуальны, но уже явно устарели.
А мы должны работать на прогрессивных и передовых решениях.
И когда то жившие excel и пр. microsoft реализации, уже самими западниками заменены на web-интерфейсы этих решений, и раскраска ячеек там уже малозначительна.
Я ведь не ругаю, просто перед нами открылась такая перспектива сделать не хуже, а лучше западного, и топтаться на месте не хочется.
И тот же российский BIM — сделал колоссальные успехи всего за 2 года, заменивший и даже превзошедший западные решения, не только в гражданских зданиях, но и в промышленности (атомной, нефтедобывающей и нефтепереработке, строительной и пр.).
Никого не обижал, пытался просто нацелить и пожелать успехов.
Ждем публикаций про российское ПО.
Postgres Professional – разработчик российской системы управления базами данных Postgres Pro. СУБД входит в Единый реестр российского программного обеспечения, сертифицирована ФСТЭК.
Команда Postgres Professional также активно развивает свободно распространяемую СУБД PostgreSQL, занимает первое место в России и входит в ТОП-5 международного рейтинга по вкладу в открытый код PostgreSQL.