Data Human

Кто-нибудь, приведите друга, надо округлить число) 🤪

Пока делаю модуль по Kafka, перелопачиваю материалы. Классика жанра - книга Гвен Шапиры. Полез читать отзывы и нашёл вот это.

Тридцатилетие, значит. Надеюсь, ребёнок оценил.

#backstage

Отзыв по модулю отслеживания движения МКС.
Стек: Airflow, ClickHouse.
В модуле определяем, на основе живых данных, над какими странами движется МКС, сколько над сушей, водой и т. д.
Участница курса ещё креативно сверила, под какими созвездиями летит МКС. ✨
Радуют идейность и инициативность. 💯

#review

Неделя тишины на канале - отвлёкся на другой проект по данным, в сфере дошкольного образования.
Подбирал разные лого и вот смотрите что я придумал! Мне кажется, лучше не может быть! Лого одновременно:

- Детская музыкальная игрушка ксилофон.
- Столбики диаграммы (данных).
- Деревянное ограждение садика - забор.

#backstage

Это просто новая функция телеграмм: позволяет объединить чаты в одно пространство, сообщество.
Я объединил свои чаты и каналы.

Приятный отзыв от участника курса.

Осталось 4 места по $40. Дальше $50.

@storm_de

Программу можно посмотреть на datahuman.net, есть демо модуль.

#review

Манящая эстетика данных

У работы с данными есть своя притягательная, даже манящая эстетика:

1. Data Engineer работает на интеллектуальные процессы: принятие решений на основе данных, подготовка данных для Machine Learning - строишь то, на чём думают компании и ИИ.

2. Навыки DE - универсальный фундамент: весь IT так или иначе занимается обработкой, хранением и передачей данных. Из DE можно перекатиться почти в любую IT-профессию.

3. Если ты разобрался в Data-тулзах и умеешь строить Data-системы - твой мозг способен освоить почти всё что угодно. +1000 к уверенности.

4. Работа с данными вырабатывает привычку опираться на факты, а не на ощущения - это переносится и на решения в жизни.

5. Данные - это способ удовлетворить наше детское стремление узнавать скрытое.

6. Данные везде, не только в ИТ системах. Нейроны в мозге передают сигналы, ДНК хранит код жизни и некоторые физики идут дальше и говорят, что и материя в своей основе - это информация.

Данные - это двигатель мира и то, из чего мир состоит. It from bit - гипотеза физика Джона Уилера: всё сущее ("it") в своей основе рождается из информации ("bit"). Вселенная в этой картине - не материя, внутри которой есть данные, а данные, из которых складывается материя.

—
На фото: инсталляция Рюдзи Икеды data.flux [LED version], 2021

#blog

@data_human

Представь, ты - junior DE в нейротех-стартапе Sign System. Продукт DataVision - носимый датчик, который ловит момент, когда человек начинает засыпать, и будит его до микросна.

Клиент - Kingsroad, автоперевозчик с 12000 фур. Боль клиента: дальнобойщик засыпает за рулём, и это стоит жизней. Разбудить - не твоя задача, это делает само устройство мгновенно. Твоя задача начинается дальше: данные с каждого датчика улетают в облако, и клиент хочет знать, где риск выше, у кого чаще эпизоды и в какие смены. Это уже аналитика на потоке, и строишь её ты.

Этот кейс ты проходишь руками на этом курсе.

Стек модуля:
Приём данных: настраиваем поток сигналов с датчика в реальном времени.
Пайплайн: ловим поток через Kafka, сохраняем в ClickHouse и собираем витрину в Metabase.

13 уроков: от ознакомления с данными до продакшн-пайплайна с контролем качества и надёжностью потока. На выходе - DE-скилл.
Это один из модулей курса - есть ещё трекер МКС (Airflow, ClickHouse) и другие модули.

Курс сейчас стоит 40 долларов - платишь один раз и получаешь все модули, включая будущие.

Сайт курса: datahuman.net
Вопросы и оплата: @storm_de