• Блог о данных


    Всем привет! Меня зовут Алексей, и я занимаюсь данными.

    Свой путь я начинал как аналитик, продолжал как инженер данных, руководитель аналитических команд, архитектор и консультант.

    Темы моего блога:

    — Технологии построения платформ данных

    — Организация команд специалистов по данным

    — Аналитическая культура, data-driven здорового человека

    Приятно познакомиться и добро пожаловать!

    Блог о данных


    Всем привет! Меня зовут Алексей, и я занимаюсь данными.

    Свой путь я начинал как аналитик, продолжал как инженер данных, руководитель аналитических команд, архитектор и консультант.

    Темы моего блога:

    — Технологии построения платформ данных

    — Организация команд специалистов по данным

    — Аналитическая культура, data-driven здорового человека

    Приятно познакомиться и добро пожаловать!

    Бесплатный
    Перейти в постВ пост

  • Куда может привести обсуждение брейн-тизера

    Запостил я недавно в телеграме вот такую простую задачу (упертую с линка).

    Ссылка на обсуждение в телеграме

    https://t.me/analyticsfromzero/554

    То что произошло дальше не дает мне покоя уже какое-то время. Слишком много показательного произошло в комментариях. Все началось с простой математической задачи, продолжилось докапыванием к ИИ и мыслями про найм как таковой.

    Кто-то скинул в ИИ (с ошибкой), кто-то решал в лоб с системой уравнений, ну а я попытался решить «греческим» способом через построение.

    Кстати, а с чего вы взяли, что на картинке все углы прямые? Где это сказано?

    Ну а потом меня увлекла мысль — а нужны ли/полезны вообще брейн-тизеры при устройстве на работу и я запилил опрос:

    t.me/analyticsfromzero/555


    Итого — чтобы не писать много текста, записал аудио и видео.

    Аудио в телеге

    Видео: https://vkvideo.ru/video-228742675_456239039


    А вы как считаете — нужны ли математические и логические задачи на этапе собеседования на позиции разработчиков и аналитиков?

    Куда может привести обсуждение брейн-тизера

    Запостил я недавно в телеграме вот такую простую задачу (упертую с линка).

    Ссылка на обсуждение в телеграме

    https://t.me/analyticsfromzero/554

    То что произошло дальше не дает мне покоя уже какое-то время. Слишком много показательного произошло в комментариях. Все началось с простой математической задачи, продолжилось докапыванием к ИИ и мыслями про найм как таковой.

    Кто-то скинул в ИИ (с ошибкой), кто-то решал в лоб с системой уравнений, ну а я попытался решить «греческим» способом через построение.

    Кстати, а с чего вы взяли, что на картинке все углы прямые? Где это сказано?

    Ну а потом меня увлекла мысль — а нужны ли/полезны вообще брейн-тизеры при устройстве на работу и я запилил опрос:

    t.me/analyticsfromzero/555


    Итого — чтобы не писать много текста, записал аудио и видео.

    Аудио в телеге

    Видео: https://vkvideo.ru/video-228742675_456239039


    А вы как считаете — нужны ли математические и логические задачи на этапе собеседования на позиции разработчиков и аналитиков?

    Бесплатный
    Перейти в постВ пост
    hr task
    1

  • Архитектура форматов данных в картинках

    Различные форматы данных служат разным целям.

    Iceberg vs. Parquet это немного про разные уровни организации данных

    Paimon vs. Parquet — для разных целейн

    ORC vs. Parquet vs. AVRO — в разных экосистемах

    t.me/analyticsfromzero/535

    Архитектура форматов данных в картинках

    Различные форматы данных служат разным целям.

    Iceberg vs. Parquet это немного про разные уровни организации данных

    Paimon vs. Parquet — для разных целейн

    ORC vs. Parquet vs. AVRO — в разных экосистемах

    t.me/analyticsfromzero/535

    Бесплатный
    Перейти в постВ пост
    data iceberg apache
    1

  • Комментарий к объединению Cedrus Data & VK Tech

    Многие спрашивают, хочу прокомментировать новость со своей стороны.


    Мердж произошел на уровне компании. Продукт и разработка Cedrus становятся частью VK Tech.


    Технически — комбинация движка Cedrus + облачного VK S3 точно одна из топовых на российском рынке данных.


    С точки зрения движка — у Cedrus есть очень серьезные заявки на успех в виде

    • Собственный Iceberg REST каталог с кастомным ускорением лукапов и своим RBAC

    • Ускоренный по сравнению с ванилью движок Trino. Можно почитать например в статье.

    • Распределенный коннектор Greenplum/Arenadata

    • Мониторинги, алерты и прочий гигиенический минимум хорошего сервиса


    С точки зрения хранения данных S3 дает

    • Все стандартные функции базового S3 API

    • Неплохая скорость за счет метаданных на тарантуле

    Комментарий к объединению Cedrus Data & VK Tech

    Многие спрашивают, хочу прокомментировать новость со своей стороны.


    Мердж произошел на уровне компании. Продукт и разработка Cedrus становятся частью VK Tech.


    Технически — комбинация движка Cedrus + облачного VK S3 точно одна из топовых на российском рынке данных.


    С точки зрения движка — у Cedrus есть очень серьезные заявки на успех в виде

    • Собственный Iceberg REST каталог с кастомным ускорением лукапов и своим RBAC

    • Ускоренный по сравнению с ванилью движок Trino. Можно почитать например в статье.

    • Распределенный коннектор Greenplum/Arenadata

    • Мониторинги, алерты и прочий гигиенический минимум хорошего сервиса


    С точки зрения хранения данных S3 дает

    • Все стандартные функции базового S3 API

    • Неплохая скорость за счет метаданных на тарантуле

    Бесплатный
    Перейти в постВ пост

  • Типы кокосовых менеджеров

    Типы кокосовых менеджеров


    Задача — сбить с пальмы кокос. Как решают задачу разные менеджеры.


    Первый тип — еще-не-менеджер

    Трясет пальму — кокос не падает. Берет камень — сбивает кокос на землю. Получает втык от директора, что занялся задачей сам, а не делегировал ее и минус балл в перформанс ревью.


    Второй тип — кадровый

    Подводит инженера к пальме. Тот трясет пальму — кокос не падает. Менеджер говорит: тряси сильнее. Исполнитель трясет сильнее — кокос не падает. Инженер увольняется за андерперформанс, в кадры заводят поиск на позицию Сениор Трасильщика Пальм с опытом работы с кокосами. Менеджер ходит по конференциям и жалуется на нехватку нужных специалистов на рынке труда.


    Третий тип — госушный

    Собирает рабочую группу по вопросам трясения пальм. В рабочую группу входят начальник склада кокосов, комбайнер и доярки с соседней фермы. Группа раз в 2 недели проводит совещания для тщательной проработки требований к трясению кокосов и для согласования подробной карты бизнес процессов для добычи кокосов. Различные версии этих документов регулярно относятся владельцу острова для утверждения.


    Четвертый тип — исследователь

    Уходит в исследование рынка кокосов и мирового опыта трясения кокосов. Приходит к выводу, что кокос сейчас незрелый, а когда созреет — упадет либо сам, либо от легкой тряски. Ставит в календарь встречу по добыче кокосов через месяц. Идет заниматься другими делами.

    Типы кокосовых менеджеров

    Типы кокосовых менеджеров


    Задача — сбить с пальмы кокос. Как решают задачу разные менеджеры.


    Первый тип — еще-не-менеджер

    Трясет пальму — кокос не падает. Берет камень — сбивает кокос на землю. Получает втык от директора, что занялся задачей сам, а не делегировал ее и минус балл в перформанс ревью.


    Второй тип — кадровый

    Подводит инженера к пальме. Тот трясет пальму — кокос не падает. Менеджер говорит: тряси сильнее. Исполнитель трясет сильнее — кокос не падает. Инженер увольняется за андерперформанс, в кадры заводят поиск на позицию Сениор Трасильщика Пальм с опытом работы с кокосами. Менеджер ходит по конференциям и жалуется на нехватку нужных специалистов на рынке труда.


    Третий тип — госушный

    Собирает рабочую группу по вопросам трясения пальм. В рабочую группу входят начальник склада кокосов, комбайнер и доярки с соседней фермы. Группа раз в 2 недели проводит совещания для тщательной проработки требований к трясению кокосов и для согласования подробной карты бизнес процессов для добычи кокосов. Различные версии этих документов регулярно относятся владельцу острова для утверждения.


    Четвертый тип — исследователь

    Уходит в исследование рынка кокосов и мирового опыта трясения кокосов. Приходит к выводу, что кокос сейчас незрелый, а когда созреет — упадет либо сам, либо от легкой тряски. Ставит в календарь встречу по добыче кокосов через месяц. Идет заниматься другими делами.

    Бесплатный
    Перейти в постВ пост
    Meme
    1

  • Формируем команду прорыва в вашей компании по методу SEAL Bootcamp

    Формируем команду прорыва в вашей компании по методу SEAL Bootcamp

    Подпишитесь на уровень «Джун Аналитик»Уже есть подписка?
    Навеяно рассказами о нахождении в SEAL - (см. <a href="https://t.me/analyticsfromzero/132" target="_blank">t.me/analyticsfromzero/132</a>)Подпишитесь, чтобы читать далее
    Джун Аналитик
    Перейти в постВ пост
    SEAL
    1