Excel уже не тянет: как мы собрали аналитику для LMS на 10 млн строк без дата-инженеров

Чем лучше разработчик, тем хуже он делает аналитику. Просто потому, что для этого требуется разных технологический стек.

Системы, которые пишут разрабы, шикарно записывают и хранят данные. Но попытка прочесть большой объём данных сразу роняет всю систему, так как она плохо для этого предназначена. 

В этой статье я расскажу про 2 ключевых подхода к хранению и обработке данных, какой мы выбрали для аналитики в LMS-платформе и к чему это привело.

Какие бывают подходы к хранению и обработке данных

Существует 2 разных подхода к хранению и обработке данных:

Из боли клиентов — в новый продукт: как мы пересобрали аналитику на Clickhouse

Чем лучше разработчик, тем хуже он делает аналитику. Просто потому, что для этого требуется разный технологический стек.

Системы, которые пишут разрабы, шикарно записывают и хранят данные. Но попытка прочесть большой объём данных сразу роняет всю систему, так как она плохо для этого предназначена. 

В этой статье я расскажу про 2 ключевых подхода к хранению и обработке данных, какой мы выбрали для аналитики в LMS-платформе и к чему это привело.

Какие бывают подходы к хранению и обработке данных

Существует 2 разных подхода к хранению и обработке данных:

DWH без иллюзий. Три реальных кейса внедрения корпоративного хранилища в ритейле, производстве и госсекторе

Data Warehouse – корпоративное хранилище, объединяющее структурированные исторические и текущие данные для последующей аналитики. 

Место DWH в архитектуре управления данными

Место DWH в архитектуре управления данными

(далее…)

Когда твой продукт — лишь деталь пазла: путь от продакта к СРО

«Наташа, мы всё уронили», — таких историй за мой восьмилетний рабочий стаж в продакт-менеджменте хватит с лихвой. Особенно когда ты имеешь дело не просто с понятным продуктом для конечного потребителя, а со сложным софтом, где даже секундное падение серверов или спорное цветовое решение админской стойки может привести к факапу.  

Поэтому, когда я перешла в ISPsystem из ИТ-аудита в банке, мне казалось, что я сменила не только работу, но и Вселенную. Вместо проверок — мегаответственность за развитие продукта, вместо готовых регламентов — постоянные эксперименты. Часто — весьма рискованные.

(далее…)

Эмпатия: мощный ресурс руководителя в IT

Черты, определяющие трансформационное лидерство, продолжают эволюционировать — включая мягкие навыки, ориентированные на коммуникацию и взаимодействие. Это способствует улучшению корпоративной культуры, удержанию талантов и повышению эффективности бизнеса.

(далее…)

Почему разработчики не делают «по уму», даже когда знают как

На каждом созвоне слышно:

«Надо думать наперёд»
«Давайте писать с запасом на рост»
«Архитектура должна быть зрелой»

И в той же команде — к вечеру релиз на костылях, баги в проде и геройская починка «в ночи».

Но ведь команда не из новичков. Разработчики знают, как «по уму». Почему же всё не так?

Ответ — в среде (не день недели). Даже зрелый инженер не может строить на болоте.

Не «ленивый разработчик», а токсичная среда

Ошибка менеджмента — думать, что хорошее решение рождается просто из опыта.
Нет. Оно рождается из условий, в которых этот опыт может реализоваться. (далее…)

ИИ наступает: как системному аналитику остаться незаменимым?

О чем пойдет речь

Технологии сейчас слишком стремительно развиваются и оказывают влияние на многие профессии. Я — системный аналитик, и искусственный интеллект всё плотнее проникает в мою профессиональную жизнь. Сначала это даже вызывало опасения. Что ждёт меня в будущем? Сможет ли ИИ заменить меня в профессиональном плане? Можно ли этого избежать и какие новые навыки будут нужны специалистам, чтобы оставаться востребованными? Попробую ответить на эти и другие вопросы.

(далее…)

Мир 2040: Пророчества Винода Хосла о грядущей эре изобилия

Представьте себе мир, где необходимость работать исчезла. Где каждый дом населяет гуманоидный робот-помощник, а медицинская помощь стала бесплатной и доступной каждому человеку на планете. Это не утопическая фантастика, а видение будущего от одного из самых проницательных технологических провидцев нашего времени, записанное на основе его последнего интервью Predicting the Future.

(далее…)

«Не бухгалтер, а мина замедленного действия»: как мы спасли IT-стартап от блокировок счетов

Список «ключевых сотрудников» в голове фаундеров примерно такой: программист, маркетолог, юрист — кто угодно ещё, но точно не бухгалтер. Так думал и владелец одного IT-стартапа, пока мы не открыли его 1С и не увидели минус 10 миллионов по банку, переплаченные налоги на 1 000 000 рублей и взносы по ставке 30% вместо 15%. Рассказываем, как такое произошло, кто виноват и как понять, в порядке ли ваш бухучёт.

(далее…)

Как конвертировать PDF в Word: 4 способа, которые реально работают

PDF — это как красивый глянцевый журнал: выглядит классно, но попробуй-ка туда что-нибудь вписать. Особенно если тебе прислали договор с опечаткой или надо срочно вытащить текст из книги. Знакомо? В общем, сегодня делюсь рабочими способами (отрываю от сердца), как превратить PDF в редактируемый Word-документ. Причём бесплатно, быстро и желательно без боли.

(далее…)