А зачем это бизнесу? Экономическое обоснование использования ML для прогнозирования спроса на ж/д
Бизнес всегда хочет сократить затраты, и аналитик может ему в этом помочь за счет прогнозирования спроса. Зная спрос на железной дороге, мы понимаем, где в ближайшем будущем будут основные точки возникновения грузопотоков, куда имеет смысл заадресовывать наши вагоны, чтобы сократить порожние пробеги (когда вагон едет пустым) и остаться в прибыли.
Секреты аналитики
Бизнес всегда хочет сократить затраты, и аналитик может ему в этом помочь за счет прогнозирования спроса. Зная спрос на железной дороге, мы понимаем, где в ближайшем будущем будут основные точки возникновения грузопотоков, куда имеет смысл заадресовывать наши вагоны, чтобы сократить порожние пробеги (когда вагон едет пустым) и остаться в прибыли.
Секреты аналитики
Язык 1С: плюсы и минусы для аналитических платформ
Мы часто сталкиваемся с несколько устаревшим мнением, что язык 1С – это только про финансовые системы. На самом деле 1С — это давно не только язык локальной бухгалтерской или финансовой программы, а мощное решение, проверенное огромным количеством компаний.
В этой статье автор подробно разберет, что он из себя представляет, где мы его применяем, какие плюсы и минусы у 1С есть.
Секреты аналитики
Мы часто сталкиваемся с несколько устаревшим мнением, что язык 1С – это только про финансовые системы. На самом деле 1С — это давно не только язык локальной бухгалтерской или финансовой программы, а мощное решение, проверенное огромным количеством компаний.
В этой статье автор подробно разберет, что он из себя представляет, где мы его применяем, какие плюсы и минусы у 1С есть.
Секреты аналитики
Что делают и сколько зарабатывают аналитики в крупных компаниях
Из-за того что профессия относительно новая, рынок ещё не определился, кто же такой дата-сайентист. Пока это «человек — швейцарский нож», который должен и анализировать, и программировать, и модели строить. А между тем каждая сфера — отдельная область знания, которую изучают и шлифуют годами. На одноимённую позицию в разных компаниях может требоваться разный набор знаний.
Впрочем, если просмотреть несколько десятков вакансий, можно выделить общие, уже устоявшиеся тенденции на рынке Data Science.
Секреты аналитики
Из-за того что профессия относительно новая, рынок ещё не определился, кто же такой дата-сайентист. Пока это «человек — швейцарский нож», который должен и анализировать, и программировать, и модели строить. А между тем каждая сфера — отдельная область знания, которую изучают и шлифуют годами. На одноимённую позицию в разных компаниях может требоваться разный набор знаний.
Впрочем, если просмотреть несколько десятков вакансий, можно выделить общие, уже устоявшиеся тенденции на рынке Data Science.
Секреты аналитики
Дублирующий скрипт: как с его помощью мы ускорили бизнес-процесс
В этой статье на примере большого и сложного процесса выдачи экспресс-кредитов автор расскажет, как смог реализовать полноценный дубль процесса на стороне одного проверочного скрипта и ускорить процесс выдачи экспресс-кредитов с двух рабочих дней до семи минут.
Секреты аналитики
В этой статье на примере большого и сложного процесса выдачи экспресс-кредитов автор расскажет, как смог реализовать полноценный дубль процесса на стороне одного проверочного скрипта и ускорить процесс выдачи экспресс-кредитов с двух рабочих дней до семи минут.
Секреты аналитики
Анализ вакансий и зарплат в Data Science
Исследование вакансий и зарплат в сфере data science и data engineering. Спрос на специалистов растет, или рынок уже насытился, какие технологии теряют, а какие набирают популярность, размер зарплатных вилок и от чего они зависят?
Секреты аналитики
Исследование вакансий и зарплат в сфере data science и data engineering. Спрос на специалистов растет, или рынок уже насытился, какие технологии теряют, а какие набирают популярность, размер зарплатных вилок и от чего они зависят?
Секреты аналитики
Media is too big
VIEW IN TELEGRAM
Используем нейронные сети для предсказания цены акций
В этом ролике автор разбирает, как можно предсказать цену на акции компании Apple используя нейронные сети, а именно RNN (LSTM блок).
00:00 Введение
01:00 Обзор датасета с Kaggle
02:09 Анализ данных с использованием Pandas
08:16 Создание датасета для временного ряда
14:33 Обучение RNN модели с помощью Tensorflow
Смотреть это видео на youtube: youtu.be/LI94ZkjE_w4
Секреты аналитики
В этом ролике автор разбирает, как можно предсказать цену на акции компании Apple используя нейронные сети, а именно RNN (LSTM блок).
00:00 Введение
01:00 Обзор датасета с Kaggle
02:09 Анализ данных с использованием Pandas
08:16 Создание датасета для временного ряда
14:33 Обучение RNN модели с помощью Tensorflow
Смотреть это видео на youtube: youtu.be/LI94ZkjE_w4
Секреты аналитики
Краткий гайд — резюме для Data Scientist
И, хотя каждый обладает базовой необходимой экспертизой по составлению резюме, всё же есть правила HR-кухни, которые лучше соблюдать, чтобы получить наибольшее количество ответов от работодателей.
Секреты аналитики
И, хотя каждый обладает базовой необходимой экспертизой по составлению резюме, всё же есть правила HR-кухни, которые лучше соблюдать, чтобы получить наибольшее количество ответов от работодателей.
Секреты аналитики
Media is too big
VIEW IN TELEGRAM
Знакомство с Power Query
В этом видеоуроке автор познакомит вас с Power Query и разберет следующие вопросы:
— зачем нужен Power Query
— как его установить
— как его настроить
— как изменить запрос
Смотреть это видео на youtube: youtu.be/uLeO7nZ0axM
Секреты аналитики
В этом видеоуроке автор познакомит вас с Power Query и разберет следующие вопросы:
— зачем нужен Power Query
— как его установить
— как его настроить
— как изменить запрос
Смотреть это видео на youtube: youtu.be/uLeO7nZ0axM
Секреты аналитики
Какую математику сегодня проверяют работодатели при найме Data Analysts & Scientists
Всемирный экономический форум в своем прогнозе самых востребованных профессий до 2025 года поставил Data Analysts & Scientists на первое место рейтинга...
Секреты аналитики
Всемирный экономический форум в своем прогнозе самых востребованных профессий до 2025 года поставил Data Analysts & Scientists на первое место рейтинга...
Секреты аналитики
Apache Spark и PySpark для аналитика
Есть много статей, которые дают инструкции по оптимизации Spark. Но, всё-таки, оптимизация запросов — штука непростая. По мнению автора статьи это не первый навык, который нужно освоить аналитику. Важнее как можно раньше научиться читать план запроса и следить за прогрессом исполнения расчётов в SparkUI.
В этой статье автор разберёт:
• что такое план запроса и чем он может помочь;
• как Apache Spark формирует план запроса;
• как пользоваться Spark UI, чтобы следить за планом запроса и прогрессом его исполнения;
• практические советы.
Секреты аналитики
Есть много статей, которые дают инструкции по оптимизации Spark. Но, всё-таки, оптимизация запросов — штука непростая. По мнению автора статьи это не первый навык, который нужно освоить аналитику. Важнее как можно раньше научиться читать план запроса и следить за прогрессом исполнения расчётов в SparkUI.
В этой статье автор разберёт:
• что такое план запроса и чем он может помочь;
• как Apache Spark формирует план запроса;
• как пользоваться Spark UI, чтобы следить за планом запроса и прогрессом его исполнения;
• практические советы.
Секреты аналитики
Реальный путь в data science
Эта статья описывает путь автора к первой работе в Data Science. Путь был длинным и пройден за 2,5 года. Статья поможет вам сократить время обучения и быстрее пройти его.
Секреты аналитики
Эта статья описывает путь автора к первой работе в Data Science. Путь был длинным и пройден за 2,5 года. Статья поможет вам сократить время обучения и быстрее пройти его.
Секреты аналитики
Чем занимаются специалисты по работе с данными и как стать Data-инженером
В этом материале автор рассказывает, чем отличаются подходы к построению распределённых хранилищ данных Data Warehouse и Data Lake, и в чём специфика задач специалистов, работающих с данными.
Секреты аналитики
В этом материале автор рассказывает, чем отличаются подходы к построению распределённых хранилищ данных Data Warehouse и Data Lake, и в чём специфика задач специалистов, работающих с данными.
Секреты аналитики
Совместные конфиденциальные вычисления: как работает технология, которая через 5 лет может изменить мир
Сложно конкурировать с крупными компаниями, опираясь только на собственные данные. Чтобы видеть максимально полную картину, нужно комбинировать разные источники, в том числе и базы данных партнеров. Но прямо обменяться данными не получится — российские и международные законы жестко регулируют этот процесс. Именно здесь на сцену выходят алгоритмы конфиденциальных вычислений и MPC — технология, которая позволяет делать сводную аналитику легально, без риска раскрытия и «слива» данных.
Секреты аналитики
Сложно конкурировать с крупными компаниями, опираясь только на собственные данные. Чтобы видеть максимально полную картину, нужно комбинировать разные источники, в том числе и базы данных партнеров. Но прямо обменяться данными не получится — российские и международные законы жестко регулируют этот процесс. Именно здесь на сцену выходят алгоритмы конфиденциальных вычислений и MPC — технология, которая позволяет делать сводную аналитику легально, без риска раскрытия и «слива» данных.
Секреты аналитики
А/В эксперименты. Ускорение вычислений с помощью бакетизации
В современном мире больших данных и высокопроизводительных вычислений оптимизация времени выполнения алгоритмов играет ключевую роль. Одним из эффективных методов ускорения вычислений является бакетизация данных.
Секреты аналитики
В современном мире больших данных и высокопроизводительных вычислений оптимизация времени выполнения алгоритмов играет ключевую роль. Одним из эффективных методов ускорения вычислений является бакетизация данных.
Секреты аналитики
Опенсорсные альтернативы Google Analytics на своём хостинге
Дегуглификация онлайновой жизни требует внедрения свободных альтернатив во всех областях. Есть ряд свободных, опенсорсных альтернатив Google Analytics, которые к тому же работают быстрее, поскольку скрипты меньше по размеру и загружаются с вашего собственного хостинга, а не со стороннего сервера. Информация о пользователях никуда не отправляется, а многие сервисы не используют куки и соответствуют законодательству GDPR о защите личных данных.
Секреты аналитики
Дегуглификация онлайновой жизни требует внедрения свободных альтернатив во всех областях. Есть ряд свободных, опенсорсных альтернатив Google Analytics, которые к тому же работают быстрее, поскольку скрипты меньше по размеру и загружаются с вашего собственного хостинга, а не со стороннего сервера. Информация о пользователях никуда не отправляется, а многие сервисы не используют куки и соответствуют законодательству GDPR о защите личных данных.
Секреты аналитики
Будущее современного стека для анализа данных
Это перевод поста из блога The Analytics Engineering Roundup про тенденции в индустрии данных и аналитики, стратегические преимущества и проблемы, с которыми сталкиваются компании в ней, влияние основных облачных провайдеров на её будущее и роль стандартов в формировании в ней технологических экосистем.
Секреты аналитики
Это перевод поста из блога The Analytics Engineering Roundup про тенденции в индустрии данных и аналитики, стратегические преимущества и проблемы, с которыми сталкиваются компании в ней, влияние основных облачных провайдеров на её будущее и роль стандартов в формировании в ней технологических экосистем.
Секреты аналитики
Интеграция Google Analytics с Telegram
Аналитика не только дает информацию о паттернах поведения пользователей, но и может помочь отследить частоту использования той или иной фичи, которую вы недавно интегрировали. Однако, регулярное посещение сайта аналитики и протыкивание нужных эвентов может превратиться в утомительную рутину, которую хочется избежать. Чтобы упростить эту задачу, автор набросал python-сервер, который раз в сутки забирает необходимые данные из аналитики и транслирует их в чат. В рамках статьи описывается базовый пример такой интеграции.
Секреты аналитики
Аналитика не только дает информацию о паттернах поведения пользователей, но и может помочь отследить частоту использования той или иной фичи, которую вы недавно интегрировали. Однако, регулярное посещение сайта аналитики и протыкивание нужных эвентов может превратиться в утомительную рутину, которую хочется избежать. Чтобы упростить эту задачу, автор набросал python-сервер, который раз в сутки забирает необходимые данные из аналитики и транслирует их в чат. В рамках статьи описывается базовый пример такой интеграции.
Секреты аналитики
Блокчейн или не блокчейн? Формализованные критерии выбора технологии хранения и обработки данных
Многие технологии делают нашу жизнь лучше и интереснее. Блокчейн, несомненно, относится к таковым. Но в очень многих случаях вокруг него возникает излишний хайп, который далеко не всегда способствует правильному восприятию блокчейна именно как одной из ряда существующих технологий хранения и обработки данных.
Секреты аналитики
Многие технологии делают нашу жизнь лучше и интереснее. Блокчейн, несомненно, относится к таковым. Но в очень многих случаях вокруг него возникает излишний хайп, который далеко не всегда способствует правильному восприятию блокчейна именно как одной из ряда существующих технологий хранения и обработки данных.
Секреты аналитики
Как перейти в Data Science из другой сферы
В этом материале автор делится списком правил, которых придерживается сам, когда хочет развить свои профессиональные навыки в какой-то новой сфере. Использовать их вы можете не только для обучения Data Science, но и при изучении других сфер.
Секреты аналитики
В этом материале автор делится списком правил, которых придерживается сам, когда хочет развить свои профессиональные навыки в какой-то новой сфере. Использовать их вы можете не только для обучения Data Science, но и при изучении других сфер.
Секреты аналитики
Облегчают анализ данных: 7 бесплатных сервисов на базе ИИ
В этом материале автор собрал подборку инструментов искусственного интеллекта, которые облегчают анализ данных. Некоторые из них бесплатны полностью, некоторые предоставляют базовые функции бесплатно, а некоторые имею бесплатный период. Но все так или иначе можно попробовать.
Секреты аналитики
В этом материале автор собрал подборку инструментов искусственного интеллекта, которые облегчают анализ данных. Некоторые из них бесплатны полностью, некоторые предоставляют базовые функции бесплатно, а некоторые имею бесплатный период. Но все так или иначе можно попробовать.
Секреты аналитики