PandasAI — кратно ускоряем работу аналитика данных в одну строчку
По сути PandasAI это LLM агент, который имеет доступ к Pandas. Агенту необходимо передать вопрос или указание на естественном языке, а он на основе данных найдет, построит диаграмму или преобразует данные.
Секреты аналитики
По сути PandasAI это LLM агент, который имеет доступ к Pandas. Агенту необходимо передать вопрос или указание на естественном языке, а он на основе данных найдет, построит диаграмму или преобразует данные.
Секреты аналитики
Основы теории вероятностей для будущих программистов и дата-аналитиков
Теория вероятностей — важный инструмент, который помогает создавать случайные числа для симуляций и криптографии, улучшать алгоритмы и структуры данных, а еще — разрабатывать точные модели для машинного обучения.
Секреты аналитики
Теория вероятностей — важный инструмент, который помогает создавать случайные числа для симуляций и криптографии, улучшать алгоритмы и структуры данных, а еще — разрабатывать точные модели для машинного обучения.
Секреты аналитики
Разработка фреймворка для автоматизации загрузок данных из источников
Аналитика данных и витрины аналитики — источники аналитической отчетности, на основе которой принимаются стратегические управленческие решения. Однако на рынке нет готовых фреймворков, которые полностью удовлетворяют потребности в извлечении данных.
Секреты аналитики
Аналитика данных и витрины аналитики — источники аналитической отчетности, на основе которой принимаются стратегические управленческие решения. Однако на рынке нет готовых фреймворков, которые полностью удовлетворяют потребности в извлечении данных.
Секреты аналитики
Как мы храним 20000+ метрик и миллиарды комбинаций разрезов в одной таблице
M42 — сервис для визуализации метрик. Он позволяет быстро проверять гипотезы, анализировать отклонения и оценивать инициативы. M42 — это часть единого аналитического продукта Trisigma, вторая его половина — платформа для A/B‑тестирования. Trisigma считает и визуализирует метрики в конкретных A/B‑экспериментах, а M42 помогает принимать решения глобально по продукту.
Секреты аналитики
M42 — сервис для визуализации метрик. Он позволяет быстро проверять гипотезы, анализировать отклонения и оценивать инициативы. M42 — это часть единого аналитического продукта Trisigma, вторая его половина — платформа для A/B‑тестирования. Trisigma считает и визуализирует метрики в конкретных A/B‑экспериментах, а M42 помогает принимать решения глобально по продукту.
Секреты аналитики
Перспективы профессии Data Science: ликбез для джунов
В этой статье автор расскажет, какие возможности для развития в дата-сайенс есть сейчас и какие появятся в ближайшем будущем, а ещё подсветит неочевидные для новичков особенности работы дата-сайентиста.
Секреты аналитики
В этой статье автор расскажет, какие возможности для развития в дата-сайенс есть сейчас и какие появятся в ближайшем будущем, а ещё подсветит неочевидные для новичков особенности работы дата-сайентиста.
Секреты аналитики
Играем в GOLF: как обучить нейросети точно предсказывать геометрию молекул, используя малое число данных
Автор этой статьи учится предсказывать свойства молекул, привлекая для этого нейросети — так выходит сильно быстрее, чем с помощью традиционных квантовохимических пакетов. Но есть и обратная сторона медали: чтобы нейросеть точно предсказывала энергии молекул, ей нужно очень много данных. В данном материале автор расскажет, как можно ослабить это ограничение.
Секреты аналитики
Автор этой статьи учится предсказывать свойства молекул, привлекая для этого нейросети — так выходит сильно быстрее, чем с помощью традиционных квантовохимических пакетов. Но есть и обратная сторона медали: чтобы нейросеть точно предсказывала энергии молекул, ей нужно очень много данных. В данном материале автор расскажет, как можно ослабить это ограничение.
Секреты аналитики
This media is not supported in your browser
VIEW IN TELEGRAM
Математика для Data Science: какая нужна и зачем
В этом ролике автор разбирает какая математика нужна для data science, где используется и для чего:
00:06 Пример
01:01 Школьная математика
01:39 Статистика
02:31 Линейная алгебра
03:20 Математический анализ
03:53 Теория вероятностей
04:21 Вывод
Смотреть это видео на youtube: youtu.be/wI0wnktEhGE
Секреты аналитики
В этом ролике автор разбирает какая математика нужна для data science, где используется и для чего:
00:06 Пример
01:01 Школьная математика
01:39 Статистика
02:31 Линейная алгебра
03:20 Математический анализ
03:53 Теория вероятностей
04:21 Вывод
Смотреть это видео на youtube: youtu.be/wI0wnktEhGE
Секреты аналитики
Анализ тенденций в области антифрода: как технологии проверки личности меняются и совершенствуются
В современном мире антифрод — это скрытый, но ключевой элемент защиты как для крупных бизнесов, так и для небольших компаний. Некоторые платформы активно внедряют системы антифрода для обеспечения безопасности и доверия своим пользователям.
Секреты аналитики
В современном мире антифрод — это скрытый, но ключевой элемент защиты как для крупных бизнесов, так и для небольших компаний. Некоторые платформы активно внедряют системы антифрода для обеспечения безопасности и доверия своим пользователям.
Секреты аналитики
Media is too big
VIEW IN TELEGRAM
Интервью с Data Scientist
0:00:00 Начало
0:27:20 Переход в IT
0:38:17 Что такое Data analysis и Data Science
0:44:25 Big Data
0:45:40 Кто такой аналитик
0:46:06 Data mining
0:49:22 Машинное обучение, Deep learning, Нейронные сети
0:52:53 Data Set и обучение нейронных сетей
1:02:34 Как оценить сколько стоит Data Scientist
1:03:46 На чем пишут DS
1:08:54 Инструменты: Tableau, R, Wolfram
1:10:51 По каким процессам работает Data Scientist
1:22:37 Как развиваться чтобы стать DS и что предстоит пройти
1:26:50 Минимальные навыки, которыми должен обладать DS
1:31:25 Где брать практический опыт
1:35:05 Что спрашивают на собеседовании
1:36:17 Источники информации для обучения
Смотреть это видео на youtube: youtu.be/tQYCd8tg56U
Секреты аналитики
0:00:00 Начало
0:27:20 Переход в IT
0:38:17 Что такое Data analysis и Data Science
0:44:25 Big Data
0:45:40 Кто такой аналитик
0:46:06 Data mining
0:49:22 Машинное обучение, Deep learning, Нейронные сети
0:52:53 Data Set и обучение нейронных сетей
1:02:34 Как оценить сколько стоит Data Scientist
1:03:46 На чем пишут DS
1:08:54 Инструменты: Tableau, R, Wolfram
1:10:51 По каким процессам работает Data Scientist
1:22:37 Как развиваться чтобы стать DS и что предстоит пройти
1:26:50 Минимальные навыки, которыми должен обладать DS
1:31:25 Где брать практический опыт
1:35:05 Что спрашивают на собеседовании
1:36:17 Источники информации для обучения
Смотреть это видео на youtube: youtu.be/tQYCd8tg56U
Секреты аналитики
Инфраструктура для data engineer S3
В этой статье автор расскажет о технологии S3 со стороны дата-инженерии. Вы рассмотрите как развернуть сервис, как им пользоваться и зачем он нужен в дата-инженерии.
Секреты аналитики
В этой статье автор расскажет о технологии S3 со стороны дата-инженерии. Вы рассмотрите как развернуть сервис, как им пользоваться и зачем он нужен в дата-инженерии.
Секреты аналитики
Кино, финансы и data science
Можно заранее знать, будет ли фильм успешным? - "Да". Можем ли мы заранее знать, сколько принесет данный фильм в прокате? - "Да", но в определенном интервале и с определенными оговорками. Стоит ли вкладываться в конкретный фильм? - "Нет", скорее всего вы прогорите как инвестор. Можно ли вкладываться в "портфель проектов"? - "Да", но отобранный самым тщательным образом. "ДА-ДА-НЕТ-ДА" - это формула голосования за будущее национального кинематографа.
Секреты аналитики
Можно заранее знать, будет ли фильм успешным? - "Да". Можем ли мы заранее знать, сколько принесет данный фильм в прокате? - "Да", но в определенном интервале и с определенными оговорками. Стоит ли вкладываться в конкретный фильм? - "Нет", скорее всего вы прогорите как инвестор. Можно ли вкладываться в "портфель проектов"? - "Да", но отобранный самым тщательным образом. "ДА-ДА-НЕТ-ДА" - это формула голосования за будущее национального кинематографа.
Секреты аналитики
Эвристики морских просторов: математическая оптимизация океанских контейнеровозов
Посмотрите вокруг. Есть высокая вероятность того, что какие-то из окружающих вас предметов прибыли к вам по морю. 90% товаров в мире перемещается по океану, зачастую на ужасно огромных грузовых судах. Но какими же будут наилучшие, наиболее оптимальные маршруты таких судов?
Секреты аналитики
Посмотрите вокруг. Есть высокая вероятность того, что какие-то из окружающих вас предметов прибыли к вам по морю. 90% товаров в мире перемещается по океану, зачастую на ужасно огромных грузовых судах. Но какими же будут наилучшие, наиболее оптимальные маршруты таких судов?
Секреты аналитики
Какую архитектуру данных мне выбрать? — подход Data-инженера (часть 1)
Сегодня данные являются одним из самых ценных активов организаций. Они играют ключевую роль в принятии стратегических решений, оптимизации бизнес-процессов и создании конкурентных преимуществ. В этом контексте инженерия данных представляет собой важнейшую дисциплину, которая охватывает весь процесс: от сбора и преобразования данных до хранения и обеспечения их доступности.
Секреты аналитики
Сегодня данные являются одним из самых ценных активов организаций. Они играют ключевую роль в принятии стратегических решений, оптимизации бизнес-процессов и создании конкурентных преимуществ. В этом контексте инженерия данных представляет собой важнейшую дисциплину, которая охватывает весь процесс: от сбора и преобразования данных до хранения и обеспечения их доступности.
Секреты аналитики
XJProfessor — помощник аналитика: преобразуем форматы данных легко и с улыбкой
При разработке интеграционного взаимодействия труднее всего даётся сопоставление различных форматов данных интегрируемых систем — «маппинг». Для этого нужно проанализировать много форматов, выявить корректные связи между элементами XSD- или JSON-схем и описать правила преобразования. Работа кропотливая, трудозатратная и не самая интересная.
Секреты аналитики
При разработке интеграционного взаимодействия труднее всего даётся сопоставление различных форматов данных интегрируемых систем — «маппинг». Для этого нужно проанализировать много форматов, выявить корректные связи между элементами XSD- или JSON-схем и описать правила преобразования. Работа кропотливая, трудозатратная и не самая интересная.
Секреты аналитики
Какую архитектуру данных мне выбрать? — подход Data-инженера (часть 2)
При выборе архитектуры данных важно понимать, что каждый подход имеет свои достоинства и недостатки. Data Warehouse предлагает более структурированный подход, ориентированный на отчетность, в то время как Data Lake обеспечивает гибкость и возможности для анализа «больших данных». Data Lakehouse устраняет разрыв между этими двумя архитектурами, а Data Mesh предлагает более гибкую и децентрализованную модель управления данными. Выбор правильного подхода должен основываться на потребностях проекта и долгосрочных целях.
Секреты аналитики
При выборе архитектуры данных важно понимать, что каждый подход имеет свои достоинства и недостатки. Data Warehouse предлагает более структурированный подход, ориентированный на отчетность, в то время как Data Lake обеспечивает гибкость и возможности для анализа «больших данных». Data Lakehouse устраняет разрыв между этими двумя архитектурами, а Data Mesh предлагает более гибкую и децентрализованную модель управления данными. Выбор правильного подхода должен основываться на потребностях проекта и долгосрочных целях.
Секреты аналитики
Отказ от рекламы: ограничения методов оценки денежной стоимости
В этой статье автор поделится опытом оценки стоимости отказа от рекламы на примере трех подходов — Stratified Random Sampling, Propensity Score Matching и FAISS, а также выводами, к которым пришли в итоге.
Секреты аналитики
В этой статье автор поделится опытом оценки стоимости отказа от рекламы на примере трех подходов — Stratified Random Sampling, Propensity Score Matching и FAISS, а также выводами, к которым пришли в итоге.
Секреты аналитики
Media is too big
VIEW IN TELEGRAM
Карьерные возможности в Data Science
00:00 Какие существуют карьерные траектории
01:04 Экспертная ветка
02:30 Переход в другие направления и ветки из экспертной
04:25 Преимущества, если переходите в другие направления
05:20 Нюансы менеджерской ветки
07:00 Роли в менеджерской ветке
08:12 Альтернативная ветки
09:42 Про консалтинг, образование
10:52 Как выбирать свою карьерную траекторию?
Смотреть это видео на youtube: youtu.be/gznKsBIh0R0
Секреты аналитики
00:00 Какие существуют карьерные траектории
01:04 Экспертная ветка
02:30 Переход в другие направления и ветки из экспертной
04:25 Преимущества, если переходите в другие направления
05:20 Нюансы менеджерской ветки
07:00 Роли в менеджерской ветке
08:12 Альтернативная ветки
09:42 Про консалтинг, образование
10:52 Как выбирать свою карьерную траекторию?
Смотреть это видео на youtube: youtu.be/gznKsBIh0R0
Секреты аналитики
10 вопросов на позицию специалиста по Data Science
Машинное обучение и наука о данных рассматриваются как основная движущая сила следующей промышленной революции, которая происходит сегодня в мире. Что, в свою очередь, выводит позицию DS/ML-специалистов в топ по востребованности. Более того, даже джуниоры востребованы как никогда.
Однако попасть на эти роли все же непросто. Позиции подразумевают весьма обширный багаж знаний, который не получить в одном университете, требуется усердное самостоятельное обучение.
Секреты аналитики
Машинное обучение и наука о данных рассматриваются как основная движущая сила следующей промышленной революции, которая происходит сегодня в мире. Что, в свою очередь, выводит позицию DS/ML-специалистов в топ по востребованности. Более того, даже джуниоры востребованы как никогда.
Однако попасть на эти роли все же непросто. Позиции подразумевают весьма обширный багаж знаний, который не получить в одном университете, требуется усердное самостоятельное обучение.
Секреты аналитики
Руководство по Apache Spark не для начинающих: оптимизация
В этой статье автор хочет копнуть глубоко и рассмотреть оптимизацию Apache Spark, сосредоточившись на базовых концепциях, оптимизации запросов и соединениях. Конечно же, с примерами
Секреты аналитики
В этой статье автор хочет копнуть глубоко и рассмотреть оптимизацию Apache Spark, сосредоточившись на базовых концепциях, оптимизации запросов и соединениях. Конечно же, с примерами
Секреты аналитики
Media is too big
VIEW IN TELEGRAM
📌 Как стать аналитиком данных?
Почему дата-анализ — одно из самых перспективных карьерных направлений? За что успешные компании ценят специалистов в этой области? Правда ли, что стать одним из них не каждому по силам? В этом видео автор рассказывает, как попасть в профессию и какие навыки стоит освоить в первую очередь.
Смотреть это видео на youtube: youtu.be/R1euCfh6hV8
Секреты аналитики
Почему дата-анализ — одно из самых перспективных карьерных направлений? За что успешные компании ценят специалистов в этой области? Правда ли, что стать одним из них не каждому по силам? В этом видео автор рассказывает, как попасть в профессию и какие навыки стоит освоить в первую очередь.
Смотреть это видео на youtube: youtu.be/R1euCfh6hV8
Секреты аналитики