DSML.KZ Новости
5.02K subscribers
347 photos
7 videos
51 files
706 links
Новости Data&AI Сообщества DSML KZ

Точка входа в Сообщество: www.dsml.kz/

Вакансии: @ml_jobs_kz @it_jobs_kz
Предложения и реклама: @ayana_mussabayeva
Download Telegram
В какой банк вы бы пошли работать?
(Смотри пост выше)
Anonymous Poll
35%
Банк 1
54%
Банк 2
7%
Банк 3
4%
Банк 4
👍1
В какой банк вы бы пошли работать?
Часть 3: неанонимно

Банк ЦентрКредит
Рейтинг от сотрудников: 71%
ЗП ниже рынка: 14.5%
Отзывов: 7

Jusan bank
Рейтинг от сотрудников: 100%
ЗП ниже рынка: 0%
Отзывов: 9

Kaspi
Рейтинг от сотрудников: 66.6%
ЗП ниже рынка: 40%
Отзывов: 15

Halyk bank
Рейтинг от сотрудников: 50.0%
ЗП ниже рынка: 0%
Отзывов: 2
👍5🕊2
Лучший банк для работы дата специалиста
Anonymous Poll
8%
Банк ЦентрКредит
36%
Jusan bank
48%
Kaspi
9%
Halyk bank
👍5❤1
Лучшими банками Казахстана для работы дата специалистов по итогам 3 раундового опроса были признаны Jusan bank и kaspi bank !

Поздравляем победителей!

Jusan стал лучшим по отзывам сотрудников, тогда как в каспи успело поработать больше сотрудников, а также он вызывает больше доверия в народе.

Полные итоги:

Банк ЦентрКредит
Рейтинг от сотрудников: 71%
ЗП ниже рынка: 14.5%
Отзывов: 7
Баллы: 5
1 тур: 2 балла
2 тур: 2 балла
3 тур: 1 балла

Jusan bank
Рейтинг от сотрудников: 100%
ЗП ниже рынка: 0%
Отзывов: 9
Баллы: 10
1 тур: 3 балла
2 тур: 4 балла
3 тур: 3 балла

Kaspi
Рейтинг от сотрудников: 66.6%
ЗП ниже рынка: 40%
Отзывов: 15
Баллы: 10
1 тур: 4 балла
2 тур: 2 балла
3 тур: 4 балла

Halyk bank
Рейтинг от сотрудников: 50.0%
ЗП ниже рынка: 0%
Отзывов: 2
Баллы: 4
1 тур: 1 балл
2 тур: 1 балл
3 тур: 2 балла
Изначально 3 раунд планировался следующим образом: представитель каждого банка должен был написать 3-4 интересных кейсов реализованных в компании за последнее время и использующий анализ данных. Ожидалось, что данные кейсы от каждого банка анонимно бы выставлялись на голосование и банкам выставлялись бы баллы соответственно интересности их релевантных кейсов.

К сожалению до всех представителей банка достучаться не вышло, поэтому 3 раунд пришлось переиграть по другому. Ниже же публикуются "недосокращенные" кейсы Жусан Банка, которые оперативно предоставил тимлид соответсвующей команды анализа данных Бауыржан Аубакир @HumanoidRobot

1) CVM - Client Value Management System, в зависимости от профайла, интересов, активов, локации и т.д. предлагаем таргетировано услуги, товары, продукты. Используем модели:
- предсказываем клиентов, кому интересен продукт
- предсказываем время, когда надо клиенту слать предложение
- предсказываем вероятность оттока для каждого клиента
- убиваем предложения, которые уже не релевантны
Подняли лояльность клиентов в 2 раза. Снизили отток на 30%.
Спасаем от оттока 50к юзеров в месяц.
Увеличили вовлеченность клиентов с 1.01 продукта на клиента до 1.3 за 1.5 месяца
Удвоили количество клиентов, у которых больше 3 продуктов

2) Marketing: знаем уровень кредитоспособности клиента, в зависимости от того какая картинка его привлекает =)
Снижаем уровень проблемных кредитов, на уровне привлечения с онлайн рекламы.
Пример: картинка с пачкой долларов привлекает очень много клиентов, но там качество клиентов очень плохое. А картинка с авто среднего класса тащит меньше людей, но зато качественных.

3) речевая аналитика:
проверяем на соответствие скрипту по 20 пунктам каждый входящий звонок в банк (приветствие, грубость, и т.д.)
добились улучшения качества обслуживания на 20%
добились снижения времени ожидания для клиентов с 15 минут до 30 секунд

Спасибо за вовлеченность и поздравляем Jusan с неожиданной и заслуженной победой!
👍23
ИТОГИ опроса сотрудников больший компаний
Лучшая большая компания Казахстана для работы дата специалиста

Отзыв оставило 72 человека.
Из них мотивированных (отзывов с указанными минусами компании использую для борьбы с накрутками) было 37.

По мотивированным отзывам / всего отзывов
Beeline 13 / 26 (6 баллов)
Kolesa Group 8 / 12 (5 баллов)
BTS Digital 5 / 8 (4 баллов)
Chocofamily 2 / 2 (3 балла)
ERG 1 / 2 (2 балла)
Prime Source 0 / 19 (1 балл)
InDriver 0 / 1 (выбывает)
Tele2/Altel 0 / 1 (выбывает)

Всего будет 4 раунда:
- количество мотивированных отзывов сотрудников
- анонимное сравнение отзывов сотрудников
- неанонимное сравнение компаний

Сырые данные будут пошарены после подведения итогов.

Если вы занимаете манагерскую/тимлид позиция в этих компаниях, вы можете привести мне в лс (@sneddy) примеры успешно реализованных проектов/сервисов в этих компаниях и я опубликую их вне конкурса.
Пример: https://t.me/main_ds_kz/879
👍3
В какую компанию вы бы посоветовали идти работать?
Рейтинг = Рекомендуете ли вы вашу компанию как одну из лучших для работы в качестве дс/аналитика/дата инженера

Компания 1:
Рейтинг от сотрудников: 50%
ЗП ниже рынка: 0%
+++ Большие потоки данных
+++ Использование новых технологий
+++ Компания не ставит ограничений в инструментах и ресурсах
- - - Маленькая команда аналитиков
- - - разрозненность аналитики между продуктами, не всегда есть дата-дривен подход
- - - Мало данных, в маленьких проектах зп аналитиков ниже рынка

Компания 2
Рейтинг от сотрудников: 100%
ЗП ниже рынка: 0%
+++ Организованные и отработанные процессы, команда хорошая
+++ Самый передовой стек технологий, нет ограничений по инструментам. Приверженцы open source. Полный цикл жизни ml Зрелая команда
+++ Качество данных, много инструментов, большая команда, компания готова инвестировать в данную сферу
+++ Корпоративная система, отношение к сотрудникам, заинтересованность в развитии и инновациях
- - - Иногда долгие бюрократические процессы по согласованию, Много встреч
- - - У части топ менеджмента плохо с пониманием диджитал продуктов
- - - бюрократия большой компании, только КЗ рынок продуктов

Компания 3
Рейтинг от сотрудников: 100%
ЗП ниже рынка: 0%
+++ Что-то про чай кофе печеньки развитие и тд
- - - Выглядит что все-таки все отзывы написали HR

Компания 4
Рейтинг от сотрудников: 100%
ЗП ниже рынка: 12.5%
+++ Хороший менеджмент, открытость, задачи ориентированные на рост, предоставлялись возможности для саморазвития
+++ Есть понятные хранилища. ДВХ команда собирают данные - тебе нужно только их использовать. Все команды просят данные для принятия решений
+++ передовые технологии в АБ-тестировании и DS/ML, постоянное корпоративное обучение для аналитиков, экспертность в области анализа данных, проведение конференций
+++ data driven decision making на уровне топов компании, отличный тимлид
- - - Не хватает стандартов, Крутых спецов меньше, чем хотелось бы
- - - Сложно провалидировать данные: Бэкэнд показывает одно, файрбэйзные события другое
- - - Нет связки между аналитиками и ML инженерами

Компания 5
Рейтинг от сотрудников: 100%
ЗП ниже рынка: 20%
+++ Сильные специалисты из Казахстана и ближнего зарубежья, маленькая нагрузка, большая зп
+++ Fully Remote, Macbook pro, great team, feeling of purpose in my team
- - - Слабая стратегия и мененджмент
- - - Low pay for junior-middle level promoted colleagues, no product market fit for most of the products
👍2
В какую компанию вы бы посоветовали идти работать? (смотри пост выше
Anonymous Poll
8%
Компания 1
50%
Компания 2
5%
Компания 3
21%
Компания 4
17%
Компания 5
👍1
Лучшая большая компания Казахстана для работы дата специалиста
Итоги второго раунда

Компания 1 - Chocofamily - 2 балла
Компания 2 - Beeline - 5 баллов
Компания 3 - Prime Source - 1 балл
Компания 4 - Kolesa Group - 4 балла
Компания 5 - BTS Digital - 3 балла
Лучшая большая компания Казахстана для работы дата специалиста
Anonymous Poll
5%
Chocofamily
29%
Beeline
4%
Prime Source
46%
Kolesa Group
16%
BTS Digital
Лучшая большая компания Казахстана для работы дата специалиста

1 место
Beeline - 15 баллов (6, 5, 4)

2 место
Kolesa Group - 14 баллов (5, 4, 5)

3 место
BTS Digital - 10 баллов (4, 3, 3)

Поздравляем Beeline с победой!
👍28
Как и в случае с банками публикуем интересные кейсы Билайна, которые любезно предоставил Head of big data и data science Билайна Ренат Алимбеков @alimbekovkz

1) Биометрия.
Полностью in house разработка. Состоит из трех модулей: распознавание документов (OCR), пассивная живость (liveness) и face recognition модель.
В результате мы полностью заменили вендорские решения в продуктах Beeline Казахстан и нашей дочке izi на собственные.
- OCR точность распознавания казахстанких документов - 93%
- точность liveness - 96%
Подробнее https://habr.com/ru/company/beelinekz/blog/563456 и https://habr.com/ru/company/beelinekz/blog/651027

2) Chat bot -
Запустили модели по определению спама и тональности в каналах Telegram, Whatsapp и Web. AR (automation rate) процент диалогов, в которых не было выхода на оператора ~ 87%.
Средняя оценка NPS при работе с ботом ~4
Подробнее https://www.youtube.com/watch?app=desktop&v=-1Elq5bMR3M&feature=emb_logo

3) Оцифровка инвойсов
- процент распознавания документов - 85%
- скорость обработки - 1 стр. 14 сек
Подробнее https://m.youtube.com/watch?v=JlW5BqLJA5w&feature=emb_logo

4) GEO даннные
Улучшаем показатели точности определения расположения абонента.
- прирост точности от 18% и до 57% процентов в зависимости от местности.
- погрешность определения стала меньше 250м.
Подробнее https://m.youtube.com/watch?v=TKsRXIvOnWA&feature=emb_logo
🔥34👍8👏1
Лучший технический вуз Казахстана

По многочисленным просьбам мы повторяем наше исследование для технических университетов!

В данной форме вы можете номинировать ваш университет на звание лучшего технического вуза Казахстана

https://forms.gle/KHGR8CMNMr56jZQU8

Большая просьба к сообществу выделить немного времени на вдумчивое прохождение формы и составление отзывов.

С нас - итоги, аналитика и сырые данные по завершению

Всем спасибо!
👍8
Последний день чтобы оставить отзыв на свой университет и номинировать его на звание лучшего технического ВУЗа Казахстана:

https://forms.gle/KHGR8CMNMr56jZQU8

Репосты в университетские чатики приветствуются :)
Лучшая подготовка к собеседованию - это другое собеседование!

Поэтому пока люди жалуются на свои университеты в опросе выше, сообщество Жана ДСМЛ запускают новую серию постов про вопросы с собеседований в дата саенс команды Казахстана

А начнем мы с компании BTS Digital образца 2018-2020 года, команду искусственного интеллекта в которой мне повезло возглавлять в это время.

В связи с большим потоком желающих к нам присоединиться мы автоматизировали процесс приема новых сотрудников, который состоял из 3 туров:
- онлайн тест по машинному обучению и программированию
- очный собес по теоретическому машинному обучению и программированию
- очный собес по практическому машинному обучению с конкретной командой по специализированному направлению (CV, NLP, Speech)

Этот процесс как и структура компании уже давно изменились, поэтому мы хотим поделиться с вами, а потом и разобрать задачи первого тура.

У вас будет уникальная возможность попробовать свои силы в абсолютно идентичных условиях что и у кандидатов того времени.

По ссылке ниже лежат вышеупомянутые задания, на выполнение которых рекомендуется выделить полтора часа времени, подготовить ручку с бумагой и настроить любимую среду программирования.

flexiquiz.com/SC/N/c247d732-bc8e-42ca-a9f1-8df8d6ea264c

Вы можете вернуться на любую страницу теста до его окончания, так что советуем сразу просмотреть все задания, чтобы иметь возможность правильно распределить время.

По окончанию вам сразу же автоматически дадут знать, прошли ли вы на следующий виртуальный этап или нет

Это ненастоящее собеседование, а лишь по-моему мнению неплохая возможность проверить свои силы и залатать впоследствие возможно проявившиеся дыры в машинном обучении
👍24❤5🕊4🔥2🐳2
А мы напоминаем, что у вас есть возможность присоединиться к нашему сообществу энтузиастов машинного обучения в Казахстане Жана DSML Kazakhstan

Основная идея
этого проекта: сделать наше сообщество более открытым, неанонимным и доверительным.

Основное отличие: внедрение сгенерированных на этапе регистрации визитных карточек (как на картинке выше)

Мы надеемся, что внедрение данных визиток фасилитирует живое общение, новые волонтерские проекты, менторскую программу, очные и заочные митапы, а также повысит уровень доверия в нашему контенту!

Это ни в коем случае не закрытое сообщество для избранных, и оно как и раньше открыто для любого увлеченного анализом данных человека.
Все, что от вас требуется: зарегистрироваться в нашем новом боте @databek_bot

Будьте внимательны с анкетой: заполнив ее раз, вы не сможете изменить полученную визитку вплоть до момента вхождения Казахстана в топ-30 конкурентноспособных экономик мира
👍10🔥2
​​Курс от участника нашего сообщества Алимбекова Рената (@alimbekovkz) по анализу медицинских изображений в Python теперь доступен на одной из крупнейших образовательных платформ Educative!

Слушатели курса могут научиться работать с КТ и рентген снимками, сегментировать области изображения и проводить анализ метаданных.

Курс сделан на английском языке и содержит 21 урок, 2 теста и 23 интерактивных упражнения.

Один из главных плюсов платформы это интегрированная прямо в браузер практическая среда написания кода

Ссылка: educative.io/courses/medical-image-analysis-python
🔥32👍8❤1
​​Лучший технический ВУЗ Казахстана по версии DSML kz

Этап 1 - Лояльность выпускников

Процедура:
- в основе исследования лежат ответы на форму:
forms.gle/KHGR8CMNMr56jZQU8
- учитывались ВУЗы с 5 отзывами и более
- учитывались отзывы из более 5 слов в которых плюсы и минусы ВУЗа составляли больше 5 слов совокупно
- отфильтровывались отзывы с оценкой 10 по всем пунктам в которых плюсы и минусы ВУЗа составляли меньше 10 слов совокупно
- оценки сглаживались добавлением 10 среднестатистических отзывов к каждому универу (со средними оценками по каждому пункту)
- ВУЗы ранжировались по средней оценке по нижеперечисленным категориям

Категории
- Качество общаг
- Культурная жизнь
- Качество фундаментальных курсов
- Качество прикладных курсов
- Качество гуманитарных курсов
- Качество научной деятельности
- Бренд университета
- Рекомендация выпускников
- Средняя оценка
- Количество отзывов

Результаты 1 тура
- Nazarbayev University - 6 баллов
- СДУ - 5 баллов
- КБТУ - 4 балла
- КФ МГУ - 3 балла
- Astana IT University - 2 балла
- МУИТ - 1 балл

В НУ по мнению студентов лучшие общаги, культурная жизнь, гуманитарные курсы и возможности для занятия наукой

В КФ МГУ - лучшие фундаментальные курсы

В КБТУ - лучшие прикладные курсы

В СДУ считают, что у них самый хороший бренд университета (авторитет диплома и нетворкинг выпускников)

Следующий этап будет сравнение отзывов на универ без раскрытия имени ВУЗа
Подробные итоги текущего этапа приведены в таблице ниже:
👍49❤8🔥2
Итоги виртуального собеседования
t.me/main_ds_kz/889
flexiquiz.com/SC/N/c247d732-bc8e-42ca-a9f1-8df8d6ea264c

Начнем с того что тест прошло почти 50 человек, 12 из них набрало проходной балл (7 баллов) для следующего раунда.

Лучший результат показали господа анонимусы:
10 / 12 - 1 (Raim V)
11 / 12 - 1 (@bmrxxx)
12 / 12 - 1 (soltustik)
🔥2
Разбор задач виртуального собеседования
t.me/main_ds_kz/889
flexiquiz.com/SC/N/c247d732-bc8e-42ca-a9f1-8df8d6ea264c

Первые задачи приведем почти без комментариев, а верный ответ выделим жирным.
Также приведена частота выбора того или иного ответа по последним 15 участникам.

1. Стохастический градиентный спуск (1 балл)
В чём заключается отличие градиентного спуска от стохастического градиентного спуска?

- В стохастическом градиентном спуске на каждой итерации к антиградиенту добавляется нормальный шум.(8%)
- В стохастическом градиентном спуске на каждой итерации в функционале ошибки используется не все элементы обучающей выборки (67%)
- В стохастическом градиентном спуске на каждой итерации делается шаг в случайном направлении. (25%)

2. Градиентный спуск (1 балл)
В чём заключается отличие градиентного спуска от стохастического градиентного спуска?

- В стохастическом градиентном спуске на каждой итерации используется лишь одно слагаемое в функционале ошибки (90%).
- В стохастическом градиентном спуске на каждой итерации к антиградиенту добавляется нормальный шум.(5%)
- В стохастическом градиентном спуске на каждой итерации делается шаг в случайном направлении. (5%)

3. Переобучение (1 балл)
Выберите верные утверждения про переобучение.

- Переобучение — явление, при котором полученный при обучении алгоритм показывает на новых данных более низкое качество, чем на обучающей выборке (55%).
- Одним из объяснений эффекта переобучения является недостаточная сложность модели, не позволяющая улавливать закономерности в данных (12%). (Комментарий: неверно, это недообучение)
- Симптомом переобучения для линейных моделей являются большие абсолютные значения весов (33%).
- Переобучение — явление, при котором полученный при обучении алгоритм показывает сопоставимое качество на обучающей выборке и на новых данных (0%).
(Комментарий: это не переобучение - это счастье)

4. KMeans (1 балл)
Выберите верные утверждения про то, что происходит в методе k средних на каждой итерации

- Пересчитываются центры кластеров (43%).
- Происходит сдвиг центров кластеров в случайном направлении для сходимости к более устойчивому решению (5%).
- Объекты выборки перераспределяются по кластерам в зависимости от расстояния до центра кластера (48%).
- Число k увеличивается на единицу (5%).

5. Сверточный слой (1 балл)
Входное изображение хранится как матрица размера 42 x 42.
К нему применяют сверточный слой с кернелом размера 7 x 7 и страйдом 1.
Какой размер матрицы будет на выходе?
- 36 X 36 (62%)
- 21 X 21 (8%)
- 39 X 39 (4%)
- 42 X 42 (17%)
- 35 X 35 (8%)

Решение: из-за свертки без паддинга мы теряем 6 пикселей, из-за страйда 1 мы не теряем ничего. Итого 42 - 6 = 36

Остальные задачи ждите в следующих постах
👍8