Недавно вышла новая большая модель от Meta — LLama 3.1 405B. Эти цифры означают, что у неё 405 миллиардов параметров. Запускать такие модели на собственном компьютере — дело неблагодарное, но протестировать самую мощную модель, доступную в опенсорсе, очень хочется. Что делать? Тестировать её в POE!

Мои стандартные тесты:
1. Написание сейлз писем (русский \ английский).
2. Коррекция моих кривых текстов (русский \ английский).
3. Написание Telegram-бота на Python.
4. Коучинг \ редактура эмоционального окраса сообщений.
5. Поисковый запрос (на этот раз я просил порекомендовать, где искупаться между Дюссельдорфом и Амстердамом).

Во всех задачах я измерял мой непредвзятый уровень удовлетворенности.

Участники эксперимента: GPT-4o, GPT-4mini, LLama 3.1 405B, Gemini 1.5 Pro, Claude 3.5 Sonnet.

Лист победителей:
1. GPT-4o: 89%
2. GPT-4mini: 84%
3. LLama 3.1 405B: 81%
4. Gemini 1.5 Pro: 93%!!!!!
5. Claude 3.5 Sonnet:85%

После этого я решил проверить,а что там на Арене ЛЛМок - и там тоже лидирует гугл(хотя я думаю это разные модели). Кажется они забыли, что такое хороший пиар, иначе свою не информированность мне объяснить сложно. Но да - модель остается ужасно цензурированной и в сравнении с лламой доступной в версии без цензуры это выглядит грустно.

@aihappens

Живое тестирование свежих LLM 👆

Ищу Intern CV Researcher в MooMind!!!

Заполняйте форму, чтобы откликнуться:
https://forms.yandex.ru/u/66cf0d11e010db39cc4e4bef/

Задачи:
- Заниматься сбором и обработкой датасетов, их размещением и контролем на Толоке
- Поиском и ресерчем опенсурсных датасетов и моделей
- Проверкой различных опенсурс моделей и инструментов
- Участие в исследованиях и production-разработке

Требования:
- Опыт создания пет-проектов и/или участия в хакатонах
- Хорошая математическая база
- Качественно заполненный отклик

Условия:
- Гибридный график в офисе на Пресне
- Участие в интересных проектах
- Возможность быстрого роста
- Длительность стажировки 3 месяца
- Заработная плата обсуждается индивидуально

Почему я ушел из космоса в сельское хозяйство:

Кому нужен мерч с хакатонов? А то у меня коллекция собралась

Два вопроса:
1) Кто на каком железе работает? Особенно интересует не «обучающее железо», а для повседневного использования.
2) Есть ли у кого опыт использования Nvidia Jetson AGX Orin. Выглядит многообещающе, особенно с 64Гб видеопамяти. Но насколько он реально хорош?

О чем я и говорил, догоняем Запад

https://t.me/lovedeathtransformers/8297

А что на стенах вашего офиса?

Ох уж эти яндексоиды… не могут настроить автоматическую очистку кэша

У нас новая вакансия на железячника-программиста (update)

https://hh.ru/vacancy/107589544

Высокие технологии требуют высокотехнологичной пищи

Бывало ли вам стыдно за место своей прошлой/текущей работы и почему?

Девиз сегодняшнего утра

На выходных поучаствовали в Цифровом Прорыве, в целом вполне успешно, заняли 3 место

А наш код можно посмотреть тут: https://github.com/sweetlhare/image-search

https://t.me/hackathons_ai/5882