1K subscribers
2.18K photos
18 videos
4 files
2.83K links
О цифровых технологиях аудита
👉 newtechaudit.ru/
👉 habr.com/ru/users/newtechaudit

👨‍💻 Обратная связь: @NTAfeedback_bot
Download Telegram
Всем привет! Сегодня расскажем об опыте использования инструмента, который поможет увидеть скрытые проблемы в коде и подскажет, на что необходимо обратить внимание в первую очередь. https://newtechaudit.ru/kodiruj-vlastvuj-vizualiziruj/
В данном посте я показываю способ обработки json строк с помощью языка программирования scala, когда схема файла заранее неизвестна или может быть изменена. https://newtechaudit.ru/kak-privesti-dinamicheski-strukturirovannye-json-v-format-key-value/
В процессе работы над двумя разными проектами перед нами дважды встала одна и та же прикладная задача: рассчитать время простоев. В обоих случаях надо было провести расчет с учетом недельного графика работы. Мы начинали решать задачу с создания локального сценарного решения. https://newtechaudit.ru/universalnyj-algoritm-rascheta-poter-rabochego-vremeni-na-python/
Нередко на практике, когда работаешь с алгоритмами машинного обучения, а в особенности с нейронными сетями, сталкиваешься с проблемой нехватки данных для нормального обучения модели или хотя бы получения более‑менее стабильного результата. Вот и мы оказались в подобной ситуации, решая задачу компьютерного зрения, связанную с анализом наличия нарушений в помещениях закрытого типа: нужных изображений оказалось недостаточно для качественной модели, аугментация нам не сильно помогла, а спарсить изображения из Интернета оказалось невозможно из‑за специфики данных. https://newtechaudit.ru/generacziya-sinteticheskih-izobrazhenij-s-ispolzovaniem-diffuzionno-transformernoj-modeli-dit/
В данном посте пройдём путь от знакомства с мощным инструментом для документации Sphinx до публикации нашей собственной документации на GitHub Pages. Мы узнаем насколько широко Sphinx используется в мире открытого исходного кода, включая такие проекты как Django, The Linux Kernel, TensorFlow, Pandas и многие другие. https://newtechaudit.ru/sozdaj-oformi-opublikuj-sphinx-nezamenimyj-pomoshhnik-v-mire-python-dokumentaczii/
Для анализа операций, совершенных в маркетплейсе, передо мной была поставлена задача организации витрины данных. В данной публикации поделюсь с вами опытом и знаниями по организации хранения данных в СУБД Greenplum. https://newtechaudit.ru/optimizacziya-hraneniya-dannyh-v-subd-greenplum/
В данной публикации мы рассмотрим, насколько эффективен torch.compile() на практике, заглянем под капот «двушки» PyTorch 2.0, чтобы узнать, как работает этот метод и какие преимущества он дает. https://newtechaudit.ru/test-drajv-pytorch-2-0-i-zaglyadyvaem-pod-kapot-dvushki/
А/В-тестирование – метод, который используется для сравнения двух версий переменной, например, дизайна сайта при маркетинговом исследовании с целью выявления лучшей версии. Это критически важный метод исследования в Data Science, который часто используется различными организациями при принятии решений с целью оптимизации существующего продукта и максимизации прибыли. В посте расскажу об этой теме подробнее. https://newtechaudit.ru/a-b-testirovanie-kak-sdelat-pravilnyj-vybor/
Кластеризация клиентов является важным инструментом, так как позволяет лучше понимать клиентов и предлагать им более персонализированный сервис. Также она может быть полезна для компании в поиске решения при возникновении проблем с клиентами. Побробнее в публикации. https://newtechaudit.ru/feature-engineering-i-klasternyj-analiz-klientov-na-pyspark/
Создание отчетов графовой аналитики является важной частью работы многих проектов и бизнес-процессов. Однако, процесс создания и настройки таких отчетов может быть сложным и требовать больших усилий. В этом посте рассмотрю, как использование языка программирования Python и его библиотек может значительно упростить генерацию отчетов графовой аналитики в формате PDF. https://newtechaudit.ru/generacziya-otchetov-grafovoj-analitiki-v-formate-pdf-s-pomoshhyu-python/
Меня зовут Клим, и сегодня я буду вашим проводником в PySpark MLlib. В этом посте я расскажу о простом для понимания, но в то же время достаточно эффективным алгоритме - дерево решений, а также его расширенной модификацией случайные леса решений. https://newtechaudit.ru/derevya-reshenij-v-pyspark-ot-semechka-do-parametricheskoj-optimizaczii-sluchajnogo-lesa/
Атаки компьютерных вирусов нисходят с новостных лент. Но, есть источники взлома систем гораздо опаснее, нежели вирусы. Антивирусы или правила безопасности могут не сработать в борьбе с таким видом источника взлома, как бэкдор. Этой теме я и хочу посвятить свой пост. https://newtechaudit.ru/bezopasnost-dannyh-bekdor/
Модели машинного обучения компьютерного зрения являются крайне актуальной задачей в современном мире, поскольку компьютерные системы, способные “видеть”, могут применяться во многих областях жизни. Одной из самых популярных областей применения моделей компьютерного зрения является распознавание объектов на изображениях и видео. https://newtechaudit.ru/zamena-paint-v-zadachah-razmetki-graficheskih-dannyh/
Сегодня создание интерактивной карты на python не составляет большого труда: стоит подключить библиотеку (например, Folium или Bokeh), указать картографический сервер, и после выполнения нескольких «магических» строк кода ваши данные как на ладони!
Но что делать, если данные есть, визуализировать их хочется, а в сети, в которой вы работаете, нет доступа к картографическим серверам? В этом случае помогут Plotly и GeoPandas. https://newtechaudit.ru/shiroka-neobyatna-interaktivna-offlajn-karta-rossii-s-plotly/
Telegram - одна из популярных социальных сетей. Большую часть времени проводя в telegram, в какой-то момент я подумала, что было бы удобно управлять своими задачами, не выходя из приложения, просто перейдя из диалога с другом в диалог с ботом.
В данной публикации я расскажу о создании телеграм-бота на JS. https://newtechaudit.ru/telegram-bot-na-js/
Представьте ситуацию, когда вам необходимо провести комплексный анализ некоторого количества пакетов документов по определенной теме (например, различные виды договоров, счетов, актов и т.д.), при этом шаблоны документов и форматы документов в этих пакетах используются разные. В данной публикации мы предлагаем рассмотреть подходы по решению подобной задачи. https://newtechaudit.ru/iz-pdf-v-excel/
В процессе любой работы периодически возникает необходимость выгрузить обрабатываемую в программе информацию для её хранения или дальнейшей передачи. При этом важно не утратить информацию или её часть, и быть уверенным, что тот, кому файл будет передаваться, сможет с ним работать. Подобный процесс и называется сериализацией данных. https://newtechaudit.ru/konserviruem-dannye-moduli-pickle-i-dill/
Почему стоит выбрать Node.js для разработки API? Высокая производительность Node.js обеспечивает низкий уровень нагрузки на процессор благодаря асинхронной обработке запросов. Это позволяет обрабатывать большое количество параллельных запросов без затормаживания системы. Также, единая языковая среда поможет в решении проблем и даст возможность быстро найти ответы на ваши вопросы. https://newtechaudit.ru/neslozhnyj-api-dlya-obrabotki-grafa-na-node-js-kak-ya-podruzhil-api-na-node-js-i-obrabotku-grafa/
В мире технологий происходит настоящая революция. На передовом фронте этой революции стоят нейронные сети — мощные и удивительные инструменты искусственного интеллекта, которые сегодня изменяют наше представление о возможностях компьютеров. Сегодня мы познакомим вас с двумя моделями-помощниками с автодополнением кода: StarCoder и Codeium. https://newtechaudit.ru/codeium-i-starcoder-nejroseti-s-avtodopolneniem-koda/
Python используется для решения огромного количества задач, но у него есть одна большая проблема — скорость. Эта ситуация может измениться благодаря Mojo. https://newtechaudit.ru/mojo-budushhij-ubijcza-python/