ScrapeGraphAI – это библиотека на Python для веб-скрейпинга, которая использует LLM и логику прямых графов для создания скрейпинговых пайплайнов для веб-сайтов и локальных документов (XML, HTML, JSON и т.д.).
Просто укажите, какую информацию вы хотите извлечь, и библиотека сделает все за вас!
Существует несколько стандартных пайплайнов для извлечения информации с веб-сайта (или локального файла):
🔹 SmartScraperGraph: одностраничный скрейпер, который требует только пользовательского запроса и исходного файла;
🔹 SearchGraph: многопостраничный скрейпер, который извлекает информацию из топ n результатов поиска в поисковой системе;
🔹 SpeechGraph: одностраничный скрейпер, который извлекает информацию с веб-сайта и генерирует аудиофайл;
🔹 ScriptCreatorGraph: одностраничный скрейпер, который извлекает информацию с веб-сайта и генерирует Python-скрипт;
🔹 SmartScraperMultiGraph: многопостраничный скрейпер, который извлекает информацию с нескольких страниц по одному запросу и списку источников;
🔹 ScriptCreatorMultiGraph: многопостраничный скрейпер, который генерирует Python-скрипт для извлечения информации с нескольких страниц по одному запросу и списку источников.
Можно использовать различные LLM через API, такие как OpenAI, Groq, Azure и Gemini, или локальные модели, используя Ollama.
#ScrapeGraphAI #WebScraping #Python #DataExtraction #AI #MachineLearning #BigData #Automation #Tech #Innovation #LLM #APIs #OpenAI #Azure #Groq #Gemini #Ollama
https://github.com/VinciGit00/Scrapegraph-ai
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥4⚡2👍1🤔1
Prettypretty помогает создавать потрясающие интерфейсы терминала на Python и Rust.
Особое внимание уделяется мощной и универсальной библиотеке цветов. Благодаря этому практически бесшовная интеграция архаичных, но любимых ANSI кодов 1970-х годов для стилизации терминалов с цветовой наукой 2020-х годов, особенно через восприятие цветового пространства Oklab, становится уникальной для prettypretty. Это позволяет вашему приложению легко адаптировать визуальные стили к текущей цветовой теме пользователя, режиму темного или светлого экрана и его цветовым предпочтениям.
#Prettypretty #Python #Rust #TerminalUI #ANSI #Oklab #DarkMode #LightMode #ColorLibrary #Tech #Coding #DevTools #OpenSource
https://github.com/apparebit/prettypretty
Please open Telegram to view this post
VIEW IN TELEGRAM
GitHub
GitHub - apparebit/prettypretty: Hello pretty 🌸 pretty, awesome terminal colors you have there!
Hello pretty 🌸 pretty, awesome terminal colors you have there! - apparebit/prettypretty
👍5🔥1
Что такое Streamlit?
Streamlit позволяет преобразовывать скрипты на Python в интерактивные веб-приложения за считанные минуты, а не недели.
Почему стоит выбрать Streamlit?
#Streamlit #Python #WebApps #DataApps #OpenSource #Development #Community #Coding #Tech #DataScience
https://github.com/streamlit/streamlit
Please open Telegram to view this post
VIEW IN TELEGRAM
GitHub
GitHub - streamlit/streamlit: Streamlit — A faster way to build and share data apps.
Streamlit — A faster way to build and share data apps. - streamlit/streamlit
👍3🔥3
AI Math Notes – это интерактивное приложение для рисования, которое позволяет пользователям рисовать математические уравнения на холсте. После того как уравнение нарисовано, приложение использует мультимодальную языковую модель для вычисления и отображения результата рядом со знаком равенства. Приложение создано с использованием Python, библиотеки Tkinter для графического интерфейса и PIL для обработки изображений. Вдохновлено демо "Math Notes" от Apple с WWDC 2024.
#AIMathNotes #Python #Tkinter #PIL #Math #Programming #InteractiveApp #WWDC2024 #AppleInspiration #Tech #Innovation
https://github.com/ayushpai/AI-Math-Notes
Please open Telegram to view this post
VIEW IN TELEGRAM
GitHub
GitHub - ayushpai/AI-Math-Notes: Open Source AI Math Notes
Open Source AI Math Notes. Contribute to ayushpai/AI-Math-Notes development by creating an account on GitHub.
👍3 3
Stage-script — это пакет, который позволяет разделять автоматизационные скрипты на этапы.
#Python #Automation #Infrastructure #StagedScript #DevOps #Scripting #Tech #Coding #Programming #TechTips
https://github.com/sandialabs/staged-script
Please open Telegram to view this post
VIEW IN TELEGRAM
GitHub
GitHub - sandialabs/staged-script: A Python package enabling the development of robust automation scripts that are subdivided into…
A Python package enabling the development of robust automation scripts that are subdivided into stages. - sandialabs/staged-script
Ditto позволяет сохранять любой тип информации, который можно поместить в буфер обмена: текст, изображения, HTML, пользовательские форматы и многое другое.
🧩Особенности:
#Clipboard #Windows #Ditto #Productivity #Tech #Software #Tools #БуферОбмена #Tech #Utility
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥2⚡1👍1
Cognee — это фреймворк для создания динамической памяти AI-агентов. Он заменяет классические RAG-системы (Retrieval-Augmented Generation) с помощью масштабируемых и модульных ECL (Extract, Cognify, Load) пайплайнов.
import cognee
import asyncio
async def main():
await cognee.add("Natural language processing (NLP) — междисциплинарная область компьютерных наук и информационного поиска.")
await cognee.cognify()
results = await cognee.search("Расскажи про NLP")
for result in results:
print(result)
if __name__ == '__main__':
asyncio.run(main())
#Cognee #AIAgents #MemoryForAI #RAG #OpenSource #Python #MachineLearning #NLP #AItools #DataScience #Tech #DeepLearning #AIdevelopment
https://github.com/topoteretes/cognee
Please open Telegram to view this post
VIEW IN TELEGRAM
GitHub
GitHub - topoteretes/cognee: Cognee is the open-source AI memory platform for agents. Give your AI agents persistent long-term…
Cognee is the open-source AI memory platform for agents. Give your AI agents persistent long-term memory with small models for free - topoteretes/cognee
1👍4🔥1 1
Archimedes — это open-source фреймворк на Python, созданный для того, чтобы переносить управляющие алгоритмы прямо на реальное оборудование. Он объединяет в себе моделирование, симуляцию, оптимизацию и генерацию C-кода — всё, что нужно для полного цикла разработки систем управления.
#python #casadi #embedded #controlsystems #numerics #autodiff #opensource #archimedes #pythonlibrary #engineering #robotics #optimization #coding #tech
https://pinetreelabs.github.io/archimedes/index.html
Please open Telegram to view this post
VIEW IN TELEGRAM
1 3👍2⚡1