تقنية معلومات It
51.9K subscribers
465 photos
108 videos
75 files
168 links
Download Telegram
كتاب "Just Use Postgres!" – دليل شامل لقدرات PostgreSQL المتقدمة

يقدم هذا الكتاب (402 صفحة) مراجعة شاملة لقدرات PostgreSQL التي تتجاوز الميزات العلائقية التقليدية.

ما يغطيه الكتاب:
- المفاهيم الأساسية: الفهرسة (B+Tree، Hash، الجزئية)، المعاملات، وميزات SQL الحديثة (CTEs، دوال النوافذ).
- القدرات غير العلائقية: تخزين JSON والبحث النصي الكامل.
- نظام الإضافات (Extensions) الغني:
* pgvector لتضمينات التعلم الآلي والذكاء الاصطناعي التوليدي.
* TimescaleDB لبيانات السلاسل الزمنية.
* PostGIS للاستعلامات الجغرافية المكانية.
* pgmq لطوابير الرسائل.
- إرشادات ضبط الأداء.
- مناقشة متى قد لا يكون PostgreSQL هو الخيار الأنسب.

رابط الكتاب: https://tech8news.com/

#PostgreSQL #قواعد_بيانات #SQL #ذكاء_اصطناعي #بيانات_جغرافية #تطوير_برمجيات #تقنية #برمجة #IT_soft22 #اداء
❤7
تم إطلاق الإصدار 2.5.0 من أداة Autobase مفتوحة المصدر، والذي يأتي بميزة جديدة رئيسية هي "وضع الخبير" في واجهة المستخدم.

أبرز المميزات الجديدة:

* وضع الخبير: يمنح المستخدمين المتقدمين تحكمًا أدق في تكوين عناقيد قواعد البيانات، بما في ذلك محرر YAML لإدخال معلمات مخصصة.
* تحديثات المواصفات والتسعير: دعم مثيلات Hetzner ARM، ومعالجات Intel من الجيل الرابع على منصتي AWS وGCP، مع تحديثات في الأسعار.
* تحسين أداء التخزين: إمكانية تكوين معدل عمليات الإدخال/الإخراج (IOPS) والإنتاجية لمجلدات التخزين المرن (EBS) على AWS.
* توافق محسّن: دعم الإصدار 12 من أداة Ansible للأتمتة.

تُساعد Autobase في نشر وإدارة عناقيد PostgreSQL عالية التوافر، وأتمتة المهام مثل النشر، والتعافي من الأعطال، والنسخ الاحتياطي، والتحجيم، مما يقلل الاعتماد على الخبراء المتخصصين في قواعد البيانات.

#Autobase #PostgreSQL #قواعد_بيانات #أتمتة #تطوير_برمجيات #مصدر_مفتوح #DevOps #إدارة_الأنظمة #تقنية #سيرفر
❤2👍1👏1
بعد إطلاق PostgreSQL 18، أصبحت فحوصات سلامة البيانات (Data Checksums) مفعلة بشكل افتراضي عند إنشاء قاعدة بيانات جديدة. هذه الميزة تحسب وتخزن بصمة رقمية لكل صفحة بيانات (8 كيلوبايت) ثم تتحقق منها عند القراءة لاكتشاف أي تلف صامت في البيانات، مما يوفر حماية تلقائية لسلامة المعلومات.

مع ذلك، يخلق هذا التغيير تحدياً في التوافق لمستخدمي أداة الترقية pg_upgrade: يجب أن يكون إعداد فحوصات البيانات متطابقاً في كل من الكتلة القديمة والجديدة. بالنسبة لقواعد البيانات الحالية التي لا تستخدم هذه الفحوصات، هناك خياران:

1. استخدام العلم الجديد --no-data-checksums أثناء تهيئة الترقية.
2. (الخيار المفضل) تفعيل فحوصات البيانات مسبقاً باستخدام أداة pg_checksums، مع العلم أن هذه العملية تتطلب توقيف قاعدة البيانات مؤقتاً.

#PostgreSQL #PostgreSQL18 #قواعد_البيانات #مطوري_الويب #DevOps #إدارة_قواعد_البيانات #تكنولوجيا #برمجيات_مفتوحة_المصدر
❤4👍1
تتيح ميزة مراقبة قواعد البيانات في Datadog الآن جمع خطط تنفيذ EXPLAIN ANALYZE من PostgreSQL تلقائيًا للمساعدة في استكشاف الاستعلامات البطيئة وإصلاحها. تعالج هذه الميزة الخطط التي يجمعها امتداد auto_explain في PostgreSQL، وتربطها بآثار أداء التطبيق (APM)، وتوفر تصورات تفاعلية.

تشمل حالات الاستخدام الرئيسية: تحديد تقديرات الصفوف غير الدقيقة التي تتسبب في استراتيجيات ربط غير فعالة، وتحليل عمليات الوصول للذاكرة المؤقتة مقابل قراءات القرص لتحديد ما إذا كانت مشكلات الأداء ناتجة عن اختناقات الإدخال/الإخراج أو تحتاج إلى تحسين الاستعلام.

#PostgreSQL #قواعد_البيانات #مراقبة_الأداء #تحسين_الاستعلامات #DevOps #Datadog #تطوير_البرمجيات #IT_soft22
❤3🔥1
بحلول عام 2026، يمكن لامتدادات PostgreSQL أن تحل محل قواعد البيانات المتخصصة مثل Elasticsearch وPinecone وRedis وMongoDB وInfluxDB باستخدام الخوارزميات الأساسية نفسها.

إدارة قاعدة بيانات واحدة بدلاً من سبع يقلل التعقيد التشغيلي، ويزيل مشكلات مزامنة البيانات، ويبسط اختبار وكلاء الذكاء الاصطناعي، ويخفض النفقات العامة للبنية التحتية.

توفر امتدادات مثل pg_textsearch وpgvector وpgvectorscale وTimescaleDB وPostGIS إمكانات البحث النصي الكامل، والبحث المتجهي، والبيانات الزمنية، والتخزين المؤقت، وتخزين المستندات، والجغرافية المكانية داخل PostgreSQL.

لنسبة 99% من الشركات، تتعامل PostgreSQL مع جميع احتياجات قواعد البيانات دون العبء المعرفي، وأعباء المراقبة، وأساليب الفشل الناتجة عن انتشار قواعد البيانات المتعددة.

#تقنية #قواعد_البيانات #PostgreSQL #تطوير_البرمجيات #ذكاء_اصطناعي #DevOps #برمجة #تكنولوجيا #بيانات #IT_soft22
❤6👍1
تكلفة عمليات الإدخال والإخراج العشوائية في قواعد البيانات أعلى بكثير مما يُعتقد.

أظهرت اختبارات على أقراص الحالة الصلبة الحديثة أن النسبة الفعلية بين التكلفة العشوائية والتسلسلية تتراوح بين 25 و35 ضعفًا، وليس 4 أضعاف كما هو مضبوط في إعداد PostgreSQL الافتراضي منذ 25 عامًا.

هذا التناقض يؤدي إلى اختيار مُخطِّط الاستعلام لخطط غير مثالية، مثل المسح التسلسلي بدلاً من المسح المفهرس، في نطاق انتقائية معين.

يمكن تحسين الأداء عن طريق ضبط المعلمة random_page_cost لتتوافق مع البيئة الحديثة، مع مراعاة عوامل مثل معدل ضربات ذاكرة التخزين المؤقت وتأثير الجلب المسبق للبيانات.

#قواعد_بيانات #PostgreSQL #أداء #تخزين #SSD #إدارة_قواعد_البيانات #تطوير_البرمجيات #تقنية #نصائح_تقنية
👏2❤1
تم تقديم pgtui، وهو عميل واجهة مستخدم نصية (TUI) لقواعد بيانات PostgreSQL، مكتوب بلغة Rust. يتيح هذا العميل التفاعل مع قاعدة البيانات مباشرة من الطرفية.

يتميز pgtui بدعم تصفح العلاقات وعرض البيانات مع ترقيم الصفحات، بالإضافة إلى إمكانيات الفرز والتصفية باستخدام عبارات WHERE. كما يدعم إدراج وتحرير السجلات عبر محرر طرفي، وحذف السجلات، والعمل مع المفاتيح الأساسية متعددة الأعمدة، وإدارة اتصالات متعددة بقواعد البيانات.

نشأ المشروع من فكرة كتابة المحتوى بصيغة TOML أو Markdown وتخزينه في قاعدة بيانات.

#برمجة #قواعد_بيانات #PostgreSQL #تطوير_البرمجيات #أدوات_المطور #Rust #مشاريع_مفتوحة_المصدر #تكنولوجيا #IT_soft22
❤2👏1
إليك النص الجاهز للنشر:

أداة pg_kpart الإصدار 1.0: إضافة جديدة لقاعدة بيانات PostgreSQL تمنع تنفيذ الاستعلامات التي تفحص جميع أقسام الجدول المقسم، وذلك بفرض استخدام مفتاح التقسيم. الاستعلامات التي لا تحتوي على شرط مناسب على مفتاح التقسيم تؤدي إلى مسح كامل للتسلسل الهرمي، مما يسبب تشبعًا في الإدخال/الإخراج ويؤثر سلبًا على أداء جميع المستخدمين المتصلين. هذه الإضافة تحوّل الاتفاقية التقليدية بين المطورين إلى ضمانة تفرضها قاعدة البيانات، وتتضمن وضع تدقيق للتطبيق التدريجي، ونطاقات القائمة السوداء/البيضاء لاستهداف جداول محددة، ورمز SQLSTATE مخصص لمعالجة الأخطاء على مستوى التطبيق. الأداة مفتوحة المصدر بموجب ترخيص PostgreSQL ومتاحة على GitHub.

#قواعد_البيانات #PostgreSQL #تقسيم_الجداول #تحسين_الأداء #أدوات_مفتوحة_المصدر #تقنية_المعلومات #تطوير_قواعد_البيانات #إدارة_البيانات #أداء_الخادم #برمجة
❤6👍1
قياس حجم تجمّع الاتصالات: لماذا يتفوق 48 اتصالًا على 400؟

أظهرت دراسة معيارية شاملة على قاعدة بيانات PostgreSQL، شملت اختبارًا من اتصال واحد حتى 400 اتصال، أن الإنتاجية تبلغ ذروتها عند 48 اتصالًا فقط، محققةً 18,039 معاملة في الثانية، بينما تنخفض بنسبة 37% عند رفع العدد إلى 400 اتصال، مع تضاعف زمن الاستجابة بمقدار 13 ضعفًا.

يكمن السبب في أن الاتصالات تمثل عمليات نظام تشغيل تتنافس على موارد المعالجة، وليست قدرة إضافية مجانية. وقد طُبّق قانون قابلية التوسع العالمي على النتائج، حيث أظهر توافقًا قويًا (R²=0.94) مع توقع مثالي يبلغ 45.1 اتصالًا، بينما جاءت المعادلة التقليدية (عدد الأنوية × 2 + عدد الأقراص) بعيدًا عن الواقع، إذ توقعت 9 اتصالات فقط مقابل 48 تم قياسها فعليًا.

كما أظهرت النتائج أن تعطيل المزامنة الفورية للكتابة (synchronous_commit=off) يرفع الإنتاجية لكنه لا يغيّر موقع الذروة. ويوصي الخبراء بمراقبة عمق قائمة الانتظار (cl_waiting في PgBouncer أو pending-threads في HikariCP) بدلًا من عدد الاتصالات، مع مراعاة مضاعفة حجم التجمّع عند تشغيل عدة نسخ، واستخدام تجميع المعاملات أو RDS Proxy لتطبيقات Lambda لتجنّب استنزاف الاتصالات.

#قواعد_البيانات #PostgreSQL #الأداء #تحسين_الاستعلامات #تقنية_المعلومات #تطوير_البرمجيات #البنية_التحتية #إدارة_الخوادم
❤3
مشاهدات نظام جديدة في PostgreSQL 19

يقدّم الإصدار المرتقب PostgreSQL 19 أربعة مشاهد نظام جديدة لتعزيز المراقبة والأداء:

- pg_stat_lock: يعرض إحصائيات تراكمية عن حالات الانتظار على الأقفال على مستوى الكتلة، مصنّفة حسب نوع القفل، مع عدّاد مخصص لحالات التجاوز السريع، وهو مفيد للبيئات ذات التقسيمات الكثيرة.

- pg_stat_recovery: يوفّر لقطة موحّدة لحالة الاسترداد في الخوادم الاحتياطية، مثل مواضع سجل الاسترداد وحالة الإيقاف المؤقت وموعد الترقية، مما يلغي الحاجة لدمج بيانات من مصادر متعددة غير متناسقة.

- pg_stat_autovacuum_sc: يعرض نظام التسجيل الجديد لكل جدول، والذي يعتمد على عمر المعرّفات وعدد الصفوف المحذوفة وحداثة التحليل، ليحدد ترتيب معالجة الجداول تلقائيًا بدلًا من الترتيب القديم.

- pg_dsm_registry_allocations: يسرد إدخالات الذاكرة المشتركة الديناميكية (الاسم، النوع، الحجم) التي تستخدمها الإضافات، دون الحاجة إلى تحميلها مسبقًا أو إعادة تشغيل الخادم.

يُذكر أن PostgreSQL 19 ما يزال في مرحلة الاختبار التجريبي، وقد تطرأ تغييرات قبل الإصدار النهائي.

#قواعد_بيانات #PostgreSQL #تقنية #برمجة #أداء_الأنظمة #تطوير_البرمجيات #أخبار_تقنية
تقليل التكاليف دون التضحية بالأداء: كيف انتقلنا من Couchbase إلى PostgreSQL

شارك فريق المحتوى في Trendyol تفاصيل عملية ترحيل تدريجية دون توقف للخدمة، شملت خمس مجموعات بيانات مساعدة تضم 2.24 مليار مستند موزعة على مجموعتين، من Couchbase إلى PostgreSQL، بهدف خفض تكاليف البنية التحتية مع الحفاظ على أداء القراءة.

اعتمدت الاستراتيجية على الكتابة المزدوجة عبر مستهلكي Kafka، وأداة ترحيل مخصصة تعتمد على CDC لاستعادة البيانات التاريخية، ونقل حركة القراءة تدريجيًا عبر Feature Flags.

واجه الفريق تحديات إنتاجية أبرزها: ارتفاع مفاجئ في معدل الطلبات بسبب إعداد server_reset_query_always في PgBouncer، وحادثة تجاوز حد الاتصالات أدت إلى تبديل العقدة الأساسية، ومشكلة توسع خفية ناتجة عن التوسع الأفقي التلقائي لـ PgBouncer الذي ضاعف الاتصالات الخلفية (20 pod × 150 اتصالًا = 3000 اتصال محتمل).

أظهرت النتائج النهائية استقرار زمن الاستجابة P50، مع ارتفاع طفيف في P99 من 200ms إلى 400ms تحت الحمل الأقصى، ما يؤكد نجاح عملية الترحيل.

@IT_soft22

#قواعد_بيانات #PostgreSQL #Couchbase #هندسة_البرمجيات #Kafka #الأداء #البنية_التحتية #تقنية #تطوير
❤4🥰1
إصدار Tabularis v0.32.0 يجلب مزايا جديدة تعزز إدارة قواعد البيانات:

- نقل الجداول بين اتصالات من نفس النوع، مع إمكانية تصدير الجدول إلى SQL واستيراده في مكان آخر، ومعاينة البنية قبل الكتابة عبر خيارات: الفشل، الحذف وإعادة الإنشاء، أو الإلحاق.
- تنسيق شرطي للخلايا أو الصفوف وفق قواعد محددة، يُحفظ لكل اتصال ومخطط وجدول.
- تبويب إعدادات جديد للقصاصات (Snippets) يدعم بادئات التشغيل ومواضع التوقف.
- مقارنة خطط التنفيذ بصريًا: حفظ لقطة من الخطة ومقارنتها بتشغيل لاحق، مع إظهار فروقات التكلفة ووقت التنفيذ.
- دعم PostgreSQL لتشخيصات SQL اختيارية ومعطلة افتراضيًا لمجموعة من استعلامات SELECT.
- واجهة الإضافات تعمل الآن داخل إطارات معزولة لتعزيز الأمان.

لمتابعة كل جديد: @IT_soft22

#قواعد_بيانات #برمجة #SQL #PostgreSQL #تقنية #تطوير_برمجيات #أدوات_مطورين #Tabularis
❤1
تشغيل PostgreSQL في Docker لبيئة الإنتاج يتطلب تجاوز عدة إعدادات افتراضية تتعارض مع طريقة عمل Postgres الداخلية.

بدءًا من PostgreSQL 18، نقلت الصورة الرسمية مجلد PGDATA إلى مجلدات فرعية خاصة بالإصدار، وغيّرت مسار تحميل وحدة التخزين إلى ‎/var/lib/postgresql‎ بدلًا من ‎/var/lib/postgresql/data‎.

حد Docker الافتراضي لـ ‎/dev/shm‎ البالغ 64 ميغابايت قد يتسبب في فشل الاستعلامات تحت الضغط الفعلي، لذا يجب ضبط shm_size على 1 غيغابايت أو أكثر.

كذلك، مهلة الإيقاف الافتراضية البالغة 10 ثوانٍ بين SIGTERM وSIGKILL قد تقتل Postgres أثناء عملية checkpoint، لذا يُنصح برفع stop_grace_period إلى 60 أو 120 ثانية.

يُفضّل وضع PgBouncer في وضع transaction pooling أمام Postgres لاستيعاب دفعات الاتصالات، مع إبقاء max_connections حول 100-150.

أما النسخ الاحتياطي فيجب أن يعتمد على pg_dump -Fc أو الأرشفة المستمرة لـ WAL عبر pgBackRest أو WAL-G، وليس نسخ ملفات PGDATA مباشرة أثناء تشغيلها.

#PostgreSQL #Docker #قواعد_بيانات #DevOps #استضافة #نسخ_احتياطي #تقنية #برمجة
❤2