H3C seasql MPP قاعدة البيانات الموزعة

من أجل مساعدة العملاء من جميع مناحى الحياة في مواجهة التحدي المتمثل في عصر البيانات الكبيرة ، H3C يبني عالية الأداء منصة معالجة البيانات الكبيرة ، وذلك باستخدام قاعدة بيانات وزعت hadoop MPP فيوجن إطار الحوسبة ، ويوفر للمستخدمين مع مجموعة كاملة من البيانات الكبيرة منصة الحل ، بما في ذلك جمع البيانات عملة ، تخزين الحساب ، تحليل التعدين ، وتبادل ، بي عرض وتشغيل وصيانة وإدارة سلسلة كاملة من المهام ، لمساعدة المستخدمين على بناء نظام معالجة البيانات الضخمة ، واكتشاف القيمة الجوهرية للبيانات ، والوصول إلى فرص جديدة في السوق .

seasql MPP يدعم نشر المادية المحلية ، فضلا عن نشر على سحابة خاصة ، مع مصادر البيانات التي يمكن تخزينها محليا HDFS、 سحابة التخزين أو غيرها من قواعد البيانات العلائقية مثل أوراكل ، الخلية ، وما إلى ذلك ، هذه البيانات من خلال أدوات ETL أو كافكا متكاملة في seasql MPP قاعدة البيانات . seasql MPP قاعدة البيانات الموزعة على أساس غير مشترك على نطاق واسع الهندسة المعمارية المتوازية ، لديه القدرة على معالجة البيانات على مستوى الرصاص ، على أساس نواة بوستجرس ، وقد تم الكثير من التحسين ، وتوفير قوية محسن الاستعلام ، مزود الكمال التوافق . في واجهة طبقة ، seasql MPP يوفر واجهة بيثون / ص / جافا / بيرل / ج ، بالإضافة إلى معيار جدبك / ODBC واجهة ، كما يوفر واجهة آلة التعلم مكتبة madlib ، النص الكامل استرجاع بوست نظم المعلومات الجغرافية .

seasql القسط هو توزيع الهندسة المعمارية ، مع قدرة قوية على التوسع الأفقي ، والتي يمكن تحقيق الربط بين الآلاف من العقد ، ودعم الآلاف من وحدات المعالجة المركزية . قدرات قوية لمعالجة البيانات والحوسبة تنطبق على السيناريوهات التالية :

• مناسبة للتطبيقات التحليلية ، مثل بناء المشاريع على مستوى المواد المستنفدة للأوزون / EDW ، بيانات مارت .

• مناسبة للتطبيقات التي تحتاج إلى التعامل مع كميات كبيرة من البيانات ، مثل مستودع البيانات ، ذكاء الأعمال ، الخ .

• مناسبة لتحليل البيانات غير متصل واستخراج البيانات ، مثل تحليل سلوك العملاء ، صورة شخصية ، والسلوك التنبؤ النمذجة .

H3C seasql القسط هو نوع من قاعدة البيانات الموزعة على شبكة الإنترنت ، والتي تعتمد على حصة لا شيء الهندسة المعمارية ، المضيف ، نظام التشغيل ، الذاكرة ، الذاكرة ، التخزين الذاتي ، وليس هناك مشاركة . السمات الرئيسية H3C SeaSQL MPP قاعدة البيانات هي كما يلي :

· على نطاق واسع المعالجة المتوازية المعمارية .

دعم كل صف و عمود . كل جدول أو جدول التقسيم يمكن أن تكون محددة من قبل مدير التخزين و الضغط حسب الطلب .

دعم مجموعة متنوعة من أساليب ضغط ، بما في ذلك ZLIB ، RLE وهلم جرا .

دعم متعدد المستويات تقسيم الجداول ، وتقسيم الدعم لأنماط متعددة ، بما في ذلك النطاقات والقوائم الخ .

دعم b-tree ، نقطية ، GIST الفهارس .

آلية التوثيق يدعم العديد من الطرق ، بما في ذلك LDAP و Kerberos .

تمديد الدعم اللغوي : SeaSQL MPP يدعم تنفيذ مهام يحددها المستخدم باستخدام العديد من اللغات الشعبية ، بما في ذلك بيثون ، ص ، جافا ، بيرل ، ج / ج + + ، الخ .

معالجة المعلومات الجغرافية : من خلال دمج نظم المعلومات الجغرافية ، seasql MPP يدعم تخزين وتحليل المعلومات الجغرافية .

بنيت في قاعدة بيانات خوارزمية التعدين : من خلال madlib ( الآن مشروع حضانة اباتشي ) خوارزمية قاعدة البيانات ، يمكنك بناء العشرات من البيانات المشتركة وتحليل خوارزميات التعدين في seasql MPP قاعدة البيانات ، بما في ذلك الانحدار اللوجستي ، شجرة القرار ، كلمة الغابات وهلم جرا . لا تحتاج إلى كتابة أي رمز الخوارزمية ، من خلال مزود يمكنك استخدام جميع الخوارزميات .

نص البحث : SeaSQL MPP يمكن أن تدعم كفاءة ومرونة غنية النص الكامل وظيفة البحث . مع madlib ، بالتوازي مع تحليل النص والتعدين .

تحميل عالية الأداء ، وذلك باستخدام تكنولوجيا MPP ، ويوفر Petabyte مستوى حجم البيانات لتحميل الأداء .

· بيانات كبيرة سير العمل الأمثل الاستعلام .

تعدد الأشكال وتخزين البيانات وتنفيذها .

آلة متقدمة القدرة على التعلم على أساس madlib اباتشي .

دعم مزود 92 مقاييس / ايزو ، مزود 99 مقاييس / ايزو ، مزود 2003 مقاييس / ايزو ، مزود 2006 مقاييس / ايزو القياسية ، ودعم جيم API ، ودبك ، جدبك وغيرها من المعايير الدولية واجهة ، دعم DDL ، دمل ، الدي سي إل بناء الجملة ، ودعم أنواع البيانات الأساسية ، السلامة الأساسية القيود ، وإدارة الجدول ، شروط البحث ، الجدول الصدد ، الاستعلام الفرعي ، إدراج ، تعديل ، حذف ، ومراقبة المعاملات .

سحابة نشر

seasql MPP يدعم نشر وتركيب cloudos5.0 سحابة منصة ، ويمكن أن تدعم نشر سحابة . يمكن للمستخدمين التحكم في جميع الموارد من خلال واجهة cloudos وجدولة إدارة موحدة ، وإدارة مرنة ، وتخصيص الموارد ، وتحسين استخدام الموارد .

توسيع دون انقطاع

seasql MPP قاعدة البيانات يمكن أن تحمل على نوعين من توسيع القدرات وفقا لمتطلبات العملاء : المضيف على سبيل المثال توسيع القدرات . في عملية التوسع ، فقط تحديث نظام الجدول الفوقية اللازمة لإكمال التوسع ، لا تحتاج إلى إيقاف تشغيل قاعدة البيانات ، قاعدة البيانات بعد التوسع في استخدام خوارزمية التجزئة القفز consistent للحد بشكل كبير من حركة البيانات في عملية إعادة توزيع البيانات .

صف تخزين الهجين

seasql MPP قاعدة البيانات يوفر مجموعة متنوعة من نماذج التخزين : صف ، عمود ، عمود التخزين ، التخزين المختلطة ، وفقا لاحتياجات الأعمال التجارية يمكن أن تجعل من وضع تخزين البيانات .

لعة وظيفة

seasql MPP يوفر ثروة من وظائف لعة ، بما في ذلك : لفة ، مكعب ، نافذة وظيفة ، عملية تكرارية ، وما إلى ذلك تستخدم لدعم العمليات التحليلية المعقدة ، مع التركيز على دعم اتخاذ القرار من صناع القرار والمديرين التنفيذيين . وفقا لطلب من المحللين ، يمكن أن تحمل على كمية كبيرة من البيانات المعقدة بسرعة ومرونة معالجة الاستعلام ، بحيث يمكن أن نفهم بدقة حالة الأعمال التجارية ، فهم احتياجات العملاء ، ووضع الخطة الصحيحة .

العديد من المستأجرين

العديد من المستأجرين من seasql MPP قاعدة البيانات يمكن أن تقسم إلى عدة مستأجرين . الموارد المادية من مختلف المستأجرين معزولة عن بعضها البعض .

مختلف المستأجرين لديهم متطلبات مختلفة من الموارد المادية ، كل الموارد معزولة عن بعضها البعض دون تدخل ، وبالتالي منع بعض المستأجرين من الاستيلاء على الموارد من المستخدمين الآخرين في ذروة الأعمال التجارية .

البيانات بين المستأجرين معزولة ، وبالتالي تحسين أمن البيانات .

عندما موارد النظام خاملا ، وحدة المعالجة المركزية والذاكرة الموارد يمكن استخدامها بمرونة ، عندما تكون الموارد أكثر انشغالا ، الموارد بين المستأجرين يمكن أن تكون محدودة من قبل مجموعة من المعلمات ، وبالتالي تحسين معدل استخدام موارد النظام برمته .

قوية القدرة على تحميل موازية

مؤشر أداء استيراد البيانات تلعب دورا هاما في مستودع البيانات ، seasql MPP قاعدة البيانات يمكن استخدام جميع الموارد من العقد في المجموعة بأكملها عند تحميل البيانات ، تحميل الأداء يزيد خطيا مع زيادة عدد العقد ، معدل تحميل البيانات يمكن أن تصل إلى 20 السل / ساعة في مجموعة واسعة النطاق .

madlib المتكاملة آلة التعلم مكتبة

madlib ليس مبرمج المنحى ، ولكن تطوير قاعدة البيانات أو ديسيبل المنحى ، يمكن أن تكون بسيطة وسهلة الاستخدام مزود جنبا إلى جنب مع خوارزميات التعدين البيانات المعقدة ، والاستفادة الكاملة من مزايا وخصائص اثنين ، إلى حد كبير تحسين كفاءة التنمية للمطورين .

بالنسبة للمستخدمين ، madlib يوفر الوظائف التي يمكن الاحتجاج بها في مزود الاستعلام ، بما في ذلك ليس فقط العمليات الجبرية الخطية الأساسية والإحصاءات ، ولكن أيضا على استعداد آلة التعلم أو استخراج البيانات نموذج المهام . المستخدمين لا تحتاج إلى فهم عميق تفاصيل تنفيذ الخوارزمية ، تحتاج فقط إلى استخدام وظيفة واضحة يمكن أن تحسن كثيرا من كفاءة التنمية ، وتوفير تكاليف التنمية .

معالجة البيانات الجغرافية المكانية المتكاملة

نظم المعلومات الجغرافية هي امتداد كائن العلائقية نظام قاعدة البيانات ، نظام إدارة قواعد البيانات عن بعد هو تحويلها إلى قاعدة البيانات المكانية عن طريق إضافة دعم أنواع البيانات المكانية ، والفهارس المكانية والمكانية وظائف إلى شبكة الإنترنت .

seasql MPP يدمج نظم المعلومات الجغرافية في قاعدة البيانات المكانية ، يدمج البيانات المكانية مع كائن قاعدة بيانات علائقية ، يدرك التحول من نظم المعلومات الجغرافية إلى قاعدة بيانات مركزية . في هذه الطريقة ، المستخدمين لا تحتاج إلى محرك بيانات نظم المعلومات الجغرافية الخاصة للتعامل مع البيانات المكانية والتلاعب بها ، فقط من خلال لغة SQL التطبيق يمكن بسهولة التعامل مع البيانات المكانية .

شفافة التشفير

seasql MPP شفافة وحدة التشفير يدرك تشفير قاعدة البيانات بأكملها ، والتي هي غير مدركة تماما إلى العميل . عندما كتلة البيانات المكتوبة على القرص ، تشفير البيانات . فك تشفير البيانات عند قراءتها من القرص . فإنه يمكن ضمان أن البيانات المخزنة على القرص دائما مشفرة ، حتى لو كان محتوى القرص لا يمكن قراءة نص عادي داخل البيانات . وفي الوقت نفسه ، على مستوى الأعمال لا يدرك تماما التشفير ، التشفير لا تحتاج إلى أي تعديل . الخدمات المعمارية والهندسية XTS التشفير المعتمدة لضمان أمن البيانات .

بيانات الحساسية

بيانات الحساسية ، وتسمى أيضا بيانات التبييض ، بيانات الخصوصية أو تشويه البيانات . يشير إلى بعض المعلومات الحساسة من خلال إزالة الحساسية من قواعد البيانات تشوه لتحقيق حماية موثوق بها من البيانات الحساسة والخصوصية . في الحالات التي تنطوي على بيانات سلامة العملاء أو بعض البيانات الحساسة تجاريا ، في ظل ظروف لا تنتهك قواعد النظام ، فإن البيانات الحقيقية يجب أن تكون إعادة بنائها واختبارها واستخدامها ، مثل رقم بطاقة الهوية ، رقم الهاتف ، رقم البطاقة ، رقم العميل ، وغيرها من المعلومات الشخصية التي تحتاج إلى بيانات الحساسية .

seasql MPP قاعدة البيانات يوفر مجموعة متنوعة من أساليب إزالة الحساسية ، بعد تحديد قواعد إزالة الحساسية ، يمكن للمستخدمين الوصول إلى البيانات عن طريق إزالة الحساسية بطريقتين :

قالحساسية الساكنةإزالة المعلومات الحساسة في قاعدة البيانات ، قاعدة بيانات البيانات الحساسة لا يمكن استردادها .

قالحساسية الديناميكيةحجب المعلومات الحساسة عن المستخدم المحدد ، وغيرها من المستخدمين الذين لم يتم إزالة الحساسية سوف لا تزال الوصول إلى البيانات الخام .

FDW بيانات الاتحاد

FDW هو تنفيذ معيار مزود / ميد ( مزود إدارة البيانات الخارجية ) . FDW يوفر سلسلة من واجهات مشتركة موحدة ، مما يجعل من السهل على تمديد برنامج التكامل مع seasql في التحسين ، التنفيذ ، المسح الضوئي ، وتحديث الإحصاءات ، وما إلى ذلك ، مما يجعل من الممكن الاستعلام والتعامل مع مصادر البيانات الخارجية مباشرة مع مزود البيانات . على سبيل المثال ، FDW الخلية ، يمكن للمستخدمين الاستعلام ، والفرز ، التجمع ، والترشيح ، الانضمام ، وحتى إدراج وتحديث البيانات في قاعدة بيانات الخلية مباشرة كما لو أنها تعمل على السطح .

اعتمادا على مصدر البيانات ، FDW وحدة seasql تنفذ ما يلي : postgres_fdw、file_fdw、oracle_fdw、mysql_fdw、json_fdw、redis_fdw、hdfs_dfw， كما هو مبين أدناه :

roaringbitmap ضغط الصورة

roaringbitmap هو كفاءة خوارزمية ضغط الصورة النقطية التي يمكن أن تحسن بشكل فعال كفاءة استخدام الذاكرة النقطية ، وحل مشكلة متفرق الصورة النقطية لا تناسب متفرق التخزين . bitmap الحوسبة هي مناسبة جدا للحصول على قاعدة بيانات كبيرة ، وغالبا ما تستخدم في إعادة تسمية الترشيح ، سلسلة زمنية من الحسابات . إن gpdb u roaringbitmap المكونات الإضافية يدمج roaringbitmap وظيفة في seasql MPP قاعدة البيانات ، roaringbitmap كنوع من أنواع البيانات لتوفير وظائف قاعدة البيانات الأصلية ، والمشغلين ، التجميع ، وهلم جرا .