مراجعة HMS Core 5.0: المزيد من ميزات ML على الأجهزة المحمولة وأدوات الصوت والفيديو الجديدة





مرحبا هبر! جنبا إلى جنب مع Harmony OS ، قدمنا ​​الإصدار الخامس من HMS Core ، وهي مجموعة من الأدوات التي يمكنك استخدامها لتطوير تطبيقات لنظام Huawei البيئي. أضفنا فرصًا جديدة للعمل مع المحتوى ، وركزنا على أمن البيانات ، والتفاعل بين الأجهزة ، ووسّعنا إمكانيات أدوات الذكاء الاصطناعي - تحدثنا عن كل هذا بالتفصيل في مؤتمر HDC الخاص بنا ، وسنقدم في هذه المقالة نظرة عامة على إمكانيات HMS الجديدة.



أدوات للعمل مع ML و AI



يتم تضمين الخدمات الرئيسية للعمل مع الذكاء الاصطناعي في ML Kit وتسمح لك بالعمل مع النصوص والصوت والصور وتقنيات AR / VR. في HMS Core 5.0 ، قمنا بزيادة عدد اللغات المدعومة إلى 50 لغة ويمكننا الترجمة بين 20 لغة ، بينما يتم قبول كل من التسجيلات النصية والصوتية كمدخلات. كما يمكن استخدام ML Kit لتصفية البريد العشوائي وأي صور فاحشة. 



باستخدام ML Kit ، من الممكن تحويل التسجيلات الصوتية إلى تنسيق نصي والعكس صحيح ، وقد قمنا بتوسيع هذه الوظيفة مع Video Course Creator، التي تنشئ دورات تعليمية تلقائيًا: تأخذ كمدخلات البرنامج التعليمي وتعليقات المعلم ومعلمات الصوت والفيديو المحددة مسبقًا - أثناء البث ، يمكن للمدرس الرجوع إلى المواد الضرورية ويتم تجميع جميع المواد المسجلة في دورة واحدة.







لقد ركزنا بشكل خاص على التعرف على الوجوه والإيماءات والوضعيات. بفضل هذا ، باستخدام ML Kit ، يمكنك إجراء مصادقة الوجه - النظام متصل عبر API ويمكن استخدامه للوصول السريع إلى التطبيقات دون أي إجراءات إضافية. 



يمكنك العمل باستخدام أدوات الذكاء الاصطناعي والتعلم الآلي على مستويات مختلفة:

  • HiAI , , NPU-.

  • Ability Gallery AI .



AR/VR 



يحلل محرك الواقع المعزز لدينا معلومات حول الإضاءة ، والطائرة ، وشكل الجسم ، ونوع السطح ، ويمكنه البحث عن كائنات محددة في الفضاء. بشكل منفصل ، يمكن للنظام إنشاء مخطط ثلاثي الأبعاد باستخدام نقاط الربط وتتبع حركات الإنسان والإيماءات وتعبيرات الوجه. على سبيل المثال ، يتم تخصيص 21 نقطة لتحديد موضع اليد ، و 23 نقطة مخصصة لموقف الجسم. الآن يمكن للنظام التعرف على 6 أوضاع وتحليل شخصين في وقت واحد.





مع الإصدار الخامس ، توفر HMS Core CameraKit أوضاع تصوير متنوعة: فتحة واسعة ، ووضع عمودي ، و HDR ، وضبابية الخلفية ، ووضع الليل الفائق وغيرها من الأمور المشابهة. أصبح من الممكن أيضًا استخدام الذكاء الاصطناعي في تصوير الصور والفيديو للاختيار المسبق للفلاتر وتصحيح الألوان. 



تعاون الأجهزة



يحتوي الإصدار الجديد من HMS Core على العديد من المحركات الجديدة للتعاون بين الأجهزة المختلفة. لقد قمنا بتبسيط التفاعلات بين الأجهزة والأشياء الذكية باستخدام محرك DeviceVirtualization . فهو يحول الأجهزة الطرفية إلى كائنات افتراضية ويسمح للهاتف بالعمل معها بنفس الطريقة التي تعمل بها الوظائف العادية.



في نفس الاتجاه ، قمنا بتطوير Cast Engine ، والذي يسمح للهاتف بالعمل في وضع الشاشات المتعددة ونقل الصور إلى التلفزيون بدقة عالية. نخطط أيضًا لإضافة القدرة على العمل مع Cast Engine من خلال تطبيقات أخرى.



محرك OneHop Kit جديد آخريعمل مع NFC ويسمح لك بنقل البيانات بأمان بين الأجهزة بلمسة واحدة. باستخدامه ، يمكنك مزامنة أجهزة Huawei مع بعضها البعض ، ونقل الملفات وفتح التطبيقات على الأجهزة الأخرى بنفس الإعدادات الموجودة في الجهاز الرئيسي. حتى الآن ، يعمل فقط بين هواتف Huawei والأجهزة اللوحية ، لذلك نقدم محرك مشاركة للتواصل مع الأجهزة الأخرى ، والذي يوفر سرعات تصل إلى 80 ميجا بايت / ثانية عبر البلوتوث. 



الفيديو والصوت



صورة

في الإصدار الجديد ، قمنا بتطوير العديد من أدوات SDK الجديدة للعمل مع الصوت والفيديو. الصوت كيت و فيديو كيت دعم صيغ الملفات الرئيسية والترميز ويمكن دمجها بسهولة في التطبيق وقراءة وحفظ وقوائم الحذف، وتسلسل اللعب، وضبط سرعة التشغيل. جميع ملفات الصوت والفيديو محمية بخوارزميات التشفير.



تحتوي مجموعة الصوت الآن على محرك صوت لتسجيل الصوت بجودة عالية مع تحسين التأخير والوظائف الأخرى للأداة. يدعم محرك الفيديو بدوره البروتوكولات الرئيسية HTTP و HTTPS و HLS و DASH. كما يسمح لك بتنظيم البث من خدمات الجهات الخارجية باستخدام Video Kit WisePlayer SDK.



بناء على خدمتناهواوي Meetime وقد أطلق كانياس عدة لمكالمات الفيديو، الذي يوفر HD تشغيل الصورة ونقل حتى مع وصلات غير مستقرة. يتيح لك المحرك أيضًا مشاركة الشاشة ، ورسم رسومات الشعار المبتكرة ، واستخدام تقنيات المحاكاة الافتراضية ، ونقل الصور إلى أي أجهزة أخرى ، والتي يمكن استخدامها لمؤتمرات الأعمال.



الصور والعرض ثلاثي الأبعاد



ظهرت Image Kit لمعالجة الصور - فهي توفر أكثر من 20 مرشحًا وتأثيرًا بصريًا ، بما في ذلك الرسوم المتحركة مع العرض. يتضمن 2 SDK: Image Vision SDK للعمل مع مرشحات الألوان و Image Render SDK لاستخدام تأثيرات الرسوم المتحركة. 



تم تصميم Scene Kit للعمل مع كائنات ثلاثية الأبعاد: فهي تستخدم طريقة العرض الصحيح ماديًا (PBR) وتسمح للتطبيقات بالاتصال عبر API واستقبال نماذج ثلاثية الأبعاد للكائنات المعقدة. يقدم المحرك ثلاثة سيناريوهات: SceneView للمشاهد المشتركة (غير AR) و ARView لمشاهد AR المشتركة و FaceView للعمل مع الوجوه في مشاهد AR. 



التحليلات والأمان



في Huawei Core 5.0 ، أطلقنا نظام وضع العلامات Dynamic Tag Manager (DTM) لتتبع النشاط التسويقي للمستخدمين: فهو يتكامل مع كل من خدمات Huawei نفسها ومع منصات الطرف الثالث لإرسال البيانات ومعالجتها. باستخدام DTM ، يمكنك تحديث العلامات ديناميكيًا في واجهة مستخدم الويب ، وتتبع أحداث معينة ، وإرسال البيانات إلى منصات تحليلات الجهات الخارجية. تركز أنظمتنا على الأمان ، وهذا هو سبب استخدام محرك DTM أيضًا كنظام مضاد للاحتيال لتتبع الأنشطة المشبوهة.



إحدى ميزات الإصدار الجديد من HMS هي مصادقة الوجه باستخدام LocalAuthentication Engine... إنه يعمل بكاميرا الأشعة تحت الحمراء التي تبني النموذج من النقاط المرجعية ويصادق عليها مع ML Kit. 



أخيرًا ، أولينا اهتمامًا لحماية المحتوى: بالنسبة للملفات الصوتية ، يتم استخدام تشفير ذاكرة التخزين المؤقت ، وللفيديو - نظام مضاد للتحليل والمصادقة أثناء التشغيل ، وللعمل مع الكاميرا - التشفير من طرف إلى طرف. جميع البيانات التي يخزنها HMS في بيئة TEE موثوقة ، يتم من خلالها إجراء التشفير







أين يمكنني معرفة المزيد؟



جميع تسجيلات مؤتمر HDC. معًا متوفرة هنا . هنا يمكنك الاستماع إلى تقارير حول تحديثات النظام الأساسي ، والسيناريوهات الرئيسية للعمل مع أدوات HMS وطرح أسئلة فنية على Huawei Developer Forum أو Stackoverflow باستخدام علامة huawei-mobile-services .



All Articles