الكشف في الوقت الحقيقي عن فتحات الحالب وتحديد موقعها في مقاطع الفيديو الخاصة بجراحة المسالك البولية والجراحية
يعد الكشف عن فتحة الحالب وتحديد موضعها أمرًا بالغ الأهمية في تنظير وجراحة المسالك البولية. ومع ذلك ، نظرًا لأن مظهر فتحة الحالب يختلف من فرد لآخر ، ومن وقت لآخر ، ومن عوامل مرضية مختلفة ، فمن الصعب في بعض الأحيان تحديد موقع فتحة الحالب وتحديد موقعها بدقة. من أجل التعرف تلقائيًا على أنواع مختلفة من فتحات الحالب في مقاطع الفيديو الجراحية ، تقترح هذه الورقة نظام اكتشاف وتتبع فتح الحالب القائم على التعلم العميق. يتكون الإطار بشكل أساسي من ثلاثة مكونات: جزء المعالجة المسبقة ، ونموذج كشف فتح الحالب ، ونموذج التتبع. بالنسبة لجزء المعالجة المسبقة ، تطبق هذه الورقة استراتيجيات زيادة البيانات التقليدية واستراتيجيات زيادة البيانات المحددة لزيادة تنوع عينات التدريب. يتم الحصول على نموذج الكشف عن فتح الحالب (مصقول- SSD) من خلال تحسين النموذج الكلاسيكي للكشف عن الطلقة الواحدة متعدد الصناديق (SSD) في مجال الكشف عن الأشياء. ثم تم دمج SSD المكرر مع خوارزمية التتبع CSRT لتشكيل نظام كشف وتتبع فتح الحالب. في هذا البحث ، يتم تدريب نموذج الكشف فقط باستخدام صور منظار القطع مع معلومات خلفية أكثر تعقيدًا ، ثم يتم اختباره باستخدام صور منظار الحالب. تظهر النتائج التجريبية أن النموذج الذي تم تدريبه باستخدام صور منظار القطع يمكن تطبيقه بنجاح على أنواع أخرى من صور تنظير المسالك البولية ، ومؤشرات التقييم كلها حوالي 0.9. قمنا أيضًا بتقييم نموذج الكشف المقترح في هذه الورقة على مجموعات بيانات فيديو منظار القطع وتنظير الحالب ، وأظهرت التجارب أن نموذج الكشف عن فتح الحالب المقترح يمكنه تحديد وتوطين فتحات الحالب في منظارين مختلفين في الوقت الفعلي في الفيديو. بالإضافة إلى ذلك ، في متواليات فيديو منظار القطع وتسلسلات فيديو تنظير الحالب ، لم نقم فقط بمقارنة تأثير نموذج الكشف والتتبع (Refined-SSD + CSRT) المقترح في هذا البحث مع تأثير نموذج الكشف الفردي ، ولكن أيضًا تم دمجه مع الكشف نموذج آخر تمت مقارنة تأثيرات خوارزميات التتبع الأربعة ، وأظهرت التجارب أن نموذج كشف وتتبع فتح الحالب المقترح في هذا البحث له أداء أفضل ويحقق متوسط سرعة اكتشاف يبلغ 20 مللي ثانية لكل إطار. لذلك ، يمكن لنموذج الكشف والتتبع تحديد موقع فتحة الحالب بدقة وفي الوقت الفعلي في مقاطع فيديو جراحة منظار المسالك ،