خرائط العمق
اقرأ عمق PNG وTIFF وNPY وPFM وEXR بعمق 16 بت مع نوافذ بالمئينات وخرائط ألوان وقراءة بالأمتار تحت المؤشر وإسقاط إلى العارض ثلاثي الأبعاد.
يعرض Potato خرائط العمق عرضًا مقروءًا، ويُبلغ عن المسافة تحت المؤشر بالأمتار، ويحوّل خريطة العمق — عند توفر المعاملات الداخلية للكاميرا — إلى سحابة نقطية يمكنك وضع مربعات ثلاثية الأبعاد عليها. والعمق هو الطريقة التي تقدّم بها مقدِّرات العين الواحدة وأجهزة التجسيم ومستشعرات RGB-D الأبعاد الثلاثة، وهو الصيغة التي تشحنها معظم مجموعات بيانات الروبوتات إلى جانب فيديوهاتها.
مثال قابل للتشغيل: examples/spatial/depth-eval/.
ثلاثة أمور تجعل العمق مختلفًا عن الصورة
خريطة العمق المفتوحة كصورة مستطيل أسود. ولو لم تكن كذلك، لظللت تنظر إلى ألوان دون أي فكرة عن المسافة التي يعنيها أي منها.
الملف لا يعرف وحدته. مليمترات في RealSense وAzure Kinect وNYU-Depth، و1/256 متر في معيار إكمال KITTI، وأمتار لأي شيء كُتب من مصفوفة أعداد عشرية. وdepth_scale هو الأمتار لكل وحدة مخزَّنة وقيمته الافتراضية 0.001. والخطأ فيه صامت، لأن النافذة تعيد التحجيم وتبقى الصورة تبدو واحدة، وهذا بالضبط سبب وجود قراءة الأمتار.
الصفر ليس مسافة. إنه رمز «لا عائد» شبه العام. ومقروءًا على أنه عمق يرسم جدارًا ساطعًا عبر كل ثقب في تغطية المستشعر. ويحمل Potato اللاقياسات على أنها NaN ويرسمها بالأرجواني، وهو لون ليس في أي من خرائط الألوان، فلا يمكن أن يُلتبس ثقب بعمق قريب أو بعيد. ويذكر سطر المعلومات أي نسبة من الخريطة ثقوب. فمطابقة التجسيم تحتاج إلى نسيج لإيجاد التناظرات، فجهاز يواجه جدارًا خاليًا لا يعيد عمقًا في معظم الإطار، والمُوسِّم الذي لا يرى أي البكسلات مفقودة سيقرؤها هندسةً.
النطاق المثير للاهتمام ليس النطاق الكامل إلا نادرًا. تكون نافذة القريب/البعيد افتراضيًّا عند المئين الثاني والمئين الثامن والتسعين للبكسلات الصالحة.
الإعداد
instance_display:
fields:
- key: depth
type: depth_map
label: "Depth"الصيغ المدعومة: PNG بعمق 16 بت، وTIFF بعمق 16 بت، وNPY وNPZ، وPFM، وEXR.
النوافذ قابلة للقياس لا تجميلية
نافذة المئينات هي الجزء الجوهري، ويمكن التعبير عن أثرها برقم. فمسح بعمق 16 بت يقع محتواه بين 1200 و1800 يُعرض بفصل 4 مستويات رمادية من 255 تحت تحويل ساذج إلى 8 بت، وبفصل 254 تحت نافذة المئينات. وينطبق الأمر نفسه على TIFF العلمي عمومًا. راجع استيعاب الوسائط.
الإسقاط
مع توفر المعاملات الداخلية، تُسقَط خريطة العمق إلى العارض ثلاثي الأبعاد نفسه الذي يستخدمه سطح السحب النقطية، فتعمل أدوات المجسمات نفسها عليها. وهذا ما يجعل مجموعة بيانات RGB-D قابلة للتوسيم في ثلاثة أبعاد دون خطوة تحويل منفصلة.