معايرة الكاميرا والتحقق في بعدين
أسقِط كل مجسم ثلاثي الأبعاد على صورة كل كاميرا معايَرة، كي يحرّر المُوسِّمون في ثلاثة أبعاد ويتحققوا في بعدين. ولماذا لا تكون لتوسيم الأبعاد الثلاثة من دون ذلك حلقة تغذية راجعة.
ارسم مربعًا ثلاثي الأبعاد في السحابة النقطية وشاهده يقع على الجسم في الصورة الفوتوغرافية التي رأته. تُسقط معايرة الكاميرا المقدَّمة لكل عنصر كل مجسم على كل منظور كاميرا، وتُعاد رسمه كلما تحرك المربع.
annotation_schemes:
- annotation_type: spatial_annotation
name: objects
description: "Label each object in the point cloud"
source_field: point_cloud
calibration_field: calibration # the item field holding the rig
tools: [cuboid_3d]
labels:
- {name: car, color: "#FF6B6B"}مثال قابل للتشغيل: examples/spatial/kitti-cuboids/.
لماذا يهم هذا أكثر مما يبدو
السيارة على بعد 40 مترًا بضع عشرات من عوائد الليدار. وأسئلة مثل هل المربع محكم، وهل طوله صحيح، وهل دُوِّر دورانًا صحيحًا يكاد يستحيل الجواب عنها من السحابة وحدها، وهي بديهية في صورة الكاميرا.
لذلك يحرّر المُوسِّم في ثلاثة أبعاد ويتحقق في بعدين. وتعرض اللوحات تحت نافذة العرض منظور كل كاميرا مع المربعات مسقطة عليه.
ومن دون ذلك، لا تكون لتوسيم الأبعاد الثلاثة حلقة تغذية راجعة. فالمربع الذي يبدو صحيحًا من كاميرا المدار قد يبتعد أمتارًا على امتداد محور الرؤية، ولا يقول شيء في العرض ثلاثي الأبعاد ذلك.
الأطر هي موضع الخطأ
المعايرة سلسلة من التحويلات، وكل حلقة فيها فرصة لخطأ صامت:
- الإطار المرجعي مقابل إطار الكاميرا. استخدام تحويل كاميرا بعينها حيث يُراد الإطار المرجعي المصحَّح يزيح كل مربع بمقدار خط الأساس المجسِّم لتلك الكاميرا. بضعة سنتيمترات، منهجية، ويسهل أن تُحمل على أنها إهمال من المُوسِّمين.
- أعراف الموقع. الموقع ثلاثي الأبعاد في KITTI هو منتصف الوجه السفلي للمربع. وقراءته مركزًا تضع كل جسم تحت الأرض بمقدار نصف ارتفاعه.
- ترتيب الأبعاد وتعيين المحاور. أبعاد KITTI هي
h w l، وفي إطار المربع نفسه يمتد الطول على X والارتفاع على Y نحو الأسفل والعرض على Z. وافتراض أن الطول يمتد على محور الأمام للكاميرا، وهو ما يُقرأ خيارًا طبيعيًّا، ينتج مربعًا مدوَّرًا بمقدار 90 درجة بالضبط.
الحالة الأخيرة هي الأكثر إفادة: فاختبار الذهاب والإياب لا يكتشفها، لأن التحويل العكسي يفترض الافتراض نفسه فيتفق الاثنان. ولا يكتشفها إلا المقارنة بصيغة الزوايا في حزمة التطوير نفسها، ويوجد اختبار لهذا بالتحديد.