Cognitive 3D modelling of city centers

Het doel van dit project bestaat erin om een gedetailleerd model van een paar straten of een stadscentrum op te stellen. Tot hier toe gebeurde dit meestal bottom-up, ttz. enkel gebruik makend van laag niv eau beeldinformatie, met name door het zoeken van correspondenties tussen overeenkomstige pixels en het terugprojecteren hiervan in 3D. Wij zijn daarentegen van mening dat een kwalitatief hoogstaand 3D model enkel bekomen kan worden door hogere niveau kennis over de te reconstrueren scene mee in rekening te brengen. Dit zal gebeuren door:
a) Het opstellen van een cognitief model: De ontwikkeling van classificatoren voor algemene gezichtspunten voor de meest voorkomende voorwerpsklassen in typische straatscènes (auto's, voetgangers, deuren, ramen, etc.). De detectie van instanties van deze voorwerpsklassen geeft ons een eerste interpretatie of cognitief model van de beeldinhoud.
b) Het opstellen van een 3D model: Het op punt stellen van een nauwkeurig systeem voor 3D modellering, waarbij ook temporele informatie geïntegreerd wordt. Dit wordt toegepast op die stukken van de scene die door het cognitief model als interessant aangeduid werden (bv. huizen, geen auto's). Hierbij kunnen sommige parameters aangepast worden op basis van a priori kennis van de voorwerpsklasse.
c) Terugkoppeling van het 3D model naar het cognitieve model: Gebruik makend van de bekomen diepte-informatie kan het cognitief model verder verfijnd worden.