Natural Language Dialogue about Moving Objects in an Automatically Analyzed Traffic Scene

T h i s c o n t r i b u t i o n i s c o n c e r n e d w i t h n a t u r a l l a n g u a g e d i a l o g u e a b o u t s c e n e s w i t h m o v i n g o b j e c t s . Two s y s t e m s a r e c o n n e c t e d , a n a t u r a l l a n g u a g e d i a l o g u e s y s t e m o r i g i n a l l y c o n c e i v e d f o r s t a t i c s c e n e s and a n e m e r g i n g s c e n e a n a l y s i s s y s t e m f o r r e a l w o r l d T V f r a m e s e q u e n c e s . The l a t t e r p r o d u c e s t i m e d e p e n d e n t o b j e c t d e s c r i p t i o n s w h i c h s e r v e a s a r e f e r e n t i a l d a t a b a s e f o r i n q u i r i e s . The t i m e i n t e r v a l s r e l e v a n t f o r a n s w e r i n g t h e q u e s t i o n s a r e d e t e r m i n e d f r o m d o m a i n s p e c i f i c p a r a m e t e r s , t h e c o n t e x t o f t h e d i a l o g u e , t h e t e n s e o f t h e v e r b s and t i m e a d v e r b i a l s . F o r c h e c k i n g t h e c o r r e s p o n d e n c e b e t w e e n a v e r b a l l y s p e c i f i e d m o t i o n and a t r a j e c t o r y , p r e d i c a t e s a r e e v a l u a t e d w h i c h c a n b e d e d u c e d f r o m t h e v e r b ' s c a s e f r a m e .