Enhanced vision-language navigation by using scene recognition auxiliary task

dc.contributor.advisorSoto Arriaza, Álvaro Marcelo
dc.contributor.authorManterola Valenzuela, Raimundo
dc.contributor.otherPontificia Universidad Católica de Chile. Escuela de Ingeniería
dc.date.accessioned2021-01-21T14:58:52Z
dc.date.available2021-01-21T14:58:52Z
dc.date.issued2021
dc.descriptionTesis (Master of Science in Engineering)--Pontificia Universidad Católica de Chile, 2021
dc.description.abstractVision-Language Navigation es una tarea cognitiva altamente exigente que abordada desde una perspectiva de Machine Learning, implica entrenar a un agente para navegar por diferentes escenarios siguiendo instrucciones en lenguaje natural. Esta tarea nos acerca un paso más a tener interacciones fluidas entre humanos y robots. Sin embargo, todavía existe una gran brecha entre el desempeño humano y los modelos actuales de Vision-Language Navigation. Las instrucciones suelen describir caminos que hacen referencia a lugares, por ejemplo, girar a la derecha al final de la cocina. Esto hace que sea necesario comprender la semántica de las diferentes habitaciones para lograr una correcta navegación. Sin embargo, esta comprensión por lo general no se supervisa directamente y se deja para ser aprendida de manera implícita. En este trabajo, proponemos una tarea auxiliar en la que los agentes deben clasificar los diferentes tipos de habitaciones por las que navegan, y demostramos empíricamente que al agregar esta tarea, los modelos aprenden a navegar mejor y de manera más eficiente. Esto se ve reflejado en un aumento en la mayoría de las métricas de Vision-Language Navigation tanto para escenarios vistos como no vistos durante la fase de entrenamiento.
dc.format.extentxii, 46 páginas
dc.identifier.doi10.7764/tesisUC/ING/51219
dc.identifier.urihttps://doi.org/10.7764/tesisUC/ING/51219
dc.identifier.urihttps://repositorio.uc.cl/handle/11534/51219
dc.language.isoen
dc.nota.accesoContenido completo
dc.rightsacceso abierto
dc.subject.ddc004.019
dc.subject.deweyCiencias de la computaciónes_ES
dc.subject.otherInteracción hombre-computadores_ES
dc.subject.otherAprendizaje de máquinaes_ES
dc.subject.otherLenguajes de programación (Computadores electrónicos) - Semánticaes_ES
dc.titleEnhanced vision-language navigation by using scene recognition auxiliary taskes_ES
dc.typetesis de maestría
sipa.codpersvinculados73678
sipa.codpersvinculados232618
Files
Original bundle
Now showing 1 - 1 of 1
Loading...
Thumbnail Image
Name:
TESIS_RManterola_Firma Final.pdf
Size:
11.39 MB
Format:
Adobe Portable Document Format
Description:
License bundle
Now showing 1 - 1 of 1
Loading...
Thumbnail Image
Name:
license.txt
Size:
1.98 KB
Format:
Item-specific license agreed upon to submission
Description: