Mediated reality systems introduce the possibility to alter users’ perception of the surrounding ... more Mediated reality systems introduce the possibility to alter users’ perception of the surrounding environment by adding or removing information. These particular innovative features made this technology attractive for several adjacent fields. However, despite their direct impact on the presentation of information, mediated reality systems are still poorly explored by information designers. Over the years, information design researchers have investigated and proposed tools and practices when planning information for different platforms and contexts. With respect to technical operations, visual instructions are very effective to convey information, and therefore a great opportunity for technology aided operations. This work establishes a dialogue between information design and mediated reality systems, and introduces some of the several concerns of this joint context. Based on correlated research, we identify general principles, challenges and opportunities for mediated reality applications, and for information designers willing to use them. Finally, we also introduce an early-stage system for technical operations as an opportunity to take further lessons and establish detailed recommendations.
Designing and implementing the interaction behavior for body tracking capable systems requires co... more Designing and implementing the interaction behavior for body tracking capable systems requires complex modeling of actions and extensive calibration. Being the most recent and successful device for robust interactive body tracking, Microsoft’s Kinect has enabled natural interaction by the use of consumer hardware, providing detailed and powerful information to designers and developers, but little tooling. To fulfill this lack of adequate tools for helping developers in the prototyping and implementation of such interfaces, we present Kina, a toolkit that makes the development not fully conditional to the existence of a sensor. By providing playback capabilities together with an online movement
database, it reduces the physical effort found while performing testing activities.
"Along with the popularization of new body tracking technologies such as Microsoft Kinect, and th... more "Along with the popularization of new body tracking technologies such as Microsoft Kinect, and the increasing individual initiatives in order to design solutions for such platforms, it is necessary to improve and to adapt all the framework of methods and processes for developing new applications for this context. Just like that, this paper proposes a direction towards the formalization of an agile methodology for developing new applications on the background of body interaction, suitable for modest innovation projects with short schedules and small teams. To achieve that, we executed an experiment during a graduate course in Informatics, due to its similarities to the start-up context. The participating students followed a four-step methodology comprehending the stages of requirements identification, ideas generation, prototyping, and evaluation. The experiment outcomes are described in a way to enlighten the methodology techniques. As a conclusion, the students provided an extremely positive feedback regarding the adoption of the proposed methodology during the development of body interaction applications. "
Mediated reality systems introduce the possibility to alter
users’ perception of the surrounding ... more Mediated reality systems introduce the possibility to alter users’ perception of the surrounding environment by adding or removing information. These particular innovative features have made this technology attractive for several adjacent fields. However, despite their direct impact on the presentation of information, mediated reality systems are still poorly explored by information designers. Regarding technical operations, visual instructions are very effective to convey information, and therefore a great opportunity for technology aided operations. This work establishes a dialogue between information design and mediated reality systems, and introduces some of the several concerns of this joint context. Based on correlated research, we identify general principles, challenges and opportunities for mediated reality applications, and for information designers willing to use them. Finally, we also describe the development of an experimental system for technical maintenance and training that makes use of mediated reality. The system was tested with users and the results serve as an opportunity to take further lessons and establish detailed recommendations.
-
Através da adição ou remoção de informações, sistemas de realidade mediada introduzem a possibilidade de alterar a percepção do usuário em relação ao ambiente ao seu redor, o que torna a tecnologia atrativa para diversas áreas de pesquisa relacionadas. Entretanto, apesar do seu impacto na apresentação de conteúdo, esta tecnologia ainda não foi propriamente explorada por designers da informação. No âmbito das operações técnicas, instruções visuais são bastante efetivas para transmitir informações, e por conseguinte uma ótima oportunidade para serem auxiliadas por esta tecnologia. Este trabalho estabelece um diálogo entre design da informação e sistemas de realidade mediada, e introduz diversas questões sobre o contexto comum. Baseado em pesquisas relacionadas, identificamos princípios gerais, desafios e oportunidades para aplicações de realidade mediada e para designers da informações que queiram usá-las. Por fim, é descrito o desenvolvimento de um sistema experimental para operações técnicas de manutenção e treinamento que faz uso de realidade mediada. O sistema foi testado com usuários e os resultados obtidos servem como oportunidade de explorar e estabelecer recomendações detalhadas para o trabalho com realidade mediada.
Resumo-O uso de FPGAs no desenvolvimento de sistemas de Realidade Aumentada apresenta-se oportuno... more Resumo-O uso de FPGAs no desenvolvimento de sistemas de Realidade Aumentada apresenta-se oportuno ao suprir a demanda por poder de processamento e mobilidade que estas aplicações possuem. Para registrar o mundo real e o virtual, algumas dessas aplicações utilizam marcadores fiduciais. Tais marcadores são identificados e suas posições obtidas pelo sistema, a fim de compor corretamente a mistura entre os dois mundos. Este trabalho apresenta um módulo implementado em FPGA para detecção de marcadores ID-based como parte de um framework embarcado de desenvolvimento de aplicações de Realidade Aumentada. Os resultados comprovaram que o tempo de execução do módulo implementadoé mais do que duas vezes menor do que a abordagem em software, para uma imagem de 320x240 pixels. Palavras-chave-realidade aumentada; sistemas embarcados; reconhecimento de padrões; I. INTRODUÇÃO Aplicações de Realidade Aumentada (RA) requerem bastante poder de processamento, tanto para renderizar os objetos virtuais na cena, quanto para registrar 1 o mundo virtual com o mundo real [1]. Este requisito se aliaà necessidade de mobilidade do sistema, a qual aumenta a sensação de imersão do usuário final. Uma solução para combinar estas duas característicasé o uso de dispositivos embarcados no desenvolvimento de sistemas de RA. O desenvolvimento do ARCam [2] [3], um framework embarcado para desenvolvimento de aplicações de RA, justifica-se devido ao fato dos FPGAs (Field Programmable Gate Arrays) mostraremse bastante eficazes e conseguirem satisfazer os requisitos listados anteriormente.
Mediated reality systems introduce the possibility to alter users’ perception of the surrounding ... more Mediated reality systems introduce the possibility to alter users’ perception of the surrounding environment by adding or removing information. These particular innovative features made this technology attractive for several adjacent fields. However, despite their direct impact on the presentation of information, mediated reality systems are still poorly explored by information designers. Over the years, information design researchers have investigated and proposed tools and practices when planning information for different platforms and contexts. With respect to technical operations, visual instructions are very effective to convey information, and therefore a great opportunity for technology aided operations. This work establishes a dialogue between information design and mediated reality systems, and introduces some of the several concerns of this joint context. Based on correlated research, we identify general principles, challenges and opportunities for mediated reality applications, and for information designers willing to use them. Finally, we also introduce an early-stage system for technical operations as an opportunity to take further lessons and establish detailed recommendations.
Designing and implementing the interaction behavior for body tracking capable systems requires co... more Designing and implementing the interaction behavior for body tracking capable systems requires complex modeling of actions and extensive calibration. Being the most recent and successful device for robust interactive body tracking, Microsoft’s Kinect has enabled natural interaction by the use of consumer hardware, providing detailed and powerful information to designers and developers, but little tooling. To fulfill this lack of adequate tools for helping developers in the prototyping and implementation of such interfaces, we present Kina, a toolkit that makes the development not fully conditional to the existence of a sensor. By providing playback capabilities together with an online movement
database, it reduces the physical effort found while performing testing activities.
"Along with the popularization of new body tracking technologies such as Microsoft Kinect, and th... more "Along with the popularization of new body tracking technologies such as Microsoft Kinect, and the increasing individual initiatives in order to design solutions for such platforms, it is necessary to improve and to adapt all the framework of methods and processes for developing new applications for this context. Just like that, this paper proposes a direction towards the formalization of an agile methodology for developing new applications on the background of body interaction, suitable for modest innovation projects with short schedules and small teams. To achieve that, we executed an experiment during a graduate course in Informatics, due to its similarities to the start-up context. The participating students followed a four-step methodology comprehending the stages of requirements identification, ideas generation, prototyping, and evaluation. The experiment outcomes are described in a way to enlighten the methodology techniques. As a conclusion, the students provided an extremely positive feedback regarding the adoption of the proposed methodology during the development of body interaction applications. "
Mediated reality systems introduce the possibility to alter
users’ perception of the surrounding ... more Mediated reality systems introduce the possibility to alter users’ perception of the surrounding environment by adding or removing information. These particular innovative features have made this technology attractive for several adjacent fields. However, despite their direct impact on the presentation of information, mediated reality systems are still poorly explored by information designers. Regarding technical operations, visual instructions are very effective to convey information, and therefore a great opportunity for technology aided operations. This work establishes a dialogue between information design and mediated reality systems, and introduces some of the several concerns of this joint context. Based on correlated research, we identify general principles, challenges and opportunities for mediated reality applications, and for information designers willing to use them. Finally, we also describe the development of an experimental system for technical maintenance and training that makes use of mediated reality. The system was tested with users and the results serve as an opportunity to take further lessons and establish detailed recommendations.
-
Através da adição ou remoção de informações, sistemas de realidade mediada introduzem a possibilidade de alterar a percepção do usuário em relação ao ambiente ao seu redor, o que torna a tecnologia atrativa para diversas áreas de pesquisa relacionadas. Entretanto, apesar do seu impacto na apresentação de conteúdo, esta tecnologia ainda não foi propriamente explorada por designers da informação. No âmbito das operações técnicas, instruções visuais são bastante efetivas para transmitir informações, e por conseguinte uma ótima oportunidade para serem auxiliadas por esta tecnologia. Este trabalho estabelece um diálogo entre design da informação e sistemas de realidade mediada, e introduz diversas questões sobre o contexto comum. Baseado em pesquisas relacionadas, identificamos princípios gerais, desafios e oportunidades para aplicações de realidade mediada e para designers da informações que queiram usá-las. Por fim, é descrito o desenvolvimento de um sistema experimental para operações técnicas de manutenção e treinamento que faz uso de realidade mediada. O sistema foi testado com usuários e os resultados obtidos servem como oportunidade de explorar e estabelecer recomendações detalhadas para o trabalho com realidade mediada.
Resumo-O uso de FPGAs no desenvolvimento de sistemas de Realidade Aumentada apresenta-se oportuno... more Resumo-O uso de FPGAs no desenvolvimento de sistemas de Realidade Aumentada apresenta-se oportuno ao suprir a demanda por poder de processamento e mobilidade que estas aplicações possuem. Para registrar o mundo real e o virtual, algumas dessas aplicações utilizam marcadores fiduciais. Tais marcadores são identificados e suas posições obtidas pelo sistema, a fim de compor corretamente a mistura entre os dois mundos. Este trabalho apresenta um módulo implementado em FPGA para detecção de marcadores ID-based como parte de um framework embarcado de desenvolvimento de aplicações de Realidade Aumentada. Os resultados comprovaram que o tempo de execução do módulo implementadoé mais do que duas vezes menor do que a abordagem em software, para uma imagem de 320x240 pixels. Palavras-chave-realidade aumentada; sistemas embarcados; reconhecimento de padrões; I. INTRODUÇÃO Aplicações de Realidade Aumentada (RA) requerem bastante poder de processamento, tanto para renderizar os objetos virtuais na cena, quanto para registrar 1 o mundo virtual com o mundo real [1]. Este requisito se aliaà necessidade de mobilidade do sistema, a qual aumenta a sensação de imersão do usuário final. Uma solução para combinar estas duas característicasé o uso de dispositivos embarcados no desenvolvimento de sistemas de RA. O desenvolvimento do ARCam [2] [3], um framework embarcado para desenvolvimento de aplicações de RA, justifica-se devido ao fato dos FPGAs (Field Programmable Gate Arrays) mostraremse bastante eficazes e conseguirem satisfazer os requisitos listados anteriormente.
Uploads
Papers by Bernardo Reis
database, it reduces the physical effort found while performing testing activities.
users’ perception of the surrounding environment by adding
or removing information. These particular innovative
features have made this technology attractive for several
adjacent fields. However, despite their direct impact on the
presentation of information, mediated reality systems are
still poorly explored by information designers. Regarding
technical operations, visual instructions are very effective to
convey information, and therefore a great opportunity for
technology aided operations. This work establishes a
dialogue between information design and mediated reality
systems, and introduces some of the several concerns of this
joint context. Based on correlated research, we identify
general principles, challenges and opportunities for
mediated reality applications, and for information designers
willing to use them. Finally, we also describe the
development of an experimental system for technical
maintenance and training that makes use of mediated
reality. The system was tested with users and the results
serve as an opportunity to take further lessons and establish
detailed recommendations.
-
Através da adição ou remoção de informações, sistemas de
realidade mediada introduzem a possibilidade de alterar a
percepção do usuário em relação ao ambiente ao seu redor,
o que torna a tecnologia atrativa para diversas áreas de
pesquisa relacionadas. Entretanto, apesar do seu impacto na
apresentação de conteúdo, esta tecnologia ainda não foi
propriamente explorada por designers da informação. No
âmbito das operações técnicas, instruções visuais são
bastante efetivas para transmitir informações, e por
conseguinte uma ótima oportunidade para serem auxiliadas
por esta tecnologia. Este trabalho estabelece um diálogo
entre design da informação e sistemas de realidade
mediada, e introduz diversas questões sobre o contexto
comum. Baseado em pesquisas relacionadas, identificamos
princípios gerais, desafios e oportunidades para aplicações
de realidade mediada e para designers da informações que
queiram usá-las. Por fim, é descrito o desenvolvimento de
um sistema experimental para operações técnicas de
manutenção e treinamento que faz uso de realidade
mediada. O sistema foi testado com usuários e os resultados
obtidos servem como oportunidade de explorar e
estabelecer recomendações detalhadas para o trabalho com
realidade mediada.
database, it reduces the physical effort found while performing testing activities.
users’ perception of the surrounding environment by adding
or removing information. These particular innovative
features have made this technology attractive for several
adjacent fields. However, despite their direct impact on the
presentation of information, mediated reality systems are
still poorly explored by information designers. Regarding
technical operations, visual instructions are very effective to
convey information, and therefore a great opportunity for
technology aided operations. This work establishes a
dialogue between information design and mediated reality
systems, and introduces some of the several concerns of this
joint context. Based on correlated research, we identify
general principles, challenges and opportunities for
mediated reality applications, and for information designers
willing to use them. Finally, we also describe the
development of an experimental system for technical
maintenance and training that makes use of mediated
reality. The system was tested with users and the results
serve as an opportunity to take further lessons and establish
detailed recommendations.
-
Através da adição ou remoção de informações, sistemas de
realidade mediada introduzem a possibilidade de alterar a
percepção do usuário em relação ao ambiente ao seu redor,
o que torna a tecnologia atrativa para diversas áreas de
pesquisa relacionadas. Entretanto, apesar do seu impacto na
apresentação de conteúdo, esta tecnologia ainda não foi
propriamente explorada por designers da informação. No
âmbito das operações técnicas, instruções visuais são
bastante efetivas para transmitir informações, e por
conseguinte uma ótima oportunidade para serem auxiliadas
por esta tecnologia. Este trabalho estabelece um diálogo
entre design da informação e sistemas de realidade
mediada, e introduz diversas questões sobre o contexto
comum. Baseado em pesquisas relacionadas, identificamos
princípios gerais, desafios e oportunidades para aplicações
de realidade mediada e para designers da informações que
queiram usá-las. Por fim, é descrito o desenvolvimento de
um sistema experimental para operações técnicas de
manutenção e treinamento que faz uso de realidade
mediada. O sistema foi testado com usuários e os resultados
obtidos servem como oportunidade de explorar e
estabelecer recomendações detalhadas para o trabalho com
realidade mediada.