HANDSCULPTAR-WEB

NATURAL INTERACTION FOR 3D MODELING IN AUGMENTED REALITY

Authors

DOI:

https://doi.org/10.5281/zenodo.19477063

Keywords:

Realidade Aumentada, Interatividade, Computação Gráfica, Reconhecimento de Gestos, MediaPipe, Three.js

Abstract

Abstract: This article presents the HandSculptAR-Web project, an innovative proposal that seeks to democratize digital modeling in augmented reality (AR) environments, making it accessible through web browsers without the need for specialized hardware. This is achieved through hand gestures tracked with MediaPipe Hands, integrated into the Three.js library, which allows the creation and rendering of 3D graphics in browsers. The system allows the manipulation of three-dimensional models using two different modes: object mode, which uses pinch, open, and spread gestures to perform rotation, translation, and scaling; and sculpting mode, which recognizes user operations in real time, such as pushing and stretching mesh vertices. The research aims to increase accessibility to creative tools in the field of computer graphics, exploring intuitive methods for human-computer interaction, with an emphasis on usability and pedagogical potential.

Keywords: Augmented Reality; Interactivity; Computer Graphics; Gesture Recognition; MediaPipe; Three.js.

Author Biography

Marlan Külberg, Universidade Estácio de Sá

Possui graduação em Tecnologia da Informação e Comunicação pelo Instituto Superior de Tecnologia em Ciências da Computação de Petrópolis (2008) e Mestrado em Sistemas e Computação pelo Instituto Militar de Engenharia (2011). Tem experiência na área de Ciência da Computação, com ênfase em Sistemas de Computação e Realidade Virtual. Desenvolveu Sistemas e dispositivos para treinamento e simulação no Laboratório Nacional de Computação Científica. Ministrou disciplinas diversas e orientou alunos durante aproximadamente cinco anos, na Faculdade de Educação Tecnológica do Estado Rio de Janeiro. Atualmente leciona, elabora planos nacionais de aula e ensino de disciplinas dos cursos de Análise de Sistemas, Ciência da Computação e Sistemas de Informação, além fazer parte da célula acadêmica e de trabalhar em projetos de extensão na Universidade Estácio de Sá - Campus Teresópolis, Petrópolis e Niterói.

References

AZUMA, R. T. A survey of augmented reality. Presence: Teleoperators and Virtual Environments, [S. l.], v. 6, n. 4, p. 355-385, 1997.

BILLINGHURST, M.; CLARKE, J.; LEE, G. A survey of augmented reality. Foundations and Trends in Human–Computer Interaction, [S. l.], v. 8, n. 2-3, p. 73-272, 2015.

BOWMAN, D. A. et al. 3D User Interfaces: Theory and Practice. Boston: Addison-Wesley, 2004.

FOLEY, J. D.; VAN DAM, A.; FEINER, S. K.; HUGHES, J. F. Computer Graphics: Principles and Practice. 2. ed. Reading: Addison-Wesley, 1995.

THREE.JS. three.js — JavaScript 3D library. [S. l.: s. n.], [202-?]. Disponível em: https://threejs.org. Acesso em: 19 set. 2025.

ZHANG, F. et al. MediaPipe Hands: On-device real-time hand tracking. arXiv preprint, [S. l.], jun. 2020. Disponível em: https://arxiv.org/abs/2006.10214. Acesso em: 19 set. 2025.

Downloads

Published

2026-04-12

How to Cite

Külberg, M. (2026). HANDSCULPTAR-WEB: NATURAL INTERACTION FOR 3D MODELING IN AUGMENTED REALITY. Duna: Revista Multidisciplinar De Inovação E Práticas De Ensino, 2(1), 03–12. https://doi.org/10.5281/zenodo.19477063

Issue

Vol. 2 No. 1 (2026): Inovação que Transforma: tecnologia, sustentabilidade e experiências de ensino

Section

Artigos

Categories

License

Copyright (c) 2026 Duna: Revista Multidisciplinar de Inovação e Práticas de Ensino

Creative Commons License

This work is licensed under a Creative Commons Attribution-NonCommercial 4.0 International License.

Copyright (c) 2025 Duna - Revista Multidisciplinar de Inovação e Práticas de Ensino.

Creative Commons License

Este trabalho está licenciado sob uma licença Creative Commons Attribution-NonCommercial 4.0 International License.

Este é um artigo publicado em acesso aberto sob a licença Creative Commons Atribuição 4.0 Internacional (CC-BY 4.0), que permite uso, distribuição e reprodução em qualquer meio, desde que o trabalho original seja devidamente citado.

Para mais informações sobre a licença, consulte: https://creativecommons.org/licenses/by/4.0/