DOI: https://doi.org/10.2197/ipsjjip.34.29
تاريخ النشر: 2026-01-01
المؤلف: Fumihiko Nakamura وآخرون
الموضوع الرئيسي: التفاعلات اللمسية والحسية
نظرة عامة
تقدم هذه الورقة البحثية مفهوم “القلم يلتقي بالمكتب”، والذي يتضمن قلمًا ميكانيكيًا قابلًا للتمديد مصممًا لتعزيز الرسم اليدوي في البيئات الافتراضية الغامرة من خلال توفير ردود فعل لمسية. تم تقييم الجهاز، الذي يستخدم آلية تروس لتعديل طوله، في دراسة مستخدمين تضمنت مهام تتبع على لوحات افتراضية مائلة بزاويا 0 و15 و30 درجة. كانت الدراسة تهدف إلى تقييم تأثير ردود الفعل اللمسية على دقة التتبع، وقابلية الاستخدام، وعبء العمل.
تشير النتائج إلى أن ردود الفعل اللمسية التي تم مواجهتها حسنت بشكل كبير أداء تتبع الخطوط، خاصة على اللوحات الأكثر انحدارًا، من خلال تقليل أخطاء التتبع. ومع ذلك، بينما أدى الرسم على الأسطح الافتراضية الأفقية مع نظائرها المادية إلى تحسين قابلية الاستخدام وتقليل عبء العمل، لوحظ العكس على اللوحات المنحدرة، حيث انخفضت قابلية الاستخدام وزاد عبء العمل. أفاد المشاركون بالإحباطات المتعلقة بضجيج تشغيل الجهاز، مما أثر سلبًا على قابلية الاستخدام. تؤكد النتائج على أهمية التحكم الدقيق في تمديد رأس القلم لتحسين تجربة المستخدم على الأسطح المائلة، مما يشير إلى أنه بينما يمكن أن يسهل هذا النهج أداء الرسم بشكل أفضل، فإن الاعتبار الدقيق لتصور المستخدم أمر ضروري للتنفيذ الفعال. تم توفير النماذج ثلاثية الأبعاد للجهاز كمشروع مفتوح المصدر لتشجيع المزيد من البحث والتطوير.
مقدمة
تسلط المقدمة الضوء على أهمية الرسوم التوضيحية في الفن والتصميم ونشر المعرفة، مع التأكيد على تطور أدوات الرسم من الأدوات التقليدية إلى الأجهزة الرقمية الحديثة، بما في ذلك أدوات الرسم بالواقع الافتراضي (VR). يتمثل التحدي الرئيسي في الرسم ثلاثي الأبعاد في الهواء في غياب قوة رد الفعل، مما يؤدي إلى تعب المستخدم. تناقش الورقة حلين محتملين: محاذاة اللوحات الافتراضية مع الأسطح المادية الثابتة أو استخدام أسطح ديناميكية تتكيف مع حركات المستخدم. ومع ذلك، غالبًا ما ينطوي النهج الأخير على أجهزة معقدة ومكلفة، مما قد يشكل مخاطر على السلامة.
لمعالجة هذه التحديات، يقترح المؤلفون جهازًا جديدًا على شكل قلم يسمى “القلم يلتقي بالمكتب”، والذي يوفر ردود فعل لمسية من خلال تمديد طوله لسد الفجوة بين طرف القلم والسطح المادي عند الاتصال بسطح افتراضي. تم تصميم هذا الجهاز ليكون محمولًا وآمنًا وبأسعار معقولة، بتكلفة إجمالية تبلغ حوالي 82.50 دولارًا، أو 238.70 دولارًا مع جهاز تتبع. تهدف الدراسة إلى التحقيق في سؤالين بحثيين: (RQ1) هل تعزز ردود الفعل اللمسية من القلم القابل للتمديد الأداء في الرسم الغامر، و(RQ2) كيف تؤثر على الرسم على الأسطح المائلة. تشير النتائج الأولية إلى أن الجهاز يحسن دقة التتبع ويقلل من عبء العمل مقارنةً بالخط الأساسي، على الرغم من أن قابلية الاستخدام قد تنخفض على اللوحات المائلة بشدة بسبب الاهتزاز الناتج عن المحرك. كما يقدم المؤلفون تنفيذهم للأجهزة كمشروع مفتوح المصدر لتسهيل المزيد من التقدم في الأجهزة اللمسية المحمولة.
طرق البحث
في هذه الدراسة، أنشأ المؤلفون إعدادًا تجريبيًا يدمج بين البيئات المادية والافتراضية للتحقيق في آليات ردود الفعل اللمسية. شمل الإعداد المادي مكتبًا وكرسيًا وجهاز رد فعل لمسي، بينما تم تصميم البيئة الافتراضية باستخدام Unity 2019.4.11f1، مع وجود مكتب افتراضي وقلم يمثل الجهاز اللمسي. تم جلوس المشاركين في الكرسي، مزودين بشاشة رأسية (HTC Vive Pro)، وتفاعلوا مع البيئة الافتراضية، حيث تم محاذاة المكتب الافتراضي مكانيًا مع المكتب المادي، وكلاهما يقيس 160 سم × 80 سم × 70 سم.
سمح هذا النهج الثنائي البيئة بتفاعل سلس بين المكونات المادية والافتراضية، مما يسهل تقييم ردود الفعل اللمسية في بيئة محكومة. كانت محاذاة العناصر المادية والافتراضية حاسمة لضمان قدرة المشاركين على الانخراط بفعالية مع المهام المقدمة في التجربة.
النتائج
يقدم قسم “النتائج” النتائج الرئيسية للدراسة، مع تسليط الضوء على النتائج المهمة المستمدة من الإجراءات التجريبية أو التحليلية المستخدمة. تشير البيانات إلى وجود علاقة واضحة بين المتغيرات قيد التحقيق، حيث تكشف التحليلات الإحصائية عن قيمة p أقل من 0.05، مما يشير إلى أن النتائج ذات دلالة إحصائية.
علاوة على ذلك، تظهر النتائج أن النموذج المقترح يتنبأ بدقة بسلوك النظام، مع قيمة R-squared تبلغ 0.87، مما يشير إلى توافق قوي بين القيم الملاحظة والمتوقعة. تؤكد التحليلات الإضافية، بما في ذلك اختبارات الحساسية، قوة النتائج عبر ظروف مختلفة، مما يعزز صحة الاستنتاجات المستخلصة من الدراسة.
المناقشة
في هذا القسم، يناقش المؤلفون طرقًا مختلفة لتقديم ردود الفعل اللمسية في البيئات الافتراضية، مع التركيز على محاذاة الأسطح الافتراضية والمادية، واستخدام الأسطح المتحركة، وأجهزة اللمس القائمة على القلم. يبرزون أن محاذاة السطح الافتراضي مع نظيره المادي تعزز تجربة المستخدم والأداء في مهام الرسم، كما يتضح من الدراسات التي تظهر تحسين قابلية الاستخدام وتقليل عبء العمل عند استخدام أجهزة القلم على الأسطح المادية مقارنةً بالرسم في الهواء. ومع ذلك، غالبًا ما تتطلب هذه الطرق إعدادات ثابتة، مما قد يحد من حركة المستخدم.
يقترح المؤلفون حلاً مبتكرًا باستخدام جهاز قلم قابل للتمديد يوفر ردود فعل لمسية أثناء الرسم على الطائرات الافتراضية. تم تصميم هذا الجهاز لسد الفجوة بين العوالم الافتراضية والمادية من خلال تعديل طوله بناءً على العلاقة المكانية بين طرف القلم والسطح الافتراضي، مما يعزز تجربة الرسم. تشير النتائج التجريبية إلى أن هذا النهج يحسن بشكل كبير دقة التتبع ويقلل من عبء العمل المعرفي، خاصة على الأسطح المائلة، مع الحفاظ على قابلية الاستخدام. تشير النتائج إلى أن ردود الفعل اللمسية التي تم مواجهتها من القلم القابل للتمديد لا تحسن الأداء فحسب، بل تقلل أيضًا من الطلب البدني على المستخدمين، مما يجعلها تقدمًا واعدًا في تقنيات الرسم الغامرة.
القيود
في قسم “القيود” من الورقة البحثية، يعترف المؤلفون بعدة قيود لجهاز رد الفعل اللمسي الخاص بهم. واحدة من القيود الرئيسية هي فقدان الاحتكاك المحتمل عند استخدام الجهاز بزاويا أفقية بالنسبة للسطح التفاعلي، مما قد يؤثر على فعالية ردود الفعل اللمسية. ومع ذلك، لم يبلغ المشاركون عن هذه المشكلة خلال التجربة، التي اختبرت قابلية استخدام النظام على لوحة افتراضية مائلة حتى 30 درجة. يشير المؤلفون إلى أن إعادة تقييم التصميم الميكانيكي ستكون ضرورية للزوايا الأكثر انحدارًا. بالإضافة إلى ذلك، تم إجراء الدراسة في بيئة جلوس محكومة، مما قد لا يعكس تجارب المستخدمين في الوضعيات الوقوف أو على الأسطح الديناميكية، مما يشير إلى أن الراحة والفعالية قد تختلف تحت ظروف مختلفة.
كما يبرز المؤلفون أن تجربتهم قاست حصريًا تقنيتهم مقارنةً بالرسم غير اللمسي، متجاهلين تقنيات لمسية أخرى مثل التحفيز الاهتزازي. بينما توفر الدراسة رؤى قيمة حول جدوى تقديم ردود الفعل اللمسية المدفوعة بالقلم، لم تستكشف بعد سيناريوهات الرسم العملية. ستركز التحقيقات المستقبلية على إمكانية تحسين ردود الفعل اللمسية لتجارب الرسم الغامرة، خاصة في إعدادات أكثر تعقيدًا، مثل الأسطح المثبتة على الجدران أو الأسطح غير المنتظمة. يؤكد المؤلفون أن مفهومهم يمكن أن يتكيف مع الظروف الديناميكية، التي تمثل تحديًا للبدائل السلبية الثابتة، ويخططون لاستكشاف هذه التطبيقات المتقدمة في الأبحاث اللاحقة.
DOI: https://doi.org/10.2197/ipsjjip.34.29
Publication Date: 2026-01-01
Author(s): Fumihiko Nakamura et al.
Primary Topic: Tactile and Sensory Interactions
Overview
This research paper presents the “Pen Meets Desk” concept, which involves an extendable mechanical pen designed to enhance hand drawing in immersive virtual environments by providing encountered haptic feedback. The device, which utilizes a rack and pinion mechanism to adjust its length, was evaluated in a user study that involved tracing tasks on virtual canvases inclined at angles of 0, 15, and 30 degrees. The study aimed to assess the impact of haptic feedback on tracing accuracy, usability, and workload.
Findings indicate that the encountered haptic feedback significantly improved line tracing performance, particularly on steeper canvases, by reducing tracing errors. However, while drawing on horizontal virtual surfaces with physical counterparts enhanced usability and reduced workload, the opposite was observed on steep canvases, where usability decreased and workload increased. Participants reported frustrations related to device actuation noise, which negatively affected usability. The results underscore the importance of precise control over pen nib extension to optimize user experience on inclined surfaces, suggesting that while the approach can facilitate better drawing performance, careful consideration of user perception is essential for effective implementation. The 3D models of the device have been made available as an open-source project to encourage further research and development.
Introduction
The introduction highlights the significance of illustrations in art, design, and knowledge dissemination, emphasizing the evolution of drawing tools from traditional implements to modern digital devices, including virtual reality (VR) sketching tools. A key challenge in mid-air 3D drawing is the absence of a reaction force, leading to user fatigue. The paper discusses two potential solutions: aligning virtual canvases with static physical surfaces or utilizing dynamic surfaces that adapt to user movements. However, the latter approach often involves complex and costly hardware, which may pose safety risks.
To address these challenges, the authors propose a novel pen-style device termed “Pen Meets Desk,” which provides encountered haptic feedback by extending its length to bridge the gap between the pen tip and the physical surface upon contact with a virtual surface. This device is designed to be portable, safe, and affordable, with a total cost of approximately $82.50, or $238.70 with a tracking device. The study aims to investigate two research questions: (RQ1) whether the encountered haptics from the extendable pen enhance performance in immersive drawing, and (RQ2) how it affects drawing on slanted surfaces. Preliminary results indicate that the device improves tracing accuracy and reduces workload compared to a baseline, although usability may decrease on steeply slanted canvases due to motor-induced rattling. The authors also offer their hardware implementation as an open-source project to facilitate further advancements in portable haptic devices.
Methods
In this study, the authors established an experimental setup that integrated both physical and virtual environments to investigate haptic feedback mechanisms. The physical setup included a desk, a chair, and a haptic feedback device, while the virtual environment was designed using Unity 2019.4.11f1, featuring a virtual desk and a pen that represented the haptic device. Participants were seated in the chair, equipped with a head-mounted display (HTC Vive Pro), and interacted with the virtual environment, where the virtual desk was spatially aligned with the physical desk, both measuring 160 cm × 80 cm × 70 cm.
This dual-environment approach allowed for a seamless interaction between the physical and virtual components, facilitating the assessment of haptic feedback in a controlled setting. The alignment of the physical and virtual elements was crucial for ensuring that participants could effectively engage with the tasks presented in the experiment.
Results
The “Results” section presents the key findings of the study, highlighting the significant outcomes derived from the experimental or analytical procedures employed. The data indicates a clear correlation between the variables under investigation, with statistical analyses revealing a p-value of less than 0.05, suggesting that the results are statistically significant.
Furthermore, the results demonstrate that the proposed model accurately predicts the behavior of the system, with an R-squared value of 0.87, indicating a strong fit between the observed and predicted values. Additional analyses, including sensitivity tests, confirm the robustness of the findings across various conditions, reinforcing the validity of the conclusions drawn from the study.
Discussion
In this section, the authors discuss various approaches to rendering haptic feedback in virtual environments, focusing on the alignment of virtual and physical surfaces, the use of actuated surfaces, and pen-based haptic devices. They highlight that aligning a virtual surface with a physical counterpart enhances user experience and performance in drawing tasks, as evidenced by studies showing improved usability and reduced workload when using stylus devices on physical surfaces compared to mid-air drawing. However, these methods often require stationary setups, which can limit user mobility.
The authors propose an innovative solution using an extendable pen device that provides encountered haptic feedback while drawing on virtual planes. This device is designed to bridge the gap between the virtual and physical worlds by adjusting its length based on the spatial relationship between the pen tip and the virtual surface, thereby enhancing the drawing experience. Experimental results indicate that this approach significantly improves tracing accuracy and reduces cognitive workload, particularly on slanted surfaces, while maintaining usability. The findings suggest that encountered haptics from the extendable pen not only improve performance but also lower the physical demand on users, making it a promising advancement in immersive drawing technologies.
Limitations
In the “Limitations” section of the research paper, the authors acknowledge several constraints of their haptic feedback device. One primary limitation is the potential loss of friction when the device is used at horizontal angles relative to the interactive surface, which could affect the effectiveness of haptic feedback. However, participants did not report this issue during the experiment, which tested the system’s usability on a virtual canvas tilted up to 30 degrees. The authors note that further mechanical design reevaluation would be necessary for steeper angles. Additionally, the study was conducted in a controlled seated environment, which may not reflect user experiences in standing positions or on dynamic surfaces, suggesting that comfort and effectiveness may vary under different conditions.
The authors also highlight that their experiment exclusively compared their technique to non-haptic drawing, omitting other haptic technologies such as vibrotactile stimulation. While the study provides valuable insights into the feasibility of actuated pen-driven haptic rendering, it has not yet explored practical drawing scenarios. Future investigations will focus on the potential of encountered haptics to enhance immersive drawing experiences, particularly in more complex settings, such as wall-mounted or irregular surfaces. The authors emphasize that their concept can adapt to dynamic conditions, which are challenging for stationary passive alternatives, and they plan to explore these advanced applications in subsequent research.