Oculus Quest ( cả phiên bản gốc và phiên bản thứ hai^{(second model)} ) đều có một lịch sử thú vị về các tính năng được thêm vào rất lâu sau khi phần cứng ra mắt. Nổi tiếng nhất trong số này là Oculus Link , biến Nhiệm vụ^(Quest) thành Oculus Rift . Tính năng này thành công đến mức Oculus quyết định ngừng cung cấp tất cả tai nghe của họ trừ Quest . 

Tính năng theo dõi bàn tay^(Hand) chưa tạo nên sự nổi bật như Oculus Link đã làm, nhưng nó vẫn là một tính năng tuyệt vời với nhiều tiềm năng. Với tính năng theo dõi bằng tay, bạn hoàn toàn không cần bộ điều khiển. Bàn tay của chính bạn được số hóa vào thế giới VR! 

Nếu bạn có Nhiệm vụ^(Quest) hoặc đang nghĩ đến việc mua một Nhiệm vụ, bạn nên biết cách theo dõi bàn tay hoạt động và những gì nó có thể mang lại cho trải nghiệm VR.

Cách Quest Theo dõi Thế giới

Oculus Quest sử dụng một cách tiếp cận sáng tạo hướng tới theo dõi chuyển động thường được gọi là theo dõi “từ trong ra ngoài”, rất khác với cách theo dõi chuyển động hoạt động trong quá khứ. 

Khi những chiếc tai nghe thế hệ tiếp theo đầu tiên được phát hành vào giữa những năm 2010, chúng đã sử dụng một hoặc nhiều camera theo dõi bên ngoài. Đèn theo dõi chuyển động đặc biệt trên tai nghe cho camera biết chính xác vị trí của tai nghe so với nó. Với một số phép toán thông minh, dữ liệu đó sau đó có thể được chuyển đổi thành theo dõi chuyển động rất chính xác trong không gian 3D. Đây là cách mà tai nghe VR cao cấp cung cấp “sáu bậc tự do”, còn được gọi là 6DoF. 

Quest di chuyển cảm biến máy ảnh lên chính tai nghe, trong trường hợp này là đặt chúng ở những vị trí chiến lược trên thiết bị. Các tai nghe khác có thể sử dụng nhiều camera hơn để cải thiện độ chính xác. Bốn camera này cho phép Nhiệm vụ^(Quest) nhìn vào thế giới thực xung quanh bạn và xác định vị trí của bạn trong không gian đó. 

Đó là những gì cho phép Quest hoạt động độc lập và di động. Đó cũng là tính năng cho phép theo dõi bằng tay với Oculus ngay từ đầu ..

Bộ điều khiển cảm ứng Oculus tiêu chuẩn^{(Standard Oculus Touch Controllers)}

Để hiểu điều gì làm cho việc theo dõi bàn tay của Oculus trở nên ấn tượng như vậy, chúng ta phải bắt đầu với các bộ điều khiển vật lý khá nhàm chán đi kèm với Oculus Quest . Mỗi cái đều được theo dõi chuyển động hoàn toàn bằng các cảm biến bên trong và các điểm đánh dấu theo dõi chuyển động đặc biệt giúp cho camera trên bo mạch của Quest biết vị trí của bộ điều khiển so với tai nghe.

Khi bạn đang giữ bộ điều khiển cảm ứng trong VR, chúng được theo dõi với độ chính xác kỳ lạ. Sử dụng nút nắm và nút kích hoạt trên bộ điều khiển, phần mềm VR có thể tạo ra trải nghiệm lấy và thao tác các vật phẩm một cách thuyết phục. Điều này được sử dụng để tạo hiệu ứng tuyệt vời trong các trò chơi như Half-Life Alyx và The Climb , nơi nắm bắt các vật phẩm trong thế giới VR là một phần trung tâm của trò chơi. 

Bộ điều khiển cảm^{(Touch Controllers)} ứng cũng cung cấp phản hồi xúc giác nhờ các thiết bị được gọi là “bộ truyền động tuyến tính”, có thể tạo ra cảm giác vật lý khi va chạm vào mọi thứ, rung động và các cảm giác chạm khác. Các ngón tay cái và các nút cũng cung cấp một cách quen thuộc để di chuyển trong không gian VR khi bạn không thể di chuyển trong không gian thực của mình.

Nhược điểm chính của việc này so với theo dõi bằng tay là bạn có móc cho tay. Bạn có thể thực hiện các chuyển động véo đơn giản bằng tay ảo của mình, nhưng đó là mức độ của nó. Nó không giống như một hạn chế lớn khi trò chơi được thiết kế xung quanh bộ điều khiển, nhưng theo dõi tay sẽ mở ra một loạt các khả năng mới trong VR.

Theo dõi tay Oculus làm gì

Khi tính năng theo dõi bàn tay được bật, bạn sẽ thấy bản thể hiện chính xác bàn tay thật của mình trong thế giới VR. Mỗi chuyển động của ngón tay hoặc cổ tay của bạn sẽ được phản ánh trong các doppelgangers ảo của chúng.

Theo dõi bàn tay^{(Hand Tracking)} không còn là một tính năng beta của Quest . Nó hiện được tích hợp vào hệ điều hành và nhiều ứng dụng Quest của bên thứ nhất . Lợi ích chính đầu tiên ở đây là nếu bạn chỉ muốn nhanh chóng thực hiện Nhiệm vụ^(Quest) của mình và xem phim trong VR hoặc duyệt xung quanh cửa hàng ứng dụng, bạn không phải thực hiện nỗ lực gắn trên bộ điều khiển cảm ứng. Chỉ cần dùng tay, bạn có thể truy cập menu hệ thống và điều hướng xung quanh một cách dễ dàng.

Giờ đây, theo dõi bàn tay là một tính năng chính thức của Quest , các nhà phát triển ứng dụng bên thứ ba có thể thêm tính năng này vào ứng dụng của họ. Đã có một số ứng dụng sử dụng tuyệt vời tính năng theo dõi bàn tay của Oculus , nhưng chúng tôi chắc chắn rằng các nhà phát triển sẽ tìm ra nhiều cách thú vị hơn trong đó tính năng theo dõi bàn tay trực tiếp có thể biến đổi trải nghiệm VR^(Oculus)

Cách hoạt động của tính năng theo dõi bàn tay của Oculus

Kết quả của theo dõi bàn tay khá tuyệt vời, nhưng nó thực sự hoạt động như thế nào? Rõ ràng là Oculus sẽ không công bố chi tiết chính xác về giải pháp độc quyền của họ, nhưng chúng tôi biết các công nghệ và nguyên tắc liên quan.

Đầu tiên, các camera trên bo mạch rất cần thiết để thực hiện công việc theo dõi bàn tay. Chúng không chỉ cung cấp thông tin độ sâu lập thể mà còn cả dữ liệu trực quan để xử lý bằng thị giác máy. Thị giác máy là gì? Đó là một nhánh của trí tuệ nhân tạo^{(artificial intelligence)} , cụ thể là một lĩnh vực được gọi là học máy. Đó là công nghệ tương tự cho phép ứng dụng máy ảnh trên điện thoại của bạn nhanh chóng nhận dạng khuôn mặt trong ảnh.

Về cơ bản, phần mềm phải tìm hiểu dữ liệu hình ảnh được cung cấp bởi máy ảnh là bàn tay và đâu là bàn tay. Điều này có thể được thực hiện bằng cách hiển thị phần mềm hàng nghìn hàng nghìn bàn tay trong các môi trường khác nhau cho đến khi nó có thể tìm ra cách nhanh chóng và hiệu quả để phân biệt chúng với mọi thứ khác trong phòng của bạn một cách đáng tin cậy.

Một khi phần mềm có thể tạo ra các mô hình ảo chính xác, theo thời gian thực của bàn tay bạn, các nhà phát triển ứng dụng có thể sử dụng chúng cho bất cứ điều gì họ có thể nghĩ ra. Giờ đây, bạn có thể thao tác chính xác các đối tượng trong VR!

Trải nghiệm được theo dõi bằng tay đáng để thử

Nếu sở hữu Oculus Quest , bạn có thể thử tính năng theo dõi bàn tay của Oculus mà không cần phải mua bất kỳ ứng dụng cụ thể nào. ^(Oculus)Như đã đề cập ở trên, nó hoạt động trong môi trường Nhiệm vụ^(Quest) chính cũng như một số ứng dụng của bên thứ nhất. Khi nói đến trải nghiệm của bên thứ 3, có một số điểm đáng chú ý.

Dòng^{(The Line)} là một trải nghiệm tường thuật $ 4,99 cũng đóng vai trò như một bản demo công nghệ hoàn hảo để theo dõi bàn tay. Nó kể câu chuyện về một thị trấn mô hình quy mô chạy trên kim đồng hồ và các đường ray. 

Người hùng Pedro của chúng ta yêu Rosa , nhưng anh ấy không thể thoát khỏi số phận của mình. Cho đến khi một điều gì đó mới xảy ra vào một ngày nào đó. Bạn tương tác với thế giới mô hình quy mô của họ bằng cách sử dụng bàn tay của bạn để vặn các nút, kéo cần gạt và làm mọi thứ mà bạn có thể. Đó là một trải nghiệm ngắn, tuyến tính nhưng có thể thể hiện tính năng theo dõi bàn tay một cách rất thú vị trong khoảng 15 phút.

Waltz of the Wizard ($ 9,99) là một màn trình diễn tuyệt vời khác của công nghệ. Bạn có thể sử dụng tay để sử dụng phép thuật và tương tác với mọi thứ trong thế giới VR xung quanh bạn. Nếu bạn từng muốn sống trong tưởng tượng trở thành một phù thủy có thể bắn ra những tia sáng từ tay họ, thì đây là trò chơi dành cho bạn!

Bạn nghĩ gì về tính năng theo dõi bàn tay trên Quest ? Bạn đã thử chưa? Bạn muốn giới thiệu trò chơi nào? Chia sẻ^(Share) những hiểu biết của bạn trong các bình luận.

How Oculus Quest Hand Tracking Technology Works

The Oculus Quest (both the original and second model) have an interesting history of features being added long after the hardware is out in the wild. The most famous of these is Oculus Link, which effectively turns the Quest into an Oculus Rift. This feature was so successful that Oculus decided to discontinue all their headsets but the Quest. 

Hand tracking hasn’t made quite the splash Oculus Link did, but it’s still an amazing feature with lots of potential. With hand-tracking you don’t need controllers at all. Your own hands are digitized into the VR world! 

If you have a Quest or are thinking of buying one, it’s worth knowing how hand tracking works and what it can bring to the VR experience.

How Quest Tracks the World

The Oculus Quest uses an innovative approach towards motion tracking that’s commonly referred to as “inside-out” tracking, which is very different from how motion tracking worked in the past. 

When the first next-generation headsets were released in the mid-2010s, they made use of one or more external tracking cameras. Special motion tracking lights on the headset told the camera exactly where the headset was in relation to it. With some clever math, that data could then be converted to very accurate motion tracking in 3D space. This is how premium VR headsets offer “six degrees of freedom”, also known as 6DoF. 

Quest moves the camera sensor onto the headset itself, in this case placing them in strategic spots on the device. Other headsets may use even more cameras to improve accuracy. These four cameras let the Quest look at the real world around you and determine what your position is within that space. 

That’s what allows the Quest to be self-contained and portable. It’s also the feature that allows for hand-tracking with the Oculus to be possible in the first place..

The Standard Oculus Touch Controllers

To understand what makes Oculus hand tracking so impressive, we have to start with the rather mundane physical controllers that come with the Oculus Quest. Each one is fully motion-tracked by internal sensors and special motion tracking markers that tell the Quest’s onboard cameras where the controllers are relative to the headset.

When you’re holding the touch controllers in VR, they’re tracked with uncanny accuracy. Using the grip and trigger buttons on the controller, VR software can create a convincing experience of grabbing and manipulating items. This is used to great effect in games such as Half-Life Alyx and The Climb, where gripping items in the VR world is a central part of gameplay. 

The Touch Controllers also offer haptic feedback thanks to devices called “linear actuators”, which can create physical feelings of bumping into things, vibration and other touch sensations. Thumbsticks and buttons also offer a familiar way to move around a VR space when you can’t physically move about in your real space.

The main disadvantage of this compared to hand-tracking is that you have hooks for hands. You can perform simple pinching movements with your virtual hands, but that’s the extent of it. It doesn’t feel like a major limitation when games are designed around the controllers, but hand tracking opens a spectrum of new possibilities in VR.

What Oculus Hand-Tracking Does

When hand tracking is enabled, you’ll see an accurate representation of your real hands within the VR world. Each movement of your fingers or wrist will be reflected in their virtual doppelgangers.

Hand Tracking is no longer a beta feature of Quest. It’s now integrated into the operating system and many first party Quest applications. The first major benefit here is that if you just quickly want to put on your Quest and watch a movie in VR or browse around the app store, you don’t have to go through the effort of strapping on the touch controllers. Using just your hands, you can access system menus and navigate around with ease.

Now that hand-tracking is an official feature of Quest, third-party app developers can add it to their apps. There are already a number of apps that make excellent use of the Oculus hand-tracking feature, but we’re sure developers will find many more exciting ways in which direct hand-tracking can transform the VR experience

How Oculus Hand-tracking Works

The results of hand-tracking are pretty amazing, but how does it actually work? Obviously Oculus isn’t going to publish the exact details of their proprietary solution, but we do know the technologies and principles involved.

First, the on-board cameras are essential to making hand-tracking work. Not only do they provide stereoscopic depth information, but also visual data for processing by machine vision. What’s machine vision? It’s a branch of artificial intelligence, specifically a field known as machine learning. It’s the same technology that lets your phone’s camera app quickly identify faces in a photo.

Essentially, the software has to learn what in the image data provided by the camera is a hand and what isn’t a hand. This was probably done by showing the software thousands and thousands of hands in different environments until it could reliably figure out a fast and effective way of telling them apart from everything else in your room.

Once the software can create accurate, real-time virtual models of your hands, app developers can use them for anything they can think of. You can now precisely manipulate objects in VR!

Hand-tracked Experiences Worth Trying

If you own an Oculus Quest you can try out the Oculus hand-tracking feature without having to buy any particular app. As mentioned above, it works in the main Quest environment as well as a few first-party apps. When it comes to 3rd-party experiences, there are a few worth highlighting.

The Line is a $4.99 narrative experience that also serves as a perfect tech-demo for hand tracking. It tells the tale of a scale model town that runs on clockwork and tracks. 

Our hero Pedro is in love with Rosa, but he can’t escape his fate. Until something new happens one day. You interact with their scale model world by using your hand to turn knobs, pull levers and fiddle with everything that you can. It’s a linear, short experience, but can show off hand-tracking in a very entertaining way in about 15 minutes.

Waltz of the Wizard ($9.99) is another excellent showcase of the technology. You can use your hands to cast spells and interact with just about everything in the VR world around you. If you’ve ever wanted to live out the fantasy of being a wizard who can shoot bolts of lighting from their hands, this is the game for you!

What do you think of hand tracking on Quest? Have you tried it? Which games would you recommend? Share your insights in the comments.

Related posts

• Làm thế nào để chơi Wireless PC VR Games trên Oculus Quest với Virtual Desktop

• Cách Xbox Truyền trực tuyến tới PC hoạt động

• Cách chơi trò chơi SteamVR trên Oculus Quest 2

• 8 trò chơi miễn phí hay nhất trên Oculus Quest 2

• Cách thiết lập liên kết không khí trên Oculus Quest 2

• Best Mechanical Keyboards cho Gaming and Work cho Windows 10 PC

• Konami Code and How Do bạn sử dụng nó là gì?

• Bạn có thể sử dụng Keyboard and Mouse cho Console Gaming không?

• Đánh giá ASUS TUF GAMING Z490-PLUS (WI-FI): Một Z490 motherboard tuyệt vời!

• 8 Best FPS Browser Games Bạn có thể chơi Online ngay bây giờ

• 5 điện thoại Best Android Gaming có giá trị Buying vào năm 2021

• Monitor vs TV để chơi game? Có Best Choice không?

• 6 Best Public Domain Video Games chơi Free Bây giờ

• Fix Surface Book 2 Battery Drain issue Trong Gaming, Sleeping, VR

• Làm thế nào để Tạo Gaming YouTube Videos Giống như một Pro

• Đánh giá Ballistix Gaming Memory DDR4-3600 32GB quan trọng

• Làm thế nào để kết nối một PS4 Controller Để một máy tính

• GG Mean trong Gaming, Chat, v.v

• Gaming Keyboards có đáng không?

• HP OMEN 15 Laptop cho Powerful and Immersive Gaming