【VRChat】Hoe doe je face tracking en eye tracking? 8 methoden

Wat zijn gezichtstracking en oogtracking?

　Full-body tracking wordt afgekort als “full-body tracking” en verwijst in algemene termen naar het volgen van de bewegingen van het hele lichaam. In VRChat wordt lichaamsherkenning gewoonlijk full-body tracking genoemd. Oog- en gezichtsuitdrukkingen worden daarentegen meestal niet gevolgd, maar bestuurd via controllers. Bij VRChat’s full-body tracking zijn gezichtstracking en oogtracking niet inbegrepen.
Commercieel verkrijgbare avatars ondersteunen full-body tracking, maar slechts weinige ondersteunen oog- en gezichtstracking.

　Wanneer we hier zeggen “compatibel met oog- en gezichtstracking”, bedoelen we het toevoegen van “gezichtstracking” (facial tracking) en “oogtracking” (eye tracking) aan je avatar, waardoor deze compatibel wordt met beide, en tegelijkertijd verder gaat dan

alleen conventionele full-body tracking
→ full-body tracking + oogtracking + gezichtstracking

Dat is waar we het over hebben om toe te voegen.

Het idee is om ook gezichtsbewegingen en oogbewegingen te volgen.

Er zijn desktopgebaseerde typen en VR-gebaseerde typen. De VR-gebaseerde typen zijn onderverdeeld in externe add-on typen en ingebouwde typen.

Ik zal methoden voor gezichts- en oogtracking introduceren, maar de methoden en installatieprocedures zijn al getest door degenen die ons voorgingen.

Het algemene installatieproces bestaat uit 3 STAPPEN

In dit artikel behandel ik niet alleen het Quest Pro-geval dat ik heb uitgeprobeerd en de Valve Index gezichtstracking, maar ook verschillende recente methoden. Het algemene installatieproces bestaat uit 3 STAPPEN.

Stap 1: Koop de hardware en pas de software/drivers aan (beschreven per apparaat)

Om gezichts- en oogtracking te gebruiken, moet je verschillende speciale apparaten aanschaffen.
De vereisten verschillen per apparaat, dus wees voorzichtig.

Stap 2: Installeer de gezichtsaanpassingstool voor commercieel verkrijgbare avatars in Unity

Je kunt een commercieel verkrijgbare avatar kopen en gewoon de aanpassingstool installeren om de installatie te voltooien. Aparte instructies worden verstrekt voor originele avatars en VRoid.

Stap 3: Configureer instellingen in VRChat

Instellingen zijn ook vereist binnen VRChat.

 

【Alleen headset】Wat heb je nodig voor oogtracking + gezichtstracking?

Er zijn ongeveer 8 patronen.

Oogtracking is moeilijker dan gezichtstracking

Gezichtstracking maakt gebruik van cameratracking, dus er zijn behoorlijk wat externe add-on opties beschikbaar. Oogtracking moet echter voldoen aan veiligheidsnormen, wat het behoorlijk uitdagend maakt. Voor de desktopmodus is een zelfstandige camera voldoende. Dat gezegd hebbende, aangezien zeer weinig VR-headsets ingebouwde oogtracking hebben, is de keuze moeilijk.

“De apparaten die ik zou aanbevelen zijn uit productie”

“De apparaten die ik zou aanbevelen zijn uit productie” en “de apparaten die ik niet kan aanbevelen zijn ofwel nieuw of brengen risico’s met zich mee” — het is een moeilijke situatie. Veel producten werden jarenlang verkocht maar zijn stopgezet vanwege slechte verkopen.

Ik raad aan te wachten op de Bigscreen Beyond 2e met oogtracking

Ervan uitgaande dat je ook full-body tracking wilt en op zoek bent naar officiële producten, zijn er momenteel 5 bekende opties. 【1】, 【2】 en 【4】 zijn uit productie. Als je er een kunt bemachtigen, is 【4】 de makkelijkste optie en aanbevolen als HMD-only aankoop, maar deze is uit productie.

【1】”Vive Pro Eye” + “VIVE Facial Tracker” 【Beide uit productie】

Beide zijn uit productie. Qua prestaties en bruikbaarheid wordt deze combinatie als de beste beschouwd. Ik kon het niet uitproberen omdat de Vive Pro Eye moeilijk te verkrijgen is.

【2】XR Elite + Speciale gezichtstracker 【Niet aanbevolen】

Vergeleken met de Quest-serie en PICO-serie hebben VIVE’s niet-Lighthouse headsets over het algemeen een lagere bouwkwaliteit, dus ik kan ze simpelweg niet aanbevelen.

【3】Focus Vision + Speciale gezichtstracker 【Niet aanbevolen】

Niet aanbevolen om dezelfde redenen als 【2】. Bovendien, aangezien het Fresnel-lenzen gebruikt, zul je teleurgesteld zijn als je verwacht dat het op hetzelfde niveau is als andere HMD’s. Ik heb dit bij meerdere mensen zien gebeuren. Ik raad aan om het eerst via verhuur te proberen.

【4】Quest Pro 【Oogtracking + gezichtstracking — Was aanbevolen maar nu uit productie】

Ik begrijp niet waarom Quest Pro nu pas populair begint te worden, terwijl er een periode was waarin het beschikbaar was voor ongeveer 100.000 yen. De markt krimpt over het algemeen, dus dit was een apparaat dat je had moeten kopen toen het beschikbaar was.

【5】Aanschaf van Pimax Crystal, Varjo Aero, Pico 4 Enterprise, enz.

Pico 4 Enterprise is alleen voor zakelijk gebruik en kan niet door consumenten worden gekocht. Er is ook een Pico 4 Pro, maar die is voor de Chinese markt. Er zijn verschillende drempels zoals het vereisen van registratie met echte naam. In ieder geval, aangezien PICO-gerelateerde apparaten uiteindelijk op officieel niet-ondersteunde manieren worden gebruikt, hebben we besloten ze niet op deze site te behandelen. Let op de Radiowet en PSE-wet bij het rechtstreeks importeren van apparaten uit het buitenland — vooral de laatste. Varjo Aero is uit productie en alleen tweedehands verkrijgbaar. Pimax Crystal is nog steeds te koop, maar met 1,5 kg is het behoorlijk zwaar voor een HMD. Ik raad aan om het eerst via verhuur te proberen.

【6】Bigscreen Beyond 2e 【Alleen oogtracking】

Aangezien er zeer weinig HMD’s zijn met oogtracking-ondersteuning, is dit er een die beschikbaar is voor binnenlandse aankoop. Aangezien 【2】 en 【3】 niet bijzonder worden aanbevolen, raad ik aan te wachten op 【6】 als 【4】 niet beschikbaar is voordat je een beslissing neemt.

【7】Koop een externe gezichtstracker 【Alleen gezichtstracking】

Ik zal ook 【7】 introduceren, maar informatie is nog beperkt. Momenteel wordt alleen de Quest 3-versie ondersteund, maar persoonlijk denk ik dat het geweldig zou zijn als het gecombineerd kon worden met de Bigscreen Beyond 2e. Er zijn opties zoals EF Tracker for Beyond 　https://vlugin.jp/2026/02/23/eftraforbeyo/. Een Quest 3-versie is ook gepland.

 

【8】DIY en doujin (indie) hardware 【Alleen gezichtstracking】

Project Babble https://babble.diy/ en DIY/doujin (indie) methoden zijn ook beschikbaar. Let op de Radiowet en PSE-wet — vooral de laatste. Ik raad dit absoluut niet aan. Er is een bevestiging gemaakt voor Bigscreen Beyond 2, en het combineren ervan met de 2e kan gezichtstracking + oogtracking mogelijk maken. https://www.thingiverse.com/thing:6193488
Overigens zijn er ook DIY oogtracking-oplossingen, maar aangezien oogtracking veiligheid vereist, kan ik ze absoluut niet aanbevelen. https://github.com/EyeTrackVR

Er is ook een methode om je eigen te maken met Project Babble: Baballonia https://store.steampowered.com/app/4091970/Project_Babble_Baballonia/

 

【9】Wacht op Steam Frame 【Alleen oogtracking】

Het is aangekondigd, maar de binnenlandse releasedatum is nog niet bepaald. Niet aanbevolen als je onmiddellijk iets nodig hebt.

Valve　Valve Index後継機こと「Steam Frame」を含む他3種類のデバイスを発表

Dit zijn de beschikbare opties. Vanaf november 2025 zijn de enige opties die nieuw te koop zijn 【2】, 【3】, 【5】 en 【6】. Eerst wil ik de momenteel beschikbare opties introduceren: 【2】, 【3】, 【4】, 【6】 en 【7】. Het standpunt van onze site is dat we informatie blijven verstrekken zodra deze beschikbaar komt, en elke persoon zal opties moeten combineren en zijn eigen oplossing moeten vinden. 【9】 wordt niet aanbevolen omdat binnenlandse regelgevingsnaleving nog enige tijd zal duren. Persoonlijk denk ik, aangezien deze producten zijn stopgezet vanwege gebrek aan populariteit, dat het moeilijk zal zijn voor grote apparaatfabrikanten om ze actief te produceren voor een tijdje, dus we moeten het misschien doen met doujin (indie) hardware.

 

Stap 1:【Hardware】Installatiemethoden

【1】 Uit productie, later beschreven

【2】XR Elite-gids 【Niet aanbevolen】

XR Elite

De HMD-software is onvolledig voor de hoge prijs, dus ik raad de aanschaf niet aan.
Verhuur is beschikbaar, dus ik raad die optie aan.

VIVE XR Elite

Raadpleeg Kohalog voor details. Een vriend van ons had er ook een, maar
ze zijn al overgestapt op een ander apparaat vanwege slechte bruikbaarheid en kwetsbaarheid.
Op basis van verhalen van kopers om me heen, weet ik van iemand die het apparaat kocht met alle optionele accessoires maar binnen een dag overstapte naar een Quest Pro vanwege te veel installatieproblemen, en anderen die overstapten omdat het fragiel was en totaal ongeschikt voor VR-slaap.

Ook versterken huidige eigenaren hun apparaat naar verluidt met 3D-geprinte onderdelen.

実は微妙すぎる…？VIVEの新作VRヘッドセット「VIVE XR Elite」を予約購入したので所感レビュー！

STAP 1. Wat heb je nodig?

Aanschaf het hoofdapparaat en koop de speciale gezichtstracker. Houd er rekening mee dat het een eigen accessoire is.

 

STAP 2. Installatiemethode

De installatiemethode is als volgt.
Volg de VIVE Full Face Tracker Support-handleiding

【3】Focus Vision-gids 【Niet aanbevolen】

Focus Vision

Op basis van informatie van vrienden is de HMD-software onvolledig, dus ik raad de aanschaf niet aan.
Gedetailleerde specificaties zijn als volgt.

Sommige gebruikers zijn al overgestapt op andere apparaten vanwege slechte bruikbaarheid.
Er waren tot nu toe niet veel reviews, maar gebruikersreviews beginnen te verschijnen, dus ik link ze hier.

https://note.com/vrcuchan/n/nc9783fe16fcc

Over het algemeen lijkt het praktischer te zijn dan de XR Elite…

STAP 1. Wat heb je nodig?

Je hebt nodig de Facial Tracker en de main unit. Oogtracking is ingebouwd.

https://www.vive.com/jp/accessory/facial-tracker-for-vive-focus-series/

Een demo in actie:

STAP 2. Installatiemethode

De installatiemethode is als volgt.

Vergelijking met Pro Eye

De review meldt teleurstelling. Voor Japanse gebruikers, aangezien hun pupillen donker gekleurd zijn, reageert oogtracking doorgaans makkelijker, dus
het is moeilijk om hetzelfde oordeel te vellen, maar het lijkt zeker dat de Pro Eye superieur is.

I’m not even going to lie, I have been extremely disappointed in the Vive Focus Vision..@htcvive when are you guys going to fix the eye tracking issues your headsets have?

Here is a comparison between the Vive Pro Eye compared to the Focus Vision. https://t.co/gh9bu09ZSZ pic.twitter.com/Beh04VHqFZ

— Meaty (@meaty_tw) October 23, 2024

【4】【Uit productie】Quest Pro-gids (gezichts- + oogtracking)

Het is uit productie, maar het wordt hier bewaard omdat het tweedehands verkrijgbaar kan zijn.

STAP 1. Wat heb je nodig?

Koop een Quest Pro. Gezichts- en oogtracking zijn ingebouwd, dus er is niets anders nodig.

STEP 2. Installeer VRCFaceTracking

Vervolgens, stap 4: Installeer VRCFaceTracking door de onderstaande instellingen te volgen.
https://qiita.com/Kazu_Sack/items/14460dac1dd149bf1ff5

Ik heb het ook zelf geprobeerd te installeren. Het was voltooid in ongeveer 2 uur met Virtual Desktop.
Als het niet werkt, lost opnieuw opstarten het meestal op. Deze methode werkt met elk VRCFaceTracking-compatibel apparaat. (Voor VIVE PRO Eye, enz., werkt het mogelijk niet vanwege drivercompatibiliteitsproblemen.)

Ik heb de Quest Pro gezichtstracking-setup voltooid. Hier is een video van de test met een compatibele avatar.
Ik knipper, open mijn mond, enz. zonder te spreken. De rest zijn gewoon avatar-aanpassingen.

【5】Varjo Aero, Pimax Crystal

Varjo Aero

Verhuur is beschikbaar, maar de prijs is erg hoog.

Varjo XR-3

https://note.com/aomitsu/n/n6390de3e88d9

Beschikbaar als gebruikte exemplaren.

(Used) Varjo Aero

 

Pimax Crystal is zwaar, dus verhuur wordt aanbevolen.

Pimax Crystal

【6】Bigscreen Beyond 2e 【Alleen oogtracking】

Bigscreen Beyond 2

世界最小・最軽量のVRヘッドセット「Bigscreen Beyond」を使って、VRChatを遊んでみて感じたこと【レビュー】

Raadpleeg Kohalog voor indrukken van de Bigscreen Beyond. De 2e is het model met oogtracking en de prijs is iets anders.
Bigscreen Beyond 2e wordt geleverd met oogtracking-functionaliteit. Raadpleeg de officiële website.

 

「Bigscreen Beyond 2e」のアイトラッキング機構
フラッグシップモデルである「Beyond 2e」には、砂粒ほど小さいイメージセンサーによる世界最小クラスのアイトラッキング機構が搭載されており、最先端のAI＆コンピュータービジョン技術で処理されます。具体的には、イメージセンサーによって取得された画像はAMDやNVIDIAのGPUに送られ、NVIDIA社のCUDAによって学習＆構築された瞳孔位置推定モデルによって処理されます。他社のVRヘッドセットには見られないこの斬新なアプローチで、プライバシーを守りつつ精確かつ低遅延なアイトラッキングが実現しました。Bigscreen Beyondのローンチ以来のポリシー「1グラムでも減らせ」に準拠すべく、「Beyond 2e」モデルは「Beyond 2」に比べて、たった1.05グラムしか重くありません。

さらに、カメラと瞳孔の位置にアクセスできるAPIの提供により、ハードウェア開発者やMOD制作のコミュニティもサポートします。アイトラッキング機能はBigscreen社製のソフトウェアによって動作しますが、サードパーティ製のソフトウェアや、EyetrackVR(ETVR)のようなオープンソースのMODもサポートします。SteamVR、OpenXRやVRChatのような主要アプリをサポートするBigscreen社製のアイトラッキングソフトウェアのパブリックベータ版は、2025年夏の配布開始を予定しています。

Productspecificaties
Diagonaal FOV: 116 graden

Gewicht: 107 gram

IPD (interpupillaire afstand): Verstelbaar van 48mm tot 75mm (fysiek 55mm tot 70mm)

Resolutie: 2.560 x 2.560 pixels per oog

Verversingsfrequentie: 90Hz, 75Hz

6DoF-trackingmethode: SteamVR Tracking
Vereist voor tracking: Base Station 1.0 of 2.0 (niet inbegrepen)
Oogtracking: Alleen beschikbaar op “Beyond 2e”
Full-body tracking: Compatibel met VIVE Trackers en Tundra Trackers (niet inbegrepen)
Controller: Compatibel met verschillende SteamVR-controllers zoals Valve Index (niet inbegrepen)

Audio-invoer: Dubbele microfoonarray
Audio-uitvoer: On-ear oordopjes via officiële audioband (niet inbegrepen)
Accessoirepoort: 1x USB-C
PC-verbinding: 5m glasvezelkabel met speciale linkbox
Minimale pc-specificaties
GPU: NVIDIA RTX2070 of AMD RX5700XT of hoger (DisplayPort 1.4 met DSC vereist)
CPU: Quad Core Intel of AMD
Poorten: 1x DP1.4-poort, 2x USB3.0-poorten
OS: Windows 10 of Windows 11

De bovenstaande informatie is afkomstig van de officiële bron: https://prtimes.jp/main/html/rd/p/000000021.000045966.html

 

【7】Gebruik van de FT1-TYPE F (Spec 2) bedrade gezichtstracker

Dit is een bedrade gezichtstracker. Omdat de positie van de omgevingsruismicrofoon van de Quest 3 overlapt met de clipbevestigingspositie, bevestig a.u.b. dat eventuele interferentie acceptabel is voordat u koopt.

[Inhoud]:

Gezichtstracker-eenheid (Garantie: 2 jaar, maximaal 4 vervangingen)
Clip (voor bevestiging, 2 jaar garantie, maximaal 4 vervangingen)
Verlengkabel (2 jaar garantie, maximaal 4 vervangingen)
[Garantie-informatie]:

Zorgeloze 2-jaar garantie: Dekt schade door VR-gebruiksongelukken (exclusief opzettelijke demontage).
Retourbeleid: Volledige terugbetaling binnen 1 week na ontvangst van het product, zonder vragen (verzendkosten voor rekening van de klant).

[Belangrijke opmerkingen]:

Dit product vereist een “VRCFT”-compatibele avatar en software.
Als u ondersteuning nodig heeft bij avatarwijziging of software-installatie, raadpleeg dan de officiële Discord.

https://gamielf.com/

[暫定発送時期:2026/1/26より]FT1-TYPE F(Spec 2)有線フェイストラッカー(税込)

【8】Doujin (indie) hardware 【Alleen gezichtstracking】

Ik raad doujin hardware over het algemeen niet aan, maar aangezien tekorten in de toekomst worden verwacht, vermeld ik het hier.

Kuchitora (Mondtracker)

https://booth.pm/en/items/7569957

 

Stap 2:【Avatar instellen】

Na het voltooien van de hardware-installatie in stap 1, moet je je avatar uploaden. De installatiemethode is als volgt.

Eenvoudige methode voor commercieel verkrijgbare avatars zoals Ria Alice

Ieders idool, Nishii Rii-san, kocht een Quest Pro en probeerde gezichtstracking.

Volgens haar:

Stap 1: Koop Ria Alice (of een vergelijkbare compatibele avatar)
Stap 2: Koop de gezichtsaanpassingstool (hieronder beschreven)

Ik wist dat deze methode mogelijk was met Quest Pro, maar in het geval van Ria Alice worden er ook tools verkocht die het gezicht laten bewegen. Ze verwees hiernaar voor het implementeren van gezichtsuitdrukkingen. Zoals verwacht van Nishii-san. Geweldig.

Het lijkt erop dat je eenvoudig gezichtstracking kunt instellen voor populaire VRChat-avatars door de onderstaande stappen te volgen. Niet beperkt tot Ria Alice, in het geval van Nishii-san is de algemene flow als volgt. Nadat je alles bij elkaar hebt, ga je verder met de instellingen. Begin met het kopen van een avatar en de gezichtsaanpassingstool.

De aanbeveling van Nishii-san is:

Deze site verkoopt tools niet alleen voor Ria Alice, maar ook voor Mafuyu-chan en anderen.

https://shopyk.booth.pm/items/5100830

Tools voor andere avatars zijn ook beschikbaar.
Een bekende maker is echothenekoさん (echotheneko-san):
https://echotheneko.booth.pm/

En Jerry’s Face Tracking is ook bekend.

https://adjerry91.booth.pm/

Deze winkels verkopen compatibele avatartools voor Manuka-chan, Kikyo-chan, Moe-chan, Mamehinata-chan, Koyuki-chan, Youko-zoku no Onee-sama-chan, Lopolycon-chan, Karin-chan, Rusk-chan, Chiffon-chan, Cyan-chan en nog veel meer, dus kijk ze gerust na. Aangezien elke winkel verschillende bewegingskenmerken heeft, raad ik sterk aan de demovideo’s te bekijken om de bewegingen te bevestigen.

Voor niet-ondersteunde avatars

Met FaceTra Shape Creator kun je het proces tot op zekere hoogte automatiseren.

FaceTra Shape Creator: Een Unity Editor-tool die gezichtstracking blend shapes maakt voor avatars door meshes te vervormen. Het originele mesh-asset wordt niet gewijzigd, het proces is niet-destructief en het automatiseert het meeste van dit arbeidsintensieve proces.

https://docs.hai-vr.dev/docs/products/facetra-shape-creator

Double Hip Tracker　　Deze maker is ook bekend om andere tools.

 

Stap 3:【VRChat-instellingen】

Installeer VRCFaceTracking
Configureer instellingen in VRChat
Verifieer de werking

Na het uploaden van de vooraf gekochte Ria Alice-avatar,
volg gewoon de instructies die bij de gezichtsaanpassingstool worden geleverd. Dit duurde ook ongeveer 1 uur.

Aangezien Ria Alice is geüpload naar VRChat, ga naar het Expression Menu en
zet de gezichtstracker en oogtracking AAN.
Dan werkt het.

 

Er zijn ook verschillende winkels die gezichtstracking-tools voor andere avatars verkopen,
dus kijk ze gerust na. Populaire avatars zoals Maya-chan en Celestia-chan hebben meerdere opties beschikbaar.
https://fermat.booth.pm/items

Werking verifiëren

Wat ik heb geleerd van het testen van Quest Pro’s gezichtstracking + oogtracking met Ria Alice is dat
acties zoals ogen sluiten, knipogen, wangen opblazen en ooglidbewegingen werkten bevestigd. De VIVE Facial Tracker is uit productie en maakt het erg moeilijk om drankjes te drinken, dus de Quest Pro is lichtgewicht en zeer gebruiksvriendelijk, wat hem aanbevolen maakt.

Mafuyu-chan werkte ook correct.
https://shopyk.booth.pm/items/5151544

Hiermee is de installatie voltooid.

 

【Avatar – VRoid-gids】

Als je een volledig originele avatar wilt maken

Importeer VRCFacialOSCAvatarTool en Shiro-chan (avatar) in Unity.
Gebruik vervolgens VRCFacialOSCAvatarTool om gezichtsuitdrukkingen in te stellen.
Daarna, zoals Yutanii CH. uitlegt in de video, is het belangrijke deel het matchen van de namen van “animation” en “animator” bestanden.
Wanneer je converteert met VRCFacialOSCAvatarTool, komen de namen niet overeen, dus je moet ze hier afstemmen. (Rond het 10:20 tot 12:00 punt.)
Wat betreft de VRChat-instellingen, kijken vanaf 10:20 geeft je een overzicht van de hele flow van uploaden tot het bewegen van de mond.

Daarna zou de mond moeten beginnen te bewegen.

Dat dekt hoe je gezichtstracking instelt.

Ik heb dit gemaakt als referentienotitie, dus ik ben van plan om in de loop van de tijd inhoud toe te voegen en te herzien.

 

【Als je het aan VRoid wilt toevoegen, enz.】

Ik heb een video gevonden, dus ik zal deze hier introduceren.

Je moet je avatar Perfect Sync-compatibel maken

Het eerste deel is echter voor mensen die comfortabel met Blender kunnen werken, dus ik heb gekozen voor een Perfect Sync-compatibele avatar. Ik kocht de mijne in deze winkel:

https://endof.booth.pm/items/4276261

Daarna keek ik het tweede deel van de video en stelde het in. (Let op: de Quest Pro-gids hierboven behandelt ook methoden om gewone avatars compatibel te maken.
Bevestig bij aankoop van de compatibele tool van de winkel dat de software compatibel is.)
Dat gezegd hebbende, alles vanaf nul maken was behoorlijk vervelend, dus ik installeerde de volgende software en gebruikte die aanpak.

VRoid-gebruikers, raadpleeg het volgende.

 

Als je pc-specificaties onvoldoende zijn

Oog- en gezichtstracking gebruiken zeer vaak camera’s, wat aanzienlijke verwerkingskracht vereist. Afhankelijk van het geval moet je mogelijk je pc-specificaties upgraden. Als VRChat crasht bij het maken van foto’s, is dat vaak te wijten aan onvoldoende specificaties. Ik heb hier de volledige reis van full-body tracking tot oogtracking + gezichtstracking geïntroduceerd, dus raadpleeg dit. In mijn geval moest ik meer RAM toevoegen en mijn grafische kaart upgraden.

顔も体もトラッキングしたい！！　究極の無線HMD＋指トラ＋11点フルトラ＋フェイシャル＋アイトラッキングになるまでの流れを紹介！【無線フルトラ＋アイトラ＋顔トラ】【2025年7月版】

Sectie uitgefaseerde hardware

【1】VIVE Facial Tracker-gids (alleen gezichtstracking)

Door de VIVE Facial Tracker te bevestigen aan de VIVE PRO Eye met oogtracking, kun je zowel oog- als gezichtstracking inschakelen. Het kan ook onofficieel worden bevestigd aan de Valve Index (die geen oogtracking heeft), waardoor alleen gezichtstracking wordt ingeschakeld. Verhuur is naar verluidt nog steeds beschikbaar.

VIVE Pro Eye

 

De Facial Tracker zelf werkt als de driver het kan herkennen, maar houd er rekening mee dat het gebruik ervan met andere apparaten dan de officieel ondersteunde apparaten van de fabrikant onofficieel gebruik is. Hieronder zal ik introduceren hoe je het onofficieel kunt bevestigen aan de Valve Index, die geen oogtracking heeft.

Wat is de VIVE Facial Tracker?

De VIVE Facial Tracker is een op camera gebaseerd trackingapparaat.

Iets dat ik onlangs heb geleerd is dat de Facial Tracker is stopgezet. Dat is jammer.
Dit was de beste keuze voor het beheersen van gezichtstracking, en onze site heeft het aanbevolen, maar het lijkt erop dat we een tijdje de Quest Pro moeten gebruiken.
Ik raad ook aan om Tona-san te volgen. Ze bieden altijd nuttige informatie.

 

Wat heb je nodig? (Hardware & driverinstallatie)

Voor hardware heb je de VIVE Facial Tracker nodig, en in mijn geval, aangezien ik een Valve Index heb,
heb ik een montageoplossing voorbereid. Ik verwees naar het artikel van Nemu-chan.

https://note.com/nemchan_nel/n/nb39ffd9ebef2

VIVE Facial Tracker

Als je de instructies in dat artikel volgt, zou je geen problemen moeten hebben met de hardware.

【Hardware】【1】Stap 1: Koop de Facial Tracker en bevestiging voor je HMD

【1】Stap 1: Facial Tracker
【1】Stap 2: Doujin (indie) houder (voor Index)
【1】Stap 3: USB-adapter (USB-C naar A voor Index)
zijn vereist. De USB-adapter is niet nodig als je HMD al een USB-C-poort heeft.
Het eerder genoemde artikel van Nemu-chan is voornamelijk voor Neos, dus het moet worden aangepast voor VRChat.

Er is een belangrijke opmerking van de officiële bron. Als je een USB-C-adapter gebruikt, is dat op eigen risico.

2 免責事項:

1. Pro でのみパフォーマンスを保証できます。それは、最初に認識をトレーニングした正確な位置だからです。
2. USB A (m) ～ C (f) は、実際には USB-IF 仕様に反しています。これらのアダプターには準拠する仕様がないため、自己責任で試してください。
Shen氏のツイート内容より翻訳

 

【Driver】【1】Stap 2: Driver voor de Facial Tracker

De driverlocatie is gedocumenteerd op de pagina van AkaneFacialOSC,
maar installeer het alstublieft van de officiële bron.

Wat heb je nodig? (Software)

Vervolgens moet je de avatar instellen en software installeren.
Als je avatars kunt maken in Blender, raadpleeg dan het volgende.
Als je ervaring hebt met zowel Blender als Unity, zou het kijken van de voor- en achterhelft van deze video voldoende moeten zijn.

 

 

【Software】Installeer VRCFacialOSCAvatarTool en AkaneFacialOSC

VRCFacialOSCAvatarTool
https://booth.pm/ja/items/3718123

AkaneFacialOSC
https://azw.booth.pm/items/3686598

Ik heb geleerd hoe ik gezichtstracking moet instellen door de video van Yutanii CH. te bekijken.
(Als deze methode niet werkt, probeer VRCFaceTracking zoals geïntroduceerd in het Quest Pro-installatiegedeelte.)

 

 

 

Hoe verhouden de verschillende hardwareopties zich?

Verschillen tussen Quest Pro en Vive Pro Eye 【Uit productie】

Er zijn verschillende dingen die de Quest Pro niet kan:
– Tongtracking-weergave is onnauwkeurig of werkt niet goed.

Enzovoort. Puur qua trackingprestaties is de VIVE Pro Eye + Facial Tracker beter. Gezien de beschikbaarheid is de Quest Pro waarschijnlijk de betere keuze.

Over de nauwkeurigheid van de Vive Pro Eye:

https://bop.unibe.ch/JEMR/article/view/8286/11878

Over de prestaties van verschillende HMD’s:

https://www.circuitstream.com/blog/high-end-vr-headsets-comparison-pimax-varjo-xtal-starvr-htc-focus-3-and-hp-reverb-g2-omnicept

Verschillen tussen Quest Pro en Vive Pro Eye (na update)

Beschikbaarheidsstatus

Vanaf 10 mei 2025, hier is de status van moeilijk te vinden items en items die nieuw te koop zijn.

Uit productie en moeilijk te vinden (tweedehands zoeken, enz.)

VIVE Pro Eye, VIVE Facial Tracker, Quest Pro

Beschikbaar voor nieuwe aankoop

XR Elite, Focus Vision

 

Aankomende productlanceringen voor oog-/gezichtstracking

FocusRay

Houd er rekening mee dat dit een crowdfunded product is, dus voorzichtigheid is geboden.

https://www.aoharunext.co.jp/news/focusray-release

 

Nare Facial Tracker

Dit product wordt gekocht en verkocht door een binnenlandse importdistributeur, dus u kunt zich veilig voelen vanuit regelgevingsstandpunt. De “Nare Facial Tracker” is een oog- en mondtrackingapparaat voor de Quest 3-serie en Pico 4-serie, ontwikkeld, gefabriceerd en verkocht door het Koreaanse Nare Motion. Hier is een hands-on proef van het prototype:

Quest 3やPICO 4で顔トラッキングできる！韓国発・NARE FACIAL TRACKER試用レポート

 

 

 

 

Foto’s van de echte Quest Pro

HMD’s met oog- + gezichtstracking-ondersteuning zijn beperkt. Zie hier voor details:

 

Foto’s van de echte Index-controllers

Handtracking-ondersteuning varieert per controllertype. Zie hier voor details: