GPUHardware

2026 visionOS 27 RenderTexture-Ruckeln: Wie lässt sich das Kopieren pro Frame reduzieren?

2026 visionOS 27 RenderTexture-Ruckeln: Wie lässt sich das Kopieren pro Frame reduzieren?

Ein Editor läuft flüssig, der Simulator bleibt stabil, doch Vision Pro beginnt nach längerer Interaktion sichtbar zu ruckeln.

Die schnellste Lösung ist nicht zuerst ein Shader- oder Foveated-Rendering-Eingriff: Für visionOS 27 RenderTexture-Ruckeln sollte zunächst ein echter Geräte-Trace prüfen, ob Aktualisierungsrate, Texturgröße, Anzahl der Ziele und doppelte Renderarbeit gleichzeitig mit verpassten Frame-Fristen und höherer Systemlast auftreten.

Für wen dieser Beitrag gedacht ist:
Entwickler, die RenderTexture-Inhalte aus Unity nach RealityKit übertragen und den Engpass nicht eindeutig zuordnen können.
Performance-Engineers und technische Verantwortliche, die Vision-Pro-Tests mit reproduzierbaren Traces statt mit Einzelbeobachtungen absichern wollen.
Teams, die für Build, Gerätezugang und Testfenster eine verlässliche Umgebung benötigen und unnötige Wiederholungsläufe vermeiden möchten.

Stand: 14.09.2026. Der Versionsstatus wurde anhand der Apple Developer Veröffentlichungen und der visionOS-27-Release-Notes abgeglichen. Die technische RenderTexture-Aussage wurde gegen die PolySpatial-Dokumentation geprüft; jede Performance-Aussage bleibt geräte- und szenenabhängig.

Der erste Fehlschluss: flüssiger Editor, instabile Vision Pro

Ein typischer Fehlerfall beginnt nicht mit einem offensichtlichen Absturz. Im Unity-Editor reagiert die Szene sauber. Auch der Simulator vermittelt einen stabilen Eindruck. Auf Vision Pro wird dieselbe Anwendung dagegen zunehmend unruhig. Bewegte RenderTexture-Inhalte wirken verzögert, die Frame-Abstände werden ungleichmäßig und der Effekt verschärft sich bei längerer Nutzung.

Das ist zunächst nur ein Unterschied zwischen Ausführungspfaden. Der Editor verwendet nicht automatisch denselben Übergang über PolySpatial und RealityKit wie die Anwendung auf visionOS. Im Hybrid- oder RealityKit-Modus kann eine RenderTexture über einen GPU-Blit in eine von RealityKit bereitgestellte Textur übertragen werden. Diese Information bestätigt einen möglichen zusätzlichen Arbeitsschritt, beweist aber weder eine thermische Ursache noch einen bestimmten Performanceverlust. Genau diese Grenze beschreibt die Unity-Dokumentation zur RenderTexture-Übertragung in PolySpatial.

Vor dem ersten Optimierungsversuch werden deshalb vier Dinge eingefroren:

  1. dieselbe Szene und dieselben Interaktionsskripte,
  2. dieselben Textureingaben und Renderziele,
  3. dieselbe Bewegungs- und Interaktionsfolge,
  4. derselbe Kaltstart- und Dauerlaufablauf.

Gerätewärme, erhöhte Systemleistung, verpasste Frame-Fristen und Thermal Throttling sind dabei getrennte Beobachtungen. Ein Gerät kann mehr Leistung aufnehmen, ohne bereits thermisch zu drosseln. Eine Anwendung kann Frame-Fristen verpassen, obwohl der Thermal State unverändert bleibt. Wer diese Begriffe zusammenzieht, optimiert leicht den falschen Pfad.

Was wird tatsächlich kopiert?

Die technische Grenze zwischen Unity und RealityKit

PolySpatial ist nicht nur eine Darstellungsoption im Editor. Bei einer gemischten Pipeline muss Unity dynamische Inhalte erzeugen, als RenderTexture bereitstellen und an die RealityKit-Seite übergeben. RealityKit übernimmt anschließend die Präsentation innerhalb seines eigenen Renderpfads. Die Apple-Beschreibung der visionOS-Renderpipeline ist deshalb für die Einordnung wichtiger als eine reine Editor-Messung.

Die relevante Frage lautet nicht: „Gibt es eine Kopie?“ Eine Kopie kann technisch erforderlich sein. Die bessere Frage lautet: „Wie oft, für welche Fläche, mit wie vielen Zielen und trotz welcher Inhaltsänderung findet sie statt?“

Prüfpunkt Niedrige Priorität für eine Kopie Hohe Priorität für eine Kopie
Inhaltsänderung Inhalt bleibt statisch oder ist pausiert Inhalt ändert sich sichtbar in jedem Aktualisierungszyklus
Sichtbarkeit Ziel ist verdeckt, außerhalb der relevanten Ansicht oder deaktiviert Ziel bleibt dauerhaft sichtbar
Aktualisierung Nur bei Änderung oder Interaktion Bedingungsloser Aufruf in Update
Zielanzahl Ein notwendiges Ziel Mehrere parallele RenderTexture-Ausgaben
Verarbeitung Ein klar zuordenbarer Übergang Unity-Rendering, Blit, PolySpatial-Transfer und RealityKit-Ausgabe für denselben Effekt

Diese Tabelle ist kein Ersatz für einen Trace. Sie legt nur fest, welche Hypothese zuerst geprüft wird. Gerade bei einer gemischten Pipeline darf die Existenz eines GPU-Blits nicht als Beweis für Thermal Throttling formuliert werden.

RealityKit Trace als Kausalitätsprüfung

Der Trace muss mindestens drei Zeitachsen zusammenführen:

  • Frame-Lebenszyklus und Frame-Fristen,
  • RenderTexture- und Transferereignisse,
  • Systemleistungsdaten und Thermal State.

Zusätzlich werden Anwendungssignale gesetzt. Markierungen für Camera.Render, die eigentliche RenderTexture-Aktualisierung und MarkDirty machen sichtbar, ob der Auslöser in der Anwendung oder später im Übergang liegt. Die Apple-Anleitung zur Performanceanalyse von visionOS-Apps dient dabei als methodischer Rahmen.

Achtung: Mehr Kopierereignisse und ein ruckelndes Bild reichen nicht für die Diagnose „Thermal Throttling“. Wenn der Thermal State nicht mit der Laständerung ansteigt, wird zuerst ein gewöhnlicher GPU-, Synchronisations- oder Übergabeengpass untersucht.

Ein belastbarer Zusammenhang sieht anders aus: Nach einer klaren Änderung der Aktualisierungslogik sinkt die beobachtete Kopierarbeit, die Frame-Fristen werden seltener verpasst und die Systemlast verändert sich unter identischen Testbedingungen in dieselbe Richtung. Bleibt der Thermal State unverändert, wird weiterhin nicht von einer thermischen Drosselung gesprochen.

Zwei frühe Entscheidungen statt pauschaler Qualitätsreduzierung

Die erste Gegenüberstellung betrifft nicht „hohe“ gegen „niedrige“ Qualität. Sie betrifft die Ursache der Arbeit.

Befund im Trace Wahrscheinlichere Arbeitshypothese Nächste Maßnahme
MarkDirty und RenderTexture-Aktualisierung erscheinen auch ohne sichtbare Änderung Nutzlose Aktualisierung Update-Gate einbauen
Kopierereignisse bleiben häufig, obwohl ein Ziel unsichtbar ist Sichtbarkeit wird nicht berücksichtigt Sichtbare Ziele priorisieren
Eine einzelne große Ausgabe dominiert den Übergang Flächen- oder Formatlast Zielgröße und Format mit Dokumentation und Gerätebuild prüfen
Mehrere Ausgaben treten zeitgleich auf Parallele Transferlast Ziele einzeln deaktivieren und isolieren
Unity rendert einen Effekt, RealityKit stellt denselben Inhalt erneut bereit Doppelte Zuständigkeit Inhaltseigentum neu festlegen
Kopierlast steigt, Thermal State bleibt stabil Noch kein Beleg für thermische Drosselung Synchronisation und GPU-Zeit weiter prüfen
Frame-Fristen und Thermal State verschlechtern sich gemeinsam Thermischer Zusammenhang möglich Kontrolltest mit identischer Szene durchführen

Die Apple-Empfehlungen zur Reduzierung der RealityKit-Renderkosten helfen bei der Einordnung der RealityKit-Seite. Sie ersetzen aber keine Prüfung, welche Arbeit aus Unity stammt und wie sie übertragen wird.

Unveränderte Inhalte nicht weiterreichen

Die häufigste konkrete Ursache ist ein Update, das aus Gewohnheit in jedem Update-Durchlauf ausgeführt wird. Camera.Render erzeugt dann eine neue Ausgabe, und MarkDirty signalisiert eine Änderung, obwohl die dargestellte Information unverändert bleibt. Die Anwendung bezahlt dadurch möglicherweise denselben Übergang wiederholt.

Sinnvoll ist ein Update-Gate mit drei Bedingungen:

  • Inhalt: Hat sich die Szene, Kameraausgabe oder Eingabe seit dem letzten gültigen Transfer verändert?
  • Sichtbarkeit: Ist das Ziel für die aktuelle Darstellung relevant?
  • Interaktion: Muss die Ausgabe wegen einer Nutzeraktion sofort aktualisiert werden?

Für statische Inhalte kann ein einmaliger Transfer genügen. Für pausierte Vorschauen kann die Aktualisierung vollständig aussetzen. Für nicht kritische Anzeigen kann eine niedrigere Frequenz getestet werden. Die konkrete Frequenz wird nicht als allgemeingültige Zahl vorgegeben, weil sie von Gerät, Szene und visueller Aufgabe abhängt.

Der Testablauf bleibt streng:

  1. Baseline mit unveränderter Logik auf Vision Pro aufzeichnen.
  2. Nur das Inhalts-Gate aktivieren.
  3. Einen zweiten Trace unter identischen Bedingungen aufnehmen.
  4. Nur danach Sichtbarkeit und Interaktion ergänzen.
  5. Jede Änderung mit einem Rückschalter versehen.

So wird vermieden, dass eine gleichzeitig veränderte Geschäftslogik fälschlich als RenderTexture-Gewinn erscheint.

FAQ: PolySpatial, MarkDirty und der Gerätevergleich

Die folgenden Antworten trennen die fünf häufigsten Such- und Diagnoseabsichten voneinander. Sie sind bewusst keine pauschalen Optimierungsversprechen.

Texturgröße, Format und Anzahl einzeln isolieren

Wenn ein Update-Gate nicht genügt, wird die Transferlast in Einzelteile zerlegt. Zunächst bleibt nur ein RenderTexture-Ziel aktiv. Danach werden weitere Ziele einzeln zugeschaltet. So zeigt sich, ob ein einzelnes Ziel dominiert oder mehrere moderate Ausgaben zusammen die Last erzeugen.

Danach werden Zielgröße und Format geprüft. Die PolySpatial-Dokumentation beschreibt den vorgesehenen RenderTexture-Pfad, aber die tatsächlich nutzbare Kombination muss zum aktuellen Package, zum visionOS-Build und zum Gerät passen. Formate aus anderen Plattformprojekten werden nicht einfach übernommen. Der Build auf Vision Pro entscheidet, ob die gewählte Konfiguration kompatibel und stabil ist.

Die sinnvolle Reihenfolge lautet:

  1. Anzahl der aktiven Ziele reduzieren.
  2. Nicht sichtbare Ziele deaktivieren.
  3. Große oder nicht kritische Ausgaben separat prüfen.
  4. Format gegen die aktuelle Dokumentation und den Gerätebuild abgleichen.
  5. Erst danach eine dauerhaft niedrigere Zielqualität übernehmen.

Das verhindert, dass eine pauschale Reduzierung mehrere Ursachen gleichzeitig verdeckt. Ein einzelnes großes Ziel kann anders reagieren als viele kleinere. Ohne isolierte Traces bleibt diese Unterscheidung Spekulation.

Unity und RealityKit: Zuständigkeit statt Doppelarbeit

Eine gemischte Pipeline ist nicht automatisch falsch. Sie wird problematisch, wenn derselbe visuelle Zweck mehrfach erfüllt wird. Ein dynamischer Unity-Effekt wird als RenderTexture ausgegeben, über PolySpatial übertragen und anschließend durch RealityKit-Komponenten ergänzt, die eine ähnliche Darstellung erzeugen. In diesem Fall muss der Trace zeigen, welcher Teil tatsächlich benötigt wird.

Für statische oder niedrig interaktive Inhalte kann eine native RealityKit-Darstellung sinnvoll sein, wenn sie die visuellen Anforderungen erfüllt. Das ist keine pauschale Empfehlung, alles aus Unity zu entfernen. Unity-spezifische Logik, komplexe dynamische Inhalte oder bestehende Produktionsabhängigkeiten können die RenderTexture weiterhin rechtfertigen.

Die Entscheidung wird pro Inhalt getroffen:

  • Ist die Ausgabe dynamisch oder statisch?
  • Muss sie aus Unity stammen?
  • Ist sie dauerhaft sichtbar?
  • Welche Trace-Zeit ist eindeutig dieser Ausgabe zugeordnet?
  • Entsteht nach dem Transfer nochmals vergleichbare Arbeit in RealityKit?
  • Verändert eine native Darstellung die gewünschte Interaktion oder nur die technische Zuständigkeit?

Die Apple-Anleitung zur Erstellung eines visionOS-Performanceplans unterstützt diese Art der Zieldefinition. Der entscheidende Maßstab bleibt die zuordenbare Arbeit unter realen Bedingungen, nicht die pauschale Forderung nach einer bestimmten Engine.

Die fünfstufige Abbau-Reihenfolge

Nach der Ursachenprüfung wird die Pipeline in einer festen Reihenfolge reduziert:

  1. Nutzlose Updates stoppen.
    Camera.Render und MarkDirty dürfen nicht laufen, wenn Inhalt, Sichtbarkeit und Interaktion keine Änderung verlangen.

  2. Aktualisierung für Nebeninhalte begrenzen.
    Vorschauen, Hintergrundanzeigen und nicht kritische Flächen erhalten nur dann eine neue Ausgabe, wenn der Nutzer sie tatsächlich benötigt.

  3. Texturlast verkleinern.
    Zielgröße und zulässiges Format werden einzeln geprüft. Die aktuelle PolySpatial-Dokumentation und ein echter Gerätebuild sind dafür verbindlich.

  4. Parallele Ziele verringern.
    Nicht benötigte RenderTexture-Ausgaben werden entfernt oder nacheinander isoliert. Gemeinsame Ausgaben werden nur dann zusammengelegt, wenn die visuelle Nutzung dies erlaubt.

  5. Inhaltseigentum neu ordnen.
    Inhalte, die RealityKit ohne dauernde Unity-Übertragung ausreichend darstellen kann, werden aus dem kontinuierlichen Kopierpfad herausgelöst. Unity-spezifische Inhalte bleiben erhalten, werden aber räumlich und zeitlich begrenzt übertragen.

Diese Reihenfolge verhindert, dass sofort sämtliche Qualitätsparameter abgesenkt werden. Wenn bereits Schritt eins die Kopierereignisse reduziert, wäre eine zusätzliche Verkleinerung der Textur möglicherweise unnötig.

Erfahrung aus der Fehlersuche: Ein Update-Gate muss reversibel bleiben. Ohne Rückschalter lässt sich nach einer Änderung nicht sicher feststellen, ob weniger Ruckeln aus einer echten Entlastung oder aus einer unbemerkten Funktionsänderung stammt.

Checkliste für den belastbaren Gerätevergleich

  • [ ] Szene, Interaktionsskript und Eingabefolge unverändert festlegen.
  • [ ] Kaltstart, stabile Interaktion und längere Nutzung getrennt protokollieren.
  • [ ] Camera.Render, RenderTexture-Aktualisierung und MarkDirty markieren.
  • [ ] Frame-Fristen, Kopierereignisse, Systemleistungsdaten und Thermal State gemeinsam betrachten.
  • [ ] Einen Baseline-Trace ohne Optimierung sichern.
  • [ ] Zuerst nur nutzlose Aktualisierungen abschalten.
  • [ ] Danach nur die Aktualisierungsbedingung für Nebeninhalte ändern.
  • [ ] RenderTexture-Anzahl einzeln reduzieren.
  • [ ] Zielgröße und Format ausschließlich mit aktueller Dokumentation und Gerätebuild bewerten.
  • [ ] Unity- und RealityKit-Zuständigkeit pro Inhalt dokumentieren.
  • [ ] Nach jeder Änderung einen identischen Kontroll-Trace aufnehmen.
  • [ ] Eine Änderung nur dann als erfolgreich werten, wenn Frame-Fristen und die zugehörige Lastentwicklung zusammenpassen.
  • [ ] Bei widersprüchlichen Signalen die thermische Diagnose zurückstellen und den GPU- oder Synchronisationspfad weiter untersuchen.

Vom Trace zur Testmatrix

Eine kleine Testmatrix ist wertvoller als viele unkontrollierte Einzelversuche. Sie enthält mindestens die unveränderte Baseline, ein Update-Gate, die Reduktion nicht sichtbarer Ziele, eine isolierte Texturlast und die geänderte Inhaltszuordnung. Jede Variante verwendet dieselbe Szene und dieselben Eingaben.

Für jede Variante werden vier Zustände aufgezeichnet:

  • Kaltstart,
  • stabile Interaktion,
  • fortgesetzter Betrieb,
  • Rückkehr zur ursprünglichen Einstellung.

Damit wird auch geprüft, ob eine Optimierung nur im ersten Lauf funktioniert. Eine Anwendung kann anfangs unauffällig sein und erst später durch anhaltende Arbeit problematisch werden. Umgekehrt kann eine kurzfristige Schwankung verschwinden, ohne dass die RenderTexture-Kopie die Ursache war.

Die Abschlussbewertung benötigt eine geschlossene Beweiskette: weniger oder gezieltere Aktualisierungen, passende Veränderung der Kopierarbeit, weniger verpasste Frame-Fristen und eine nachvollziehbare Entwicklung der System- beziehungsweise thermischen Signale. Fehlt ein Glied, bleibt die Aussage „RenderTexture-Downgrade behoben Thermal Throttling“ zu stark.

Wenn der Gerätezugang die eigentliche Engstelle ist

Für kleine Teams entsteht neben der technischen Arbeit ein organisatorisches Problem: Ein wiederholbarer Vision-Pro-Test benötigt eine feste Gerätekonfiguration, einen konsistenten visionOS-Stand und ausreichend Zeit für Baseline- und Kontroll-Traces. Ein wechselndes Gerät oder ein neues System zwischen zwei Läufen macht den Vergleich wertlos.

Die beste kurzfristige Vorgehensweise ist deshalb nicht automatisch eine dauerhafte Infrastrukturentscheidung. Zuerst wird der kleinste reproduzierbare Testplan vorbereitet: ein Unity-6-Build, eine definierte PolySpatial-Konfiguration, eine feste RealityKit-Szene und die benötigten Markierungen. Danach wird ein Mac-Build-Umfeld mit einem geplanten Apple-Vision-Pro-Testfenster kombiniert. Entscheidend ist, dass Gerät, Systemversion und Trace-Bedingungen für Vorher-Nachher-Vergleiche erhalten bleiben.

Wer dafür eine verwaltete Umgebung benötigt, kann die ProxyMac-Hilfe für die Umgebungsplanung prüfen und den Zugriff über die ProxyMac-Konsole organisieren. Für Teams mit sensiblen Projektdateien gehört außerdem die Prüfung der ProxyMac-Datenschutzinformationen in die Freigabe. Das ersetzt keine Vision-Pro-Messung, kann aber wiederholbare Build- und Testabläufe vorbereiten.

Eine lokale Workstation bleibt sinnvoll, wenn das Team dauerhaft hohe Last fährt, physische Schnittstellen benötigt oder täglich auf dieselbe Hardware zugreifen muss. Für einen zeitlich begrenzten Diagnosezyklus ist der Eigenkauf dagegen oft unflexibel: Hardware muss beschafft, eingerichtet und anschließend weiter betrieben werden, obwohl nur ein klar abgegrenztes Trace-Fenster gebraucht wird. Andere Cloud- oder Simulatorlösungen lösen zudem nicht automatisch die fehlende Aussagekraft des echten Vision-Pro-Geräts.

Für diesen konkreten Fall ist das Mieten eines Mac über ProxyMac dann die passendere Ergänzung, wenn Build-Zeit, reproduzierbare Projektumgebung und ein abgestimmtes Testfenster fehlen. Der Vorteil liegt nicht in einem pauschalen Performanceversprechen, sondern darin, die gleiche Build- und Trace-Vorbereitung wiederholbar zu machen. Die eigentliche thermische und visuelle Aussage entsteht weiterhin auf Vision Pro unter identischen Bedingungen.

FAQ

Warum wird eine RenderTexture in PolySpatial überhaupt nach RealityKit kopiert?+
Im Hybrid- oder RealityKit-Modus muss der Inhalt aus Unity in eine von RealityKit verwaltete Darstellung überführt werden. Die offizielle PolySpatial-Dokumentation beschreibt dafür einen GPU-Blit in die bereitgestellte Textur. Das bedeutet nicht automatisch, dass jede Kopie problematisch ist. Entscheidend sind Aktualisierungsrate, Texturgröße, Anzahl paralleler Ziele und die Frage, ob sich der Inhalt überhaupt verändert.
Kann MarkDirty bei jedem Frame auf Vision Pro zu Ruckeln führen?+
Ja, ein bedingungsloser MarkDirty-Aufruf kann unnötige Aktualisierungen auslösen, wenn die RenderTexture inhaltlich unverändert bleibt. Er ist jedoch kein alleiniger Beweis für die Ursache. Zuerst sollte ein Trace zeigen, ob die MarkDirty-Zeitpunkte mit Kopierereignissen, verpassten Frame-Fristen und höherer Systemlast zusammenfallen. Erst danach ist eine Aktualisierungssteuerung sinnvoll.
Wie erkennt man in Unity 6, ob RenderTexture-Kopien thermischen Druck auslösen?+
Unity 6 liefert den Anwendungskontext, aber die thermische Einordnung erfolgt auf dem echten Gerät. Markieren Sie Camera.Render, RenderTexture-Aktualisierung und MarkDirty per Log oder Signpost. Vergleichen Sie diese Zeitpunkte in RealityKit Trace mit Frame-Lebenszyklus, Systemleistungsdaten und Thermal State. Steigt nur die Kopierlast, nicht aber der Thermal State, liegt zunächst ein Synchronisations- oder GPU-Problem näher.
Wie lässt sich die RenderTexture-Aktualisierung auf visionOS reduzieren?+
Die sicherste Reihenfolge beginnt mit einer Inhaltsprüfung: Aktualisieren Sie nur bei einer sichtbaren oder tatsächlich veränderten Ausgabe. Danach kann die Frequenz für nicht kritische Inhalte reduziert werden. Erst wenn die Trace-Daten weiterhin eine hohe Last zeigen, folgen kleinere Texturen, weniger parallele Ziele oder eine andere Inhaltszuordnung. Jede Änderung sollte einzeln getestet und rückschaltbar bleiben.
Was ist zu tun, wenn der Simulator flüssig läuft, Vision Pro aber dauerhaft ruckelt?+
Der Simulator und der Editor bilden nicht automatisch den Gerätepfad mit RealityKit und PolySpatial ab. Reproduzieren Sie deshalb eine feste Szene mit identischen Eingaben auf Vision Pro. Zeichnen Sie einen Trace vom Kaltstart bis zum stabilen Betrieb auf und setzen Sie eigene Markierungen für RenderTexture-Ereignisse. So lässt sich trennen, ob Kopien, Frame-Fristen, Sichtbarkeit oder thermische Zustände die Abweichung erklären.

Ihre Mac-Umgebung für reproduzierbare Entwicklungstests

Mit ProxyMac greifen Sie flexibel auf einen remote bereitgestellten Mac für Entwicklung, Builds und Leistungstests zu.
Nutzen Sie eine kontrollierte Umgebung, um Ruckeln, Renderzeiten und andere Performance-Probleme systematisch zu untersuchen.