Son xəbərlər
Chaos Vantage Scene States ilə gecə-gündüz və material variasiyalarını tək səhnədən idarəetmə bələdçisiCorona Renderer və D5 Render-də real caustics necə aktivləşdirilir: bələdçiRunway Gen-4 ilə memarlıq render videoları: kamera hərəkəti prompt bələdçisiEnscape Visual Settings Preset-ləri ilə Təqdimat Hazırlığını Sürətləndirmə BələdçisiVeras 5.3 NODES ilə öz render iş axınınızı qurmaq: addım-addım bələdçiLyria 3.5 Clip Preview ilə memarlıq təqdimat videoları üçün musiqi yaratma bələdçisiToonflow: qısa dramalar və video istehsalı üçün açıq mənbəli süni intellekt platformasıInstant NeRF ilə fotoşəkildən dəqiqələr içində 3B səhnə təlimi: quraşdırma və addımlarV-Ray-də Gaussian Splat istifadəsi: Maya üçün addım-addım bələdçiChaos Scatter ilə təbii bitki örtüyü paylanması: 3ds Max və Vantage bələdçisi
TəlimlərNVIDIAInstant NeRF

Instant NeRF ilə fotoşəkildən dəqiqələr içində 3B səhnə təlimi: quraşdırma və addımlar

NVIDIA Instant NeRF, az sayda fotoşəkildən dəqiqələr içində 3B səhnə təlimi edən açıq mənbəli bir alətdir; quraşdırma, ilk səhnə təlimi və kamera yolu animasiyası bu yazıda addım-addım izah olunur.

Fotoşəkildən rəqəmsal nöqtə buludunа çevrilən bir daxili məkan səhnəsi görüntüsüSüni intellekt şəkli
Təmsili şəkil, süni intellektlə yaradılıb.Şəkil: 3dsınıfı / FCA AI

Qısaca

  1. NVIDIA Instant NeRF, neural radiance field (NeRF) texnikası ilə bir səhnəni dəqiqələr içində təlim edə bilir.
  2. Quraşdırma üçün Visual Studio 2019/2022, güncel CUDA Toolkit, Python 3.7+ və CMake 3.21+ tələb olunur.
  3. Kamera mövqelərini müəyyən etmək üçün COLMAP istifadə olunur; giriş fotoşəkilləri fotoqrammetriya prinsiplərinə uyğun, kəskin və üst-üstə düşən olmalıdır.
  4. Proqram, Bézier əyrili kamera yolu redaktoru ilə səhnədən tam keyfiyyətli animasiya render edə bilir.

NVIDIA tərəfindən hazırlanan Instant NeRF (NGP Instant NeRF) proqramı, az sayda fotoşəkildən neural radiance field (NeRF) texnikası ilə 3B səhnə təlimini dəqiqələr içində mümkün edən açıq mənbəli bir alətdir. Bu yazı, aləti sıfırdan quraşdırıb ilk səhnənizi təlim etməyinizə və kamera yolu animasiyası yaratmağınıza bələdçilik edir.

Bu təlimdə nə öyrənəcəksiniz

  • Instant NeRF-in quraşdırma tələblərini

  • Keyfiyyətli giriş fotoşəkili çəkmə prinsiplərini

  • İnterfeysi (GUI) istifadə edərək səhnə təlimini

  • Bézier əyrili kamera yolu ilə animasiya render etməyi

Tələblər

Instant NeRF, NVIDIA GPU tələb edir; tensor nüvəli kartlarda performans artır. Windows üçün ikilik (binary) versiyalar mövcuddur, lakin Python bağlantılarını istifadə etmək və ya Linux-da işlətmək istəyənlər mənbə koddan dərləmə etməlidir. Dərləmə üçün lazım olan komponentlər bunlardır:

  • Windows: Visual Studio 2019 və ya 2022

  • Linux: GCC/G++ 8 və ya üstü

  • CUDA 11.5 və ya üstü (Windows) və ya CUDA 10.2 və ya üstü (Linux)

  • CMake 3.21 və ya üstü

  • (İstəyə bağlı) Python 3.7 və ya üstü, interaktiv bağlantılar üçün

  • (İstəyə bağlı) OptiX 7.3 və ya üstü, daha sürətli mesh SDF təlimi üçün

  • (İstəyə bağlı) Vulkan SDK, DLSS dəstəyi üçün

NVIDIA-nın öz bloq yazısına görə, Python 3.9 və CMake 3.22 ilə də dərləmə uğurla test olunub; bəzi istifadəçilər bu versiyaları üstün tutur.

Addım-addım quraşdırma və ilk səhnə

1. Deponu klonlayın

Prompt
git clone --recursive https://github.com/nvlabs/instant-ngp
cd instant-ngp

Bu əmr, alt modullarla birlikdə bütün mənbə kodu endirir. Windows istifadəçiləri prosesi developer command prompt-da işlətməlidir.

2. CMake ilə dərləyin

Prompt
cmake . -B build
cmake --build build --config RelWithDebInfo -j

Dərləmə uzun çəkirsə və ya uğursuz olursa, yaddaş çatışmazlığı ola bilər; bu halda -j bayrağı olmadan yenidən cəhd edin.

3. Nümunə səhnə ilə test edin

Prompt
./build/instant-ngp --scene data/nerf/fox

Bu əmr, repoda hazır gələn bir tülkü səhnəsini təlim edir və interfeysi açır. Windows-da əyik xətlərin tərsini istifadə etmək lazımdır.

4. Öz fotoşəkilləriniz ilə səhnə hazırlayın. Çəkimi sənədli fotoqrafiya məntiqi ilə deyil, fotoqrammetriya məntiqi ilə edin: səhnədəki obyektlər çəkim boyunca sabit qalmalı, görüntülərdə hərəkət və ya fokus bulanıqlığı olmamalıdır; geniş bucaqlı lens daha çox sahə əhatə etdiyi üçün üstünlük təşkil edir. Kamera mövqelərini müəyyən etmək üçün COLMAP istifadə olunur; buna görə fotoşəkillər bir-biri ilə üst-üstə düşməli və kəskin olmalıdır.

5. İnterfeysi izləyin və təlimi dayandırın. Təlim başladıqda itki (loss) qrafiki ilk 30 saniyədə böyük ölçüdə düzəlir; görüntü keyfiyyətinin böyük hissəsi bu müddətdə formalaşır, lakin səhnə bir neçə dəqiqə ərzində yaxşılaşmağa davam edə bilər. Görüntüləyici kadr sürətini artırmaq üçün təlimi (T düyməsi) istədiyiniz an dayandıra bilərsiniz.

6. Kamera yolu ilə animasiya yaradın. İnterfeysdəki kamera yolu redaktoru, səhnədə gəzib "Add from Cam" seçimi ilə əlavə etdiyiniz hər mövqedən Bézier əyrili bir kamera trayektoriyası yaradır. "Read" ilə animasiyanı önizləyə bilər, nəticəni bəyəndikdə kamera yolunu saxlaya bilərsiniz. Tam keyfiyyətli bir video render etmək üçün saxladığınız NeRF anlıq görüntüsünü (snapshot) və kamera yolu faylını scripts qovluğundakı render skripti ilə birlikdə istifadə etməlisiniz; məsələn scripts/run.py skripti, saxlanmış bir səhnəni və kamera yolunu götürüb təyin etdiyiniz müddət, kadr sürəti və rezolyusiyada bir video faylı yaradır.

Tez-tez rastlanan xətalar

  • COLMAP kamera mövqelərini düzgün müəyyən edə bilmirsə, nəticə pozulur; bunun ən çox rast gəlinən səbəbi çəkim zamanı hərəkət və ya bulanıqlıqdır.

  • Səhnənin əhatəsi lazımından böyük və ya kiçik təyin edildikdə keyfiyyət aşağı düşə bilər; bu halda aabb_scale parametri ilə oynamaq lazım ola bilər.

  • Birdən çox GPU taxılı olduqda avtomatik memarlıq aşkarlanması uğursuz ola bilər; bu halda düzgün GPU-nu seçmək üçün mühit dəyişənləri istifadə olunmalıdır.

Növbəti addımlar

Əsas prosesi tamamladıqdan sonra, alətin GUI-sindəki Snapshot bölməsini istifadə edərək təlim edilmiş modeli saxlayıb yenidən yükləyə, müxtəlif render rejimləri və xəta ayıklama vizuallaşdırmaları ilə səhnəni araşdıra bilərsiniz. Python bağlantıları, eksperimentləri avtomatlaşdırmaq istəyənlər üçün GUI-dəki bütün xüsusiyyətləri əmr sətirindən istifadə etməyə imkan verir.

Mənbə və lisenziya

Bu yazı, NVIDIA-nın rəsmi developer bloqunda yayımlanan "Getting Started with NVIDIA Instant NeRFs" başlıqlı texniki bələdçi ilə NVIDIA-nın Instant NeRF tanıtım səhifəsindəki məlumatlardan Azərbaycan dilinə uyğunlaşdırılmışdır. Quraşdırma əmrləri, Apache-2.0 lisenziyalı instant-ngp layihə səhifəsindən (Hugging Face üzərindən əldə edilən camenduru/instant-ngp deposu) götürülmüş və orijinal halı ilə qorunmuşdur.

Mənbələr

3 mənbə
N
nvidia.comnvidia.com/en-us/research/nerf-sweepstakes
Xülasə
D
developer.nvidia.comdeveloper.nvidia.com/blog/getting-started-with-nvidia-instant-nerfs
Xülasə
H(
huggingface.co (Apache-2.0)huggingface.co/camenduru/instant-ngp
Sitat

Mənbə mətnləri yenidən dərc edilmir; qısa sitatlar işarələnir, qalanı bizim xülasə və şərhimizdir.

3dsınıfı rəyi
3dRedaktorun qiymətləndirməsi

Instant NeRF, bir məkanı az sayda fotoşəkildən sürətlə üç ölçülü hala gətirmək istəyən vizuallaşdırıcılar üçün praktik bir sınaq alətidir; arxa fonun da səhnəyə daxil edilməsi, klassik fotoqrammetriyada tez-tez itirilən ətraf konteksti qorumasıyla diqqəti çəkir. Türkiyədəki ofislər üçün tövsiyəmiz, əvvəlcə hazır Windows ikilik versiyası ilə uyğun bir NVIDIA GPU üzərində sınamaq, ehtiyac olduqda mənbə koddan dərləməyə keçməkdir.

Ancaq alət texniki bir quraşdırma prosesi tələb edir: Visual Studio, CUDA, CMake və istəyə bağlı Python mühitinə aşinalıq işi sürətləndirir. İstehsal mühitində istifadə etmədən əvvəl bir neçə sınaq səhnəsi ilə prosesi test etmək, vaxt itkisini azaldacaq.

Tez-tez verilən suallar

Instant NeRF işlətmək üçün hansı avadanlıq lazımdır?

NVIDIA GPU tələb olunur; tensor nüvəli kartlarda performans artır. Mənbələrdə paylaşılan nəticələr RTX 3090 ilə əldə edilmişdir.

Instant NeRF ilə bir səhnənin təlim edilməsi nə qədər çəkir?

Təlimin vizual keyfiyyətinin böyük hissəsi ilk 30 saniyədə əldə edilir, lakin itki qrafiki düzələnə qədər təlimə bir neçə dəqiqə daha davam edilə bilər.

Instant NeRF pulsuzdurmu?

Bəli, proqram GitHub üzərindən fərdi istifadə üçün pulsuz təqdim olunur.

Şərhlər və forum türkcədir.Müzakirəyə qoşulun
+

Əlaqəli xəbərlər