Qısaca
- NVIDIA Instant NeRF, neural radiance field (NeRF) texnikası ilə bir səhnəni dəqiqələr içində təlim edə bilir.
- Quraşdırma üçün Visual Studio 2019/2022, güncel CUDA Toolkit, Python 3.7+ və CMake 3.21+ tələb olunur.
- Kamera mövqelərini müəyyən etmək üçün COLMAP istifadə olunur; giriş fotoşəkilləri fotoqrammetriya prinsiplərinə uyğun, kəskin və üst-üstə düşən olmalıdır.
- Proqram, Bézier əyrili kamera yolu redaktoru ilə səhnədən tam keyfiyyətli animasiya render edə bilir.
NVIDIA tərəfindən hazırlanan Instant NeRF (NGP Instant NeRF) proqramı, az sayda fotoşəkildən neural radiance field (NeRF) texnikası ilə 3B səhnə təlimini dəqiqələr içində mümkün edən açıq mənbəli bir alətdir. Bu yazı, aləti sıfırdan quraşdırıb ilk səhnənizi təlim etməyinizə və kamera yolu animasiyası yaratmağınıza bələdçilik edir.
Bu təlimdə nə öyrənəcəksiniz
Instant NeRF-in quraşdırma tələblərini
Keyfiyyətli giriş fotoşəkili çəkmə prinsiplərini
İnterfeysi (GUI) istifadə edərək səhnə təlimini
Bézier əyrili kamera yolu ilə animasiya render etməyi
Tələblər
Instant NeRF, NVIDIA GPU tələb edir; tensor nüvəli kartlarda performans artır. Windows üçün ikilik (binary) versiyalar mövcuddur, lakin Python bağlantılarını istifadə etmək və ya Linux-da işlətmək istəyənlər mənbə koddan dərləmə etməlidir. Dərləmə üçün lazım olan komponentlər bunlardır:
Windows: Visual Studio 2019 və ya 2022
Linux: GCC/G++ 8 və ya üstü
CUDA 11.5 və ya üstü (Windows) və ya CUDA 10.2 və ya üstü (Linux)
CMake 3.21 və ya üstü
(İstəyə bağlı) Python 3.7 və ya üstü, interaktiv bağlantılar üçün
(İstəyə bağlı) OptiX 7.3 və ya üstü, daha sürətli mesh SDF təlimi üçün
(İstəyə bağlı) Vulkan SDK, DLSS dəstəyi üçün
NVIDIA-nın öz bloq yazısına görə, Python 3.9 və CMake 3.22 ilə də dərləmə uğurla test olunub; bəzi istifadəçilər bu versiyaları üstün tutur.
Addım-addım quraşdırma və ilk səhnə
1. Deponu klonlayın
git clone --recursive https://github.com/nvlabs/instant-ngp
cd instant-ngpBu əmr, alt modullarla birlikdə bütün mənbə kodu endirir. Windows istifadəçiləri prosesi developer command prompt-da işlətməlidir.
2. CMake ilə dərləyin
cmake . -B build
cmake --build build --config RelWithDebInfo -jDərləmə uzun çəkirsə və ya uğursuz olursa, yaddaş çatışmazlığı ola bilər; bu halda -j bayrağı olmadan yenidən cəhd edin.
3. Nümunə səhnə ilə test edin
./build/instant-ngp --scene data/nerf/foxBu əmr, repoda hazır gələn bir tülkü səhnəsini təlim edir və interfeysi açır. Windows-da əyik xətlərin tərsini istifadə etmək lazımdır.
4. Öz fotoşəkilləriniz ilə səhnə hazırlayın. Çəkimi sənədli fotoqrafiya məntiqi ilə deyil, fotoqrammetriya məntiqi ilə edin: səhnədəki obyektlər çəkim boyunca sabit qalmalı, görüntülərdə hərəkət və ya fokus bulanıqlığı olmamalıdır; geniş bucaqlı lens daha çox sahə əhatə etdiyi üçün üstünlük təşkil edir. Kamera mövqelərini müəyyən etmək üçün COLMAP istifadə olunur; buna görə fotoşəkillər bir-biri ilə üst-üstə düşməli və kəskin olmalıdır.
5. İnterfeysi izləyin və təlimi dayandırın. Təlim başladıqda itki (loss) qrafiki ilk 30 saniyədə böyük ölçüdə düzəlir; görüntü keyfiyyətinin böyük hissəsi bu müddətdə formalaşır, lakin səhnə bir neçə dəqiqə ərzində yaxşılaşmağa davam edə bilər. Görüntüləyici kadr sürətini artırmaq üçün təlimi (T düyməsi) istədiyiniz an dayandıra bilərsiniz.
6. Kamera yolu ilə animasiya yaradın. İnterfeysdəki kamera yolu redaktoru, səhnədə gəzib "Add from Cam" seçimi ilə əlavə etdiyiniz hər mövqedən Bézier əyrili bir kamera trayektoriyası yaradır. "Read" ilə animasiyanı önizləyə bilər, nəticəni bəyəndikdə kamera yolunu saxlaya bilərsiniz. Tam keyfiyyətli bir video render etmək üçün saxladığınız NeRF anlıq görüntüsünü (snapshot) və kamera yolu faylını scripts qovluğundakı render skripti ilə birlikdə istifadə etməlisiniz; məsələn scripts/run.py skripti, saxlanmış bir səhnəni və kamera yolunu götürüb təyin etdiyiniz müddət, kadr sürəti və rezolyusiyada bir video faylı yaradır.
Tez-tez rastlanan xətalar
COLMAP kamera mövqelərini düzgün müəyyən edə bilmirsə, nəticə pozulur; bunun ən çox rast gəlinən səbəbi çəkim zamanı hərəkət və ya bulanıqlıqdır.
Səhnənin əhatəsi lazımından böyük və ya kiçik təyin edildikdə keyfiyyət aşağı düşə bilər; bu halda aabb_scale parametri ilə oynamaq lazım ola bilər.
Birdən çox GPU taxılı olduqda avtomatik memarlıq aşkarlanması uğursuz ola bilər; bu halda düzgün GPU-nu seçmək üçün mühit dəyişənləri istifadə olunmalıdır.
Növbəti addımlar
Əsas prosesi tamamladıqdan sonra, alətin GUI-sindəki Snapshot bölməsini istifadə edərək təlim edilmiş modeli saxlayıb yenidən yükləyə, müxtəlif render rejimləri və xəta ayıklama vizuallaşdırmaları ilə səhnəni araşdıra bilərsiniz. Python bağlantıları, eksperimentləri avtomatlaşdırmaq istəyənlər üçün GUI-dəki bütün xüsusiyyətləri əmr sətirindən istifadə etməyə imkan verir.
Mənbə və lisenziya
Bu yazı, NVIDIA-nın rəsmi developer bloqunda yayımlanan "Getting Started with NVIDIA Instant NeRFs" başlıqlı texniki bələdçi ilə NVIDIA-nın Instant NeRF tanıtım səhifəsindəki məlumatlardan Azərbaycan dilinə uyğunlaşdırılmışdır. Quraşdırma əmrləri, Apache-2.0 lisenziyalı instant-ngp layihə səhifəsindən (Hugging Face üzərindən əldə edilən camenduru/instant-ngp deposu) götürülmüş və orijinal halı ilə qorunmuşdur.
Mənbələr
3 mənbəMənbə mətnləri yenidən dərc edilmir; qısa sitatlar işarələnir, qalanı bizim xülasə və şərhimizdir.
Instant NeRF, bir məkanı az sayda fotoşəkildən sürətlə üç ölçülü hala gətirmək istəyən vizuallaşdırıcılar üçün praktik bir sınaq alətidir; arxa fonun da səhnəyə daxil edilməsi, klassik fotoqrammetriyada tez-tez itirilən ətraf konteksti qorumasıyla diqqəti çəkir. Türkiyədəki ofislər üçün tövsiyəmiz, əvvəlcə hazır Windows ikilik versiyası ilə uyğun bir NVIDIA GPU üzərində sınamaq, ehtiyac olduqda mənbə koddan dərləməyə keçməkdir.
Ancaq alət texniki bir quraşdırma prosesi tələb edir: Visual Studio, CUDA, CMake və istəyə bağlı Python mühitinə aşinalıq işi sürətləndirir. İstehsal mühitində istifadə etmədən əvvəl bir neçə sınaq səhnəsi ilə prosesi test etmək, vaxt itkisini azaldacaq.
Tez-tez verilən suallar
Instant NeRF işlətmək üçün hansı avadanlıq lazımdır?
NVIDIA GPU tələb olunur; tensor nüvəli kartlarda performans artır. Mənbələrdə paylaşılan nəticələr RTX 3090 ilə əldə edilmişdir.
Instant NeRF ilə bir səhnənin təlim edilməsi nə qədər çəkir?
Təlimin vizual keyfiyyətinin böyük hissəsi ilk 30 saniyədə əldə edilir, lakin itki qrafiki düzələnə qədər təlimə bir neçə dəqiqə daha davam edilə bilər.
Instant NeRF pulsuzdurmu?
Bəli, proqram GitHub üzərindən fərdi istifadə üçün pulsuz təqdim olunur.



