Skyfall-GS – Synthesizing Immersive 3D Urban Scenes from Satellite Imagery
Skyfall-GS — это инновационный фреймворк, преобразующий спутниковые изображения в интерактивные 3D городские сцены без необходимости в дорогих 3D аннотациях. Исследователи из Национального университета Ян Мин Чао Тунг и других институтов объединили спутниковые снимки для создания базовой геометрии с диффузионными моделями для детализированных текстур, что позволило создать масштабируемые городские кварталы с реалистичной визуализацией.
Метод работает в два этапа: сначала реконструирует начальную 3D-сцену с помощью 3DGS и псевдо-глубинного контроля, затем применяет итеративную технику обновления наборов данных (IDU) с использованием предобученной диффузионной модели. Это значительно снижает артефакты и повышает точность геометрии и реализм текстур. Результаты демонстрируют улучшенную согласованность геометрии и более реалистичные текстуры по сравнению с существующими подходами, с возможностью реального времени и свободного навигации по созданным сценам.
Комментарии (33)
- Обсуждение началось с критики маркетингового словосочетания «explorable» и «immersive» при невозможности проникнуть под уровень крыш зданий из-за ограничений спутниковых снимков и последующих артефактов Gaussian Splatting'а.
- Участники обсудили, что Microsoft Flight Simulator использует подобную технологию, но при этом в игре используется треугольная геометрия, а не гауссовы сплаты, потому что последние не позволяют создать коллизионную геометрию и другие ограничения.
- Была высказана идея, что в будущем можно будет интегрировать Street View данные, что может привести к еще более детальному и точному моделированию.
- Также было отмечено, что в будущем можно будет использовать дроновые снимки для более детального моделирования, что может привести к более иммерсивному опыту.
World Wide Lightning Location Network
WWLLN — глобальная сеть датчиков молний Университета Вашингтона, фиксирует разряды по всей планете.
Сообщения
- 28 мая 2024: спутниковые анимации временно недоступны.
- 30 янв. 2023: запущен новый сайт; старый остаётся.
Полезные ссылки
- Публикации (>2 200 работ)
- Тропические циклоны
- Климатология молний
- Вулканический монитор
- Google Earth-файл
- Серверы: Seattle / NZ
Карты
- Молнии за час: белые — последние 10 мин, далее жёлтый → бордовый (60 мин). Зелёные — активные датчики.
- Суточная плотность вспышек обновляется после 00 UTC.
Анимации
Видео WWLLN (синие точки) поверх спутниковых снимков:
GOES-19 CONUS, Himawari Full Disk, SE Asia, Central Pacific, North Pacific.
Спектрограммы
VLF-спектры со всех датчиков.
Как работает
- Для расчёта координат нужно ≥5 датчиков, расположенных на тысячи км.
- Детектируется ~30 % разрядов ≥30 кА.
- Сейчас >70 датчиков; требуется ~500 для равномерного покрытия каждые 1000 км.
- Принимаем заявки на размещение датчиков: хост получает все мировые данные бесплатно.
Данные
Архив с 15 авг 2004 г. продаётся; участники сети получают ежемесячную подписку бесплатно, данные каждые 10 мин.
Комментарии (31)
- Системы обнаружения молний (WWLLN, Blitzortung) используют сети приёмников с точными GPS-временными метками для триангуляции разрядов.
- Blitzortung.org работает на обычном железе (STM32) и предоставляет карты на lightningmaps.org и map.blitzortung.org.
- Точность позиционирования — до 5 км при 100 нс синхронизации; южное полушарие лучше покрыто WWLLN.
- Данные в реальном времени бесплатны, но полные логи и API обычно платные.
- Участники обсуждали навигационные идеи, искажения Меркатора и «живые» звуковые эффекты гроз.