スタジオダックビル合同会社代表/空間3D/Photogrammetry/Gaussian Splatting/ドローン 動画⇒piped.video/channel/UCvXk3ww… 3D⇒sketchfab.com/DuckbillStudio

日本 神奈川
『あなたの3Dシーンが歩ける世界になる』 🔍 数百万点の3DGS点群からブラウザ内で地形を自動解析→歩行可能エリアを検出 🚶 アバターが自律歩行 ☁️ サーバー不要、ブラウザオンリー 📱 スマホもタッチ操作で動く SplatStroll Avatar テスト版を公開しました! URL👇
3
85
476
157,721
SparkJS v2.2.0は確かに体感では軽く(速く)なっている感じ。同一シーンでPlaycanvasとの比較もそのうちやります。
SparkJSがv2.2.0にアップデートされていた。 大幅にパフォーマンス向上だそう。 これは見逃せません。
14
1,800
Spirula Studioのマルチソースのアライメント成功! Osmo360 2台リグのデュアル魚眼(.osv)の動画6本、ドローンの4K動画3本、ドローン写真350枚を、そのまま入力して見事に繋げてくれました。 抽出した動画フレーム+写真は5,249枚の規模。
3
11
67
3,110
各画像の左が入力した動画/写真で右が3DGSのレンダリング結果。比較表示が簡単なのもいいですね。 3DGSでは海面の反射成分が消え、海底の砂地の部分などが分かるようになるのも面白いところ。
5
399
SparkJSがv2.2.0にアップデートされていた。 大幅にパフォーマンス向上だそう。 これは見逃せません。
SparkJS 2.2.0 is out packing tons of bug fixes an improvements. Enjoy! 🎉 🥳 20% faster splat sorting, 14% FPS gains in some systems, 50% smaller bundle size and more. Dive into the full detailed change log github.com/sparkjsdev/spark/…
9
3,263
はやい! issueに上げたら速攻でMrNeRFさん(@janusch_patas)が修正してくれました。 要望や不具合を見つけたら、どんどん報告しよう😀
素朴な疑問。 なぜLichtFeld Studioのポストプロセスでvignetteがデフォルトでオンなんだろう? 周辺部が暗くなるのが学習結果なのか、表示効果なのか分からなく弊害がある。毎度オフにするのが面倒。 何らかの意図がありそうだがIssueに上げとく?
1
1
21
2,071
10mmレンズで撮影した写真を10mmで3DGSレンダリング。(これはヴィネットありだとそれっぽい) ミラーレス写真がソースの3DGS品質はLichtFeldに一日の長があるなあ。
素朴な疑問。 なぜLichtFeld Studioのポストプロセスでvignetteがデフォルトでオンなんだろう? 周辺部が暗くなるのが学習結果なのか、表示効果なのか分からなく弊害がある。毎度オフにするのが面倒。 何らかの意図がありそうだがIssueに上げとく?
2
25
3,008
素朴な疑問。 なぜLichtFeld Studioのポストプロセスでvignetteがデフォルトでオンなんだろう? 周辺部が暗くなるのが学習結果なのか、表示効果なのか分からなく弊害がある。毎度オフにするのが面倒。 何らかの意図がありそうだがIssueに上げとく?
1
2
16
6,754
これだけ広い空間をアバター一人で歩いているとアポカリプス味がある。 3DGSではみんな消えて、人っ子一人いない。 自動モブ・車配置をまじめにやるか…。 (NPC歩行アルゴリズムは少し実験している。)
門司港レトロ夜景の3DGSです。長い動画ですが、全部繋がった3D空間の証拠のためノーカット。 ・DJI Osmo 360の8K動画(.osv)からSpirula Studioで10M Splatsの3DGSを生成 ・動画はSplatSptrollAvatar 多少の凸凹はありますが、3DGSをリアルタイム解析してアバターでそのまま歩けました。
21
2,429
ダックビル@STUDIO DUCKBILL LLC retweeted
門司港レトロ夜景の3DGSです。長い動画ですが、全部繋がった3D空間の証拠のためノーカット。 ・DJI Osmo 360の8K動画(.osv)からSpirula Studioで10M Splatsの3DGSを生成 ・動画はSplatSptrollAvatar 多少の凸凹はありますが、3DGSをリアルタイム解析してアバターでそのまま歩けました。
Osmo 360で50分間撮影した門司港レトロの夜景の8K ERP動画の3DGS生成ができている。 切り出し画像数は8Kで6,000枚。 この条件でもSpirula StudioはVRAMを15GBしか使っていない。←低リソース osvではカメラ位置がズレてしまったのでERP(正距円筒図法)動画でやり直したら上手くいった。
1
6
55
7,290
門司港レトロ夜景の3DGSです。長い動画ですが、全部繋がった3D空間の証拠のためノーカット。 ・DJI Osmo 360の8K動画(.osv)からSpirula Studioで10M Splatsの3DGSを生成 ・動画はSplatSptrollAvatar 多少の凸凹はありますが、3DGSをリアルタイム解析してアバターでそのまま歩けました。
Osmo 360で50分間撮影した門司港レトロの夜景の8K ERP動画の3DGS生成ができている。 切り出し画像数は8Kで6,000枚。 この条件でもSpirula StudioはVRAMを15GBしか使っていない。←低リソース osvではカメラ位置がズレてしまったのでERP(正距円筒図法)動画でやり直したら上手くいった。
1
6
55
7,290
おまけ。 撮影は歩き撮りの360度カメラ動画だけ。 ドローンなし。
4
508
非常に長いループクローズが成功すると気持ちがいい。 Insta360 X4のデュアル魚眼動画(.insv)をSpirula Studioで直接3DGS生成。 アライメントは通常のSIFTではズレたが、AI学習型のLoMaだと上手くできた。時間がかかるが難条件に強いのは確かにそうだった。(簡単に切り替えできて便利!)
1
7
97
3,677
良いものは良い。 注目されてしかるべきなので「Spirula Studio」の検証ネタを惜しみなくポストしています。 生憎の悪天候でしたがOpus 5.5に、GPT-6 Solも加わって充実した連休!?💦
1
1
44
3,186
Spirula StudioはWindows/Mac/Liuxのクロスプラットフォーム対応が実は最大の売りかもしれませんね。 Vulkan実装でNVIDIA, AMD, Intel, Apple Silicon全部をフル機能でカバー。CUDAネイティブからの性能低下はほとんどなし。 選択肢の少なかったMacが最適解になる可能性もある。
1
5
612
ダックビル@STUDIO DUCKBILL LLC retweeted
It feels like Spirula Studio has come out of nowhere and is gaining traction very fast. 😮
制作ツール毎の3DGS作例はSuperSplatで”Software Used”でフィルターすると一覧で見ることができます! SuperSplatも素晴らしい。 3DGSを公開する時はソフト種別も設定しよう。 Spirula Studioの作例: superspl.at/explore/software…
3
1
36
3,500
制作ツール毎の3DGS作例はSuperSplatで”Software Used”でフィルターすると一覧で見ることができます! SuperSplatも素晴らしい。 3DGSを公開する時はソフト種別も設定しよう。 Spirula Studioの作例: superspl.at/explore/software…
1
41
5,590
ダックビル@STUDIO DUCKBILL LLC retweeted
Spirula studioで生成した3DGS作例の動画です。 難しいベンチマーク用の素材ですが、フローターの少なさと露出&カラーの調整が素敵(バイラテラルグリッド+PPISPの定番) 学習ステップ数とSplat数の調整でまだまだ品質上げられそう。 動画はSuperSplatでレンダリング
spirula studioの検証を始めていますが、かなりヤバそう。驚き屋仕草。 カメラアライメント、マスク、法線推定、3DGS学習まで一気通貫。軽くて速い。 3DGSのトレーニングの実装レベルが高すぎる。 360度カメラのサポートも抜群で、Osmo360のOSVを直接入力してのSfM->3DGSもできた。
2
19
143
9,263
ダックビル@STUDIO DUCKBILL LLC retweeted
360度カメラで撮り、変換不要の動画ファイル(.osv/.insv)をそのまま放り込み、プリセットを選んでボタンを押すだけで3DGSができてしまう……。 そこそこハイエンドのPCを持っていないと厳しいが、尺の制限も回数制限もなし。OSS。無料。 界隈の皆さんが待ってたアプリです。
神戸北野異人館の「風見鶏の館」周辺を360度カメラで撮影し、3DGS化しました。 1. DJI Osmo 360 → .osv(デュアル魚眼動画) 2. Spirula Studio:画像抽出 / マスク / アライメント / 3DGS生成 3. SuperSplat:編集 / 色調整 / LOD生成 / コライダー / 背景 / 公開 🔗リンクは次のポスト👇
3
91
486
34,165
Osmo 360で50分間撮影した門司港レトロの夜景の8K ERP動画の3DGS生成ができている。 切り出し画像数は8Kで6,000枚。 この条件でもSpirula StudioはVRAMを15GBしか使っていない。←低リソース osvではカメラ位置がズレてしまったのでERP(正距円筒図法)動画でやり直したら上手くいった。
Spirula Studioは学習を一時停止して画面移動→再開とすればサクサク動く。 「低リソースで回す」設計はかなり徹底されている。 8K動画もデコード、縮小画像、鮮鋭度判定もGPU上。必要なフレームだけRGB化・保存。 3DGS学習も、必要なデータだけ計算・保持してVRAM消費を抑える設計。
1
5
73
9,431
Spirula Studioは学習を一時停止して画面移動→再開とすればサクサク動く。 「低リソースで回す」設計はかなり徹底されている。 8K動画もデコード、縮小画像、鮮鋭度判定もGPU上。必要なフレームだけRGB化・保存。 3DGS学習も、必要なデータだけ計算・保持してVRAM消費を抑える設計。
1
3
22
6,691
8K動画でもosv,insvのデュアル魚眼動画4K2ストリームで入力した場合は、VulkanのGPU処理になる。 8K ERPを入力動画にするとffmpegのCPU処理になるので遅くなる。 (Vulkanの方が15倍早いそうです。)
4
12
1,704