【レンダラー】NVIDIA、2D画像から3Dモデルを作るAIを開発[12/17]

1 名前：サンダージョー ★ [2019/12/19(木) 11:20:24.33 ID:CAP_USER.net] 2019.12.17 12:30 https://www.gizmodo.jp/2019/12/nvidia-taught-an-ai-to-instantly-generate-fully-texture.html https://assets.media-platform.com/gizmodo/dist/images/2019/12/11/191211_nvidia-w1280.jpg AIが見えない部分を補って生成。 何かしら物体を描いたスケッチや写真を、リアルな3Dモデルに変換して3Dプリンタで印刷したり、テレビゲームで動かしたり、視覚効果を用いて動画に生命を吹き込むには、大量の画像をもとに作業するデジタル・モデリングの技術をもつ人材が必要になります。 ですがNVIDIAはニューラル・ネットワークを訓練して、たった1枚の写真から完全なテクスチャーを持つ3Dモデルを生成することに成功しました。 似た技術は以前からあった 以前にも、3Dモデルを自動生成する似たような技術を見たことがありますが、正確な結果を得るためには、さまざまな角度から撮影した写真がたくさん必要だったり、ソフトウェアに画像内の特定のオブジェクトの寸法や形状を理解させるべく、人間のユーザーが数値を入力したりする必要がありました。 いずれの手法でも、問題対処へのアプローチが間違っているわけではありませんが、もっとカンタンに3Dモデリングができるようになるのは大歓迎です。そうすれば、高度なスキルを持たないユーザーにとっても、幅広い層が使えるようになるツールを利用できるようになりますから。ただ、それがソフトの潜在的な用途を制限してしまうこともあります。 NVIDIAが論文を発表 カナダのブリティッシュコロンビア州バンクーバーで開催される、｢神経情報処理システム｣年次会議で、NVIDIAの研究者たちが新しい論文｢Learning to Predict 3D Objects with an Interpolation-Based Renderer｣（内挿ベースのレンダラーで3Dオブジェクトを予測する方法を学ぶ）を発表しました。 https://nv-tlabs.github.io/DIB-R/files/diff_shader.pdf そこには、新しいグラフィック・ツール｢Differential interpolation-based renderer｣（微分可能関数内挿をベースにしたレンダラー）、略してDIB-Rの開発について詳細が記載されています。 DIB-Rの使い方 NVIDIAの研究者らは、複数のデータセット上でDIB-Rのニューラル・ネットワークを訓練しました。そこには、以前に3Dモデルへと変換された写真、複数の角度から提示された3Dモデル、複数の角度から特定の被写体に焦点を合わせた写真のセットなどがあります。 たとえば、鳥のような特定の被写体を2Dから3Dにする方法について、ニューラル・ネットワークを訓練するのにはおおよそ2日かかります。ですが一旦完成すれば、これまでに分析されたことのない2D写真に基づく3Dモデルを、100ミリ秒以内に量産できるのだそうです。 https://assets.media-platform.com/gizmodo/dist/images/2019/12/11/191211_nvidia2-w1280.png 応用範囲が広そう この驚くべき処理速度が、このツールを特に興味深いものにしています。 なぜなら、ロボットや自律走行車のような機械が、眼前にあるものを認識して3D的に理解する方法が大幅に改善される可能性を秘めているからです。 たとえば、自律走行車がカメラで撮っている映像から生成した静止画像を、瞬時に3Dモデルに変換し、今から回避するべき大型トラックのサイズを正確に計測したり、ロボットが予定された形状に基づいてランダムな物体を適切に拾う方法を予測したりできるようになります。 凄まじい処理能力が監視社会を加速させるかも？ またDIB-Rは、瞬時に生成される3Dモデルが視界の中を移動する人物の画像照合を容易にするため、人物の識別と追跡を行う監視カメラの性能を向上させることもできそうです。 新しい技術はクールなものですが、この場合は監視社会を加速させる可能性を秘めた、恐ろしい面も持ち合わせているということは知っておきましょう。 Source: NVIDIA, NeurIPS | 2019,GitHub https://blogs.nvidia.com/blog/2019/12/09/neurips-research-3d/ https://nips.cc/ https://nv-tlabs.github.io/DIB-R/files/diff_shader.pdf 2 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 11:21:12.10 ID:9ZyYTkef.net] ﾆﾀﾞｰﾙ 3 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(木) 11:23:30.64 ID:s9bUA5ql.net] マリオでやってみて 4 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 11:23:41.28 ID:q7GXB4Tn.net] しょぼいな 5 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 11:23:46.28 ID:7sT5WIB0.net] キュビズムの絵画を ３Ｄにしてくれ 6 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 11:28:57.67 ID:hhaW5FMn.net] www.94d.tarpat.com/1576592642 7 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(木) 11:29:05.56 ID:eE8T35vo.net] AIでやったというところがミソなのかもな 高度化すればもっと精度を高められる 8 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 11:36:37.48 ID:HRXTOzlg.net] AIでとりあえず作ってもらって、人間が修正すれば 楽にモデリングができるな この研究は有望 人間や家具とかいろんな方面に広げてくれ 9 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 11:50:16.53 ID:U+uzTBb7.net] 変換で遊ぶのが主流になるかな 音楽→形（データ関数） 形→(データ関数)→音楽 見たいな計算力とAI使った モンスターパソコンの使い道 モーツァルト復活が近いよなw 10 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 11:53:25.65 ID:IRwDyyZu.net] >>7 なんともあやふやで気持ち悪い感じがするがもう人間が計算できる世界は全て計算しつくされて 今はこういう結果が確定的ではない技術が流行りなんだろうな 自分はもう古い人間なのだと痛感する 11 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 12:04:43.42 ID:SJHtHmpF.net] 2D画像-3Dオブジェクト間で訓練・学習させたデータで認識し特定した3Dオブジェクトにテクスチャを貼ったといったところか。 これを更に推し進めてキャラの口や目パチなどもさせると↓になるわけやね。 https://gigazine.net/news/20191205-vtuber-google-engineer/ 12 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 12:20:31 ID:K59iiKrA.net] 月の裏側を描かせることはできまい。 13 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(Thu) 12:26:54 ID:eE8T35vo.net] AIでモデリングの線の流れを整えてくれる機能のほうがいいな 14 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 12:31:19.88 ID:p7dNHfbf.net] どこかのアプリであったような気がする 15 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 12:36:36.99 ID:rn38OMxS.net] くちばしの形が酷く違ってるな。やり直し。 16 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 12:45:59.19 ID:IP+HsCRG.net] AIはどこまでいくのだろうか、 こういうのってプログラムの延長じゃ想像できなかった分野だな 17 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 12:49:27.39 ID:K59iiKrA.net] 学習による以上、人の推測や想像を精密かつ自動で行っているだけだ。 「創造」をどうするかは未知。 18 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(木) 12:58:32.39 ID:4YAwVhoN.net] GTMをモデル化して永野にボロカスに言われる近未来 19 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 13:30:49 ID:bwTtD1fy.net] 自動彩色もそうだけど、こういうのって確かに出来てる！んだけど、なんかこう、細部をふわっと騙してくるよねw 20 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(Thu) 13:40:11 ID:uGKOSXe9.net] ちょっとしたスパイ画像から3Dモデルが出来て それを3Dプリンタで出力したらとりあえず本物と非常に高い精度で似た形になるか 形が重要なものをコピーするのに多いに役立つな AIの応用も進んでるなあ 昨今だとBERTが翻訳など言語処理で大活躍 下品な話だとdeepfakeなんてのがあった 21 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(Thu) 13:44:57 ID:2fOO5Dxd.net] >>12 できると思うよ 強化学習から月の画像だと判断できればAIは過去のデータから裏側を作れると思う 22 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 13:59:27 ID:GtMU05Zh.net] さらにモザイク改造に寄与できそうな技術だな 23 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 14:07:39 ID:IRwDyyZu.net] >>19 そういういい加減さを許容できるかできないかでAIの評価が分かれると思う 化学調味料による味付けが許せない人たちも世の中にはいるだろう 24 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(Thu) 14:11:05 ID:id7boPgd.net] アニメ画像を突っ込んだらとんでもないクリーチャーが現れる可能性大 25 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(Thu) 14:20:47 ID:buKvaJa8.net] >>24 うそパースてんこ盛りだからなあ 26 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 14:21:44 ID:IRwDyyZu.net] >>24 フィギュアを学習させればいけるんじゃないかな それで3Dプリンタで出力までさせれば彫師が失業してしまうだろう というか人間の感性に頼った職業ほどことごとくAIが奪っていきそうだ 27 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(Thu) 14:28:17 ID:buKvaJa8.net] >>26 AIが人間の美意識、つか萌え〜を会得するにはまだまだじゃね 正確なモデリングのつぎは崩すことが待っている 28 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/19(Thu) 14:32:22 ID:+qBq/reC.net] >>24 LANねーちゃんがついに立体化か 29 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 14:42:15 ID:IRwDyyZu.net] >>27 もともとが偽物だから追求すればきりがないよ そもそもテレビだって再現性は不完全だしAIが作る偽物に文句を言っても今更という感じがする 目の前の現実以外は全て偽物だ とNHKのAI美空ひばりの番組を見て思った 30 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 14:48:09.74 ID:5LbiwRF4.net] 昔建築物でこーゆうのあったな　消えたっぽいけど　たぶん使えるスキームとしてはいろんな方向からの写真を解析してひとつの立体にして効率的にローポリにするが一番汎用性あるとおもう 31 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 15:19:06 ID:p54sO2mp.net] >>1 https://twitter.com/takoneko_chika/status/908876017942462466 (deleted an unsolicited ad) 32 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(木) 16:29:55.61 ID:UJxom0/+.net] テンダラー？ 33 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 22:22:47 ID:J3FS4n7O.net] 正面から見たびんぼっちゃまで正確にレンダリング出来たら褒めてやるよ 34 名前：ニュースソース検討中＠自治議論スレ [2019/12/19(Thu) 22:32:04 ID:9aq8E6jQ.net] ＞自律走行車がカメラで撮っている映像から生成した静止画像を、瞬時に3Dモデルに変換し、今から回避するべき大型トラックのサイズを正確に計測したり、ロボットが予定された形状に基づいてランダムな物体を適切に拾う方法を予測したりできるようになります。 詳細なデティールより大きさを高速で判断できるのが重要なんだね 自動運転に注力してる企業は違うわ 35 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 16:04:46.35 ID:7S1i6r0n.net] >>8 用途はGoogleマップのリアルタイム3D生成とかじゃないかな 36 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/21(土) 18:47:08.99 ID:W/iB8KQG.net] >>34 デティールはあまり重視しないだろ 人の目が捉えてる程度に大まかな形でいい それで危険物かどうか瞬時に判断 人だってすべてをきちんと立体視してるわけじゃなくて輪郭から適当に補間してるほうが多いからね 37 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 19:22:42.92 ID:/j+dAWRu.net] こういうのじゃない・・・・ ちゃんと翼の部分を認識してそこは凹凸出してほしい 38 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 19:23:11.49 ID:ZxuhrUyE.net] 自動の六角大王だろ 39 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/21(土) 19:43:31.58 ID:FC550WJV.net] 背中だけのヌード写真でも出来る？ 40 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 20:02:08.21 ID:gKtjEPt+.net] ただの絵からコレができるってスゴイだろw 41 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 20:15:46.00 ID:x0aF7AXR.net] 錯覚をどうやって排除するんだろう あと見えない裏側をどうやって作るんだろうか もしかして月面の裏側まで立体にできる（）と言うのなら凄いなｗ 42 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 20:20:24.33 ID:afKKjkAA.net] >>1 服の中も正確に作れたら買っても良い 43 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/21(土) 20:22:29.01 ID:xppu22U1.net] あなたは見えない所はどうやって想像するの？ 過去の記憶や経験則を頼りに想像できるでしょ AIのディープラーニングは同じことやって学習させるんだよ 44 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 20:29:48 ID:bzWk3n39.net] あとは鳥の種類を認識して 同種の鳥のデータから補完するとかか 45 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/21(土) 20:31:53 ID:xppu22U1.net] 猫の写真を1万枚AIに見させて共通点や特徴を学習記憶させる 学習後に1枚写真見せて共通点が多ければ猫と判定し見えない所も予測可能になる 人間と同じに学習訓練させるんですよ 46 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/21(土) 20:40:37 ID:xppu22U1.net] 学習のデーダによっては服の中も月の裏側も作れるよ 47 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/21(土) 22:35:15 ID:U73Ww2yk.net] すでにこういうソフトがあってね https://shade3d.jp/product/magicalsketch3d/top.html 48 名前：ニュースソース検討中＠自治議論スレ [2019/12/21(土) 23:56:35 ID:D1ccKcGR.net] アニメの絵描きの採用試験の課題として、 建物をある方角（たとえば正面）から撮った写真を与えて、 それを斜めから観た画、真横から観た画を書かせるのがあった。 さらに上級なら、正面の絵から回り込むように幾つものアングルで 観た（想像上の）絵を描けというもの。 49 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 00:26:21 ID:Uo9d1hvJ.net] そんなもんより、 3Dから製造にたえる2Dを出せるようにしてくれ。 量産のこと考え無いバカ設計多すぎ 50 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 00:54:10 ID:pRiChRuR.net] つまり、無乳貧乳でも巨乳になれる。 51 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 12:13:57 ID:9O9auSAM.net] しょぼいな 鳥の基本骨格とか学習させれば・・ って思ったが、最終的に学習させ過ぎたら全鳥の3Dデータから選ぶだけのプログラムに成り下がるか 52 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 13:28:09 ID:moCP8mZF.net] dmm にやらせよう 53 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/22(日) 14:13:45 ID:KQoj/xFN.net] スネ夫の髪型はどうなる 54 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 17:51:39 ID:W1r6GoUK.net] 女性の服が透けて見えるって妄想もAIで実現できそうだな 55 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 18:04:21 ID:eXe68Xsw.net] >>39 おっぱいの大きさは背中から見た骨格などを手がかりに生成！ 56 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 18:06:38 ID:vMBkYPsf.net] 女性の写真を1クリックで裸にしてしまう「DeepNude」が登場 - GIGAZINE https://gigazine.net/news/20190627-deepnude-ai-undresses-photo/ 57 名前：ニュースソース検討中＠自治議論スレ [2019/12/22(日) 19:53:04.21 ID:me2ZkSuP.net] 基礎技術が出来ればあとハード能力向上とデータ集積 そのうちAIが写真一枚で3Dの動画作るようになるな 58 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/22(日) 20:38:21.45 ID:y9NXi7bw.net] こういうテクノロジあるとアニメ楽なんだよ 書く→3dモデル→3dモデルで下書き→手書きで原稿完成 書く→3ｄモデル完成→CGで直す→ゲーム ゲーム開発激楽になってローコストになる 似たアプローチは既にあるけどね 59 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/22(日) 21:31:54 ID:u2Vuvp12.net] >>56>>1 そして3Dプリンタで男の夢は叶うｗｗｗ 60 名前：ニュースソース検討中＠自治議論スレ [2019/12/23(月) 09:27:04.52 ID:IrnkCass.net] 2D映像がリアルタイムで3D化出来るようになるのも時間の問題だな 昔の映画や記録映像も3Dで観られるようになるかも 61 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/23(月) 12:29:18.24 ID:iAhFBZNZ.net] 大量のデータベースがないと３D変換はできないってこと？ 全く新規の画像だと２Dのままなのかな 62 名前：ニュースソース検討中＠自治議論スレ mailto:sage [2019/12/23(月) 17:52:07.54 ID:m4bY+P9f.net] >>25 それでも様式は決まってるから割と正確にやれるのでは 63 名前：ニュースソース検討中＠自治議論スレ [2019/12/24(火) 00:39:36 ID:dJ+5PQyD.net] 重いレンダーラー、試練のアニメ、 描くが男の、ド根性。

---

---

[ 新着レスの取得/表示 (agate) ] / [ 携帯版 ]

read.cgi ver5.27 [feat.BBS2 +1.6] / e.0.2 (02/09/03) / eucaly.net products.
担当:undef