ロボットに大理石の彫刻を彫ることを教えた
We taught robots to carve marble sculptures (eleanorwiesler.com)
要約
Monumental Labsのチームは、KUKA KR240ロボットを使用して、大理石の彫刻を自動で彫刻するエンドツーエンドのCNCシステムを開発しました。このシステムは、3Dモデルと大理石のブロックから、人間の介入なしに完成した彫刻を生成します。粗削りと仕上げの2段階に分かれ、それぞれ異なる戦略とアルゴリズムを使用し、シミュレーションと実際の加工を連携させています。
全文翻訳
ロボットに大理石の彫刻を彫ることを教えた
KUKA KR240ロボットに大理石の彫刻を彫ることを教えました。
今月、私のチームと私はMonumental Labsで、この種の最初のエンドツーエンドの自律CNC石材彫刻システムを発表しました。Sebastian Marino、James Darby、そして私は、NY RoboticsとZeroSpace Labsがブルックリンで開催したEmbodied AI NYCでそれを発表しました。この記事は、私たちのトークの書き起こしです。私たちのシステムが、人間の介入なしに、どのように3Dモデルと大理石のブロックから完成した彫刻を生成するかについて説明します。
[動画: シミュレーションで計画されたツールパスと、石に彫刻しているロボットの並列表示。]
Sim-to-real: シミュレーションで計画されたツールパスと、石に彫刻しているロボット。
[画像: シミュレーション上のバニーの仕上げツールパス(左)と、同じ角度から見た彫刻された大理石のバニー(右)。]
シミュレーションから石へ: スタンフォードバニーの仕上げツールパス(左)と、それからロボットが彫刻した大理石のバニー(右)。
なぜ石なのか、そしてなぜ今なのか
ペンステーションやグランドセントラル駅のような公共建築物は、かつては記念碑的なものになると期待されていました。石材彫刻が消滅したわけではありませんが、コストの上昇により、一般的な建設からは締め出されてしまいました。Monumental Labsでは、機械学習、計算幾何学、最適化を使用して、そのコストを削減しています。これは、置き換えではなく、復活です。
私たちの目標は、製造プロセス中に人間の介入をゼロにすることです。つまり、「ライトオフ」製造のために構築された、完全に自動化されたエンドツーエンドのパイプラインです。ライトオフ工場を目指すことに加えて、私たちの使命は、アーティストやデザイナーと協力して最終的な彫刻を決定し、多くの作品の表面品質を最終仕上げする手彫り職人と協力し続けることです。
[画像: 大きな倉庫のワークショップにある台座上の産業用ロボットアーム。]
Monumental Labs HQ、グリーンポイント、ブルックリン。
粗削り vs. 仕上げ
彫刻は、大きく分けて2つの段階で行われます。粗削りは、材料除去率が重要です。可能な限り迅速かつ安全にブロックから多くの石を取り除くことです。仕上げは、表面品質が重要です。最終的な形状に十分に近づくまでトレースし、ロボットが取り除くものがデザインと一致するようにします。この2つの段階では、異なるツール、異なる戦略、異なるアルゴリズムが必要です。
魔法のトリック:自律的な粗削りパス
トークでの実行例は、魔法のトリックでした。ブロックから始めて、シルクハットを彫り、そこからウサギを取り出すというものです。ウサギは、コンピュータグラフィックスにおける古典的なテストモデルであるスタンフォードバニーです。シルクハットを先に彫ったのは、楽しいためでもあり、ロボットとアートが組み合わさったときの魔法を思い出させるためでもありました。
[画像: ロボットアームの前に置かれた、シミュレーション上の粗い大理石ブロック。]ブロック
[画像: ブロックから彫刻されたシルクハットの形状のシミュレーション。]シルクハット
[画像: 台座上のシルクハットから現れるスタンフォードバニーのシミュレーション。]ウサギ
シミュレーションでのトリック:ブロック、シルクハット、ウサギ。
ボクセル
すべては、石のボクセル表現から始まります。ボクセルにより、任意のメッシュ入力を受け入れ、それをスパースデータ構造に格納できます。これは、密なグリッドが解像度に対して立方的にスケールするため重要です。ボクセルから、法線と勾配とともに符号付き距離場を計算します。これにより、構成ソリッドジオメトリの自然な基盤が得られます。これは、減算的製造そのものです。つまり、ツールが除去したもの以外の石です。
[画像: バウンディングボリューム内のボクセル化されたバニーとブロック。] [画像: 石の表面に沿ったスパースボクセルグリッドのクローズアップ。]
ストックとターゲットをスパースボクセルグリッドとして、表面でのグリッドのクローズアップ。
バルク材料除去
最初の仕事は、一次バルク材料除去です。生のブロックと部品の粗い形状の間にある大きな石の体積をクリアすることです。
[画像: シルクハットの形状の周りのレイヤー化された粗削りパス、パスごとに色分けされている。] [画像: ワークショップでロボットが彫刻したシルクハット形状の大理石。]
シルクハットのバルク粗削りパスとその結果(大理石)。
ツールパスとは?
ツールパスとは、切削工具が材料内を移動する経路であり、最終的には機械がポイントごとに実行するGコードとして書き出されます。粗削りツールパスには独自の構造があります。一度に一段階ずつ石を下げるアイソプラナパスで、各パスはツールが材料にどれだけ食い込んでいるかを考慮して計画されます。
[画像: シルクハットの形状の周りに巻き付けられた粗削りツールパスの前面図。] [画像: シルクハットに沿った垂直粗削りパスの側面図。]
シルクハットの周りの粗削りツールパス、前面と側面から。
次にトリックは続きます。同じ機械がハットからバニーを彫り始めます。
[画像: シルクハットの周りの粗削りパス、深さごとに色分けされている。] [画像: バニーの形状を明らかにする粗削りパス。]
ファイン粗削りとオフアクシス粗削り
最終表面に近づくにつれて、より小さなツールとより細かいパスに切り替えます。一部のジオメトリは、まっすぐ下に切削するだけでは到達できません。そのため、オフアクシス粗削りでは、傾斜した平面に沿って切削し、耳や顎、その他のオーバーハングの下の材料をクリアします。
[画像: バニーの周りのファイン粗削りツールパス、前面図。] [画像: バニーの周りのファイン粗削りツールパス、3/4ビュー。]
ファイン粗削り:表面に近づき、より小さなツールを使用。
[画像: オフアクシス粗削り前のシミュレーション上のバニー。] [画像: バニーの周りの傾斜した平面上のオフアクシス粗削りツールパス。] [画像: オフアクシス粗削り後のシミュレーション上のバニー。]
傾斜した平面に沿ったオフアクシス粗削り。
粗削りの終わりに、トリックは本物の石で完了します。ブロック、シルクハット、ウサギ。
[画像: 生の大理石ブロックにバニーのアウトラインが描かれている。]ブロック
[画像: シルクハットに粗削りされた大理石ブロック。]シルクハット
[画像: 台座に乗せられた、粗削りされた大理石のバニー。]ウサギ
大理石でのトリック:粗削り完了。
ロボットは人間の介入なしに彫刻を仕上げることができるのか?
仕上げは難しい問題です。システムは2つの入力を受け取ります。粗削りのシミュレーション出力と、ターゲットデザインモデルです。その仕事は、それらの間のギャップを埋めることです。
[画像: シミュレーションされた粗削りバニーの表面。] [画像: 滑らかなターゲットバニーデザインモデル。]
仕上げの入力:シミュレーションされた粗削り出力(左)とターゲットデザインモデル(右)。
レイヤリング
ボクセルグリッドの拡張とメッシュ交差カットを使用して、最適な仕上げレイヤーを解決します。残りの石を、最後のレイヤーがデザインそのものになるまで、一連のオフセットサーフェスで削減していきます。
[画像: バニーの最初の仕上げレイヤー。] [画像: 2番目の仕上げレイヤー、残りの材料の薄いスライスが表示されている。] [画像: ターゲットバニーに一致する最終仕上げレイヤー。]
レイヤー1、レイヤー2、そして最終レイヤー。
自動点群セグメンテーション
各レイヤーは、一緒に加工できる領域に自動的にセグメント化されます。これにより、各領域に独自のツールパスと独自のツールオリエンテーションが割り当てられます。
[画像: セグメント化されたバニーの点群、前面図。] [画像: セグメント化されたバニーの点群、背面図。]
ツールパス生成:3Dアイソジオデシック距離
セグメント内では、ジオデシック距離からツールパスを生成します。ユークリッド距離は直線ですが、曲面では石を貫通してしまいます。ジオデシック距離は表面に沿って測定されます。結果として、バニーの表面に、ツールパスに最適な間隔で配置された、曲率情報を持つアイソラインのセットが得られます。このジオメトリを機械学習と組み合わせて、各彫刻に適応するツールパスを計画します。
[画像: 曲面シェルを貫通する直線的なユークリッド線と、その表面に沿ったジオデシックパスを比較する図。] [画像: バニーの表面に均等に配置された、曲率情報を持つアイソジオデシック線。]
ユークリッド距離は石を切り裂き、ジオデシック距離は表面に沿って移動します(左)。バニーの曲率情報を持つアイソジオデシック線(右)。
最適なツールパス接続
アイソライン自体は個別の曲線です。セグメントごとに、連続的で滑らかで最適に接続されたツールパスを解決します。これにより、ツールは材料内に留まり、パス間で持ち上げたり再配置したりするのではなく、予測可能に移動します。機械学習は、これらの接続がどのように行われるかに役立ちます。
[画像: セグメント化されたバニーの上に接続された仕上げツールパス。] [画像: バニーの表面にある、高密度で接続されたツールパス線のクローズアップ。]
ツールオリエンテーションとキネマティクス
各セグメントには、ロボットが実際に到達できるツールオリエンテーションも必要です。セグメントごとに、アクセス方向とツールパスに沿ったツールの傾きを使用して、衝突のないツールオリエンテーションを解決します。
[画像: 3つのパネルのスライド:バニーに収束する衝突のないツールオリエンテーション、バニーの上を掃引するアクセスビーム、ツールパスに沿って傾斜するツール。]
そこから、ツールパスの各ポイントに対して、安全で滑らかで衝突のないジョイント角度を解決します。以下の私たちの独自のツールパスアプリ「Hilbert」では、ジョイント角度の健全性を監視し、さまざまなポリシーのキネマティクス制限を視覚化します。
[動画: Hilbertでのキネマティクス:ロボットがシミュレーションで仕上げツールパスを追跡している様子。]
石に入れる前のシミュレーション
パイプライン全体がシミュレーションされるため、ロボットに何も載せる前に、予想される石の結果を確認できます。これは、問題の機械が100万ドルの価値がある場合に重要です。
[画像: 粗削り後のシミュレーション上のバニー。]粗削り出力
[画像: 仕上げツールパス1後のシミュレーション上のバニー。]ツールパス1
[画像: 仕上げツールパス2後のシミュレーション上のバニー。]ツールパス2
[画像: 最終仕上げツールパス後のシミュレーション上のバニー。]最終ツールパス
各仕上げステージ後のシミュレーション上の石、粗削り出力から最終ツールパスまで。
ツールパスから彫刻へ
ここに、仕上げツールパスと、それによって生成された彫刻された大理石を示します。
[画像: 01: シミュレーション上のバニーの仕上げツールパス(左)と、同じ角度から見た彫刻された大理石のバニー(右)。]
[画像: 02: シミュレーション上のバニーの仕上げツールパス(左)と、同じ角度から見た彫刻された大理石のバニー(右)。]
[画像: 03: シミュレーション上のバニーの仕上げツールパス(左)と、同じ角度から見た彫刻された大理石のバニー(右)。]
[画像: 04: シミュレーション上のバニーの仕上げツールパス(左)と、同じ角度から見た彫刻された大理石のバニー(右)。]
[画像: 05: シミュレーション上のバニーの仕上げツールパス(左)と、同じ角度から見た彫刻された大理石のバニー(右)。]
[動画: バニーの彫刻。]
バニー、彫刻。
なぜスタンフォードバニーを彫ったのか
Greg TurkとMarc Levoyが1994年にスタンフォードでセラミックのウサギをスキャンして以来、スタンフォードバニーは30年以上にわたり、再構成、メッシュ処理、レンダリングの研究におけるグラフィックスの共有テストモデルとなっています。私たちの仕事は、それを取り巻く計算幾何学なしには不可能でした。符号付き距離場、体積形状表現、表面上のジオデシック距離など、しばしばこのバニーでテストされてきたものです。私たちのものを大理石でミリングした後、2つの古いSIGGRAPHの表紙を見つけました。2000年には石のテクスチャでレンダリングされたバニー、2001年には大理石の胸像でした。私たちは、この仕事が私たちをグラフィックスとロボット工学の歴史の小さな一部にしていると考えており、この分野をさらに進歩させることを楽しみにしています。
[画像: SIGGRAPH 2000 Computer Graphics Proceedingsの表紙、石のテクスチャが施されたスタンフォードバニーが表示されている。] [画像: SIGGRAPH 2001 Computer Graphics Proceedingsの表紙、レンダリングされた大理石の胸像が表示されている。]
SIGGRAPH 2000(左)とSIGGRAPH 2001(右)のComputer Graphics Proceedingsの表紙。
私たちの仕事について詳しくは、monumentallabs.coをご覧ください。
私に連絡するには、eleanorwiesler.comまたは以下のソーシャルメディアをご利用ください! :)