Microduckのシミュレーション段階でクリアしたい目標は
障害物を乗り越えて進む(完了)、
カメラからの物体認識(Jev使用)と咥えて持ってくる←イマココ、
ローカルLLMで指示を認識して行動、
を予定してる。
ここで経験を積んで感覚や勘を掴むのが大事だと思ってる。
MicroduckでのJevを使った認識は少し進みました。
ターゲットを探して咥えて赤い枠に入れる。
咥えるときに落とした場合のリカバリも追加。
まだ首振り検索の最適化はいるけど
それっぽくなってきた。
ふと、Cicada 3301は今のAI時代にどこまで解読されたのか各種LLMに聞いてみたのだけど
進展はない感じなのか。
そもそも解けないパズルなのか、でも存在はする(出題者はいる)というよくわからないやつ。
今日のMicroduckの進捗。
あらかじめ口に咥えることができるかは検証済みなので
対象外は除外して咥えることが可能なものをJevで探す。
それに近づいて咥えるという一連の流れはできました。
カメラのみが判定材料。
ただ、足元にあるものは見えないので
後退して探すという工程が必要なことが判明。
Jevによる判断は結構ロボットと相性がいいなぁと思ってる。
数十msは判断として遅そうには思うけど、
ロボットの場合は判断してから行動するまでのタイムラグが活かせるのですよね。
少し先の自身の未来を知ってる、というので補間が効くというか。
Claude Opus 5.5で和洋折衷の建物をモデリング。
2Fの和室。
どうやら畳のテクスチャも正確に反映できてる感じ。
ただ、和室については別途自分が用意したスキルも参照していたので
いくつかはバニラのOpus 5.5では検索して補間が必要かも。
自分の環境ではOpus 5.5でナーフはされてない気がする。
Claude Opus 5.5で和洋折衷の建物をモデリング。
次は2階和室の横の座敷縁側。
参照画像はないのでここは調査後に気ままにモデリングしてもらいました。
これは修正指示なく一発でOK。30分ほど。
障子の和紙はどれくらいの透過度だったっけ。
少し透過が多い気がする。
ちょっと確認しにいってくる。
今日撮った昭和初期のカットグラスの写真を
Claude Opus 5.5に渡して3Dで表現するようにモデリング。
歴史的な検証や寸法の調査もしてもらった。
左上がオリジナルの写真。
カメラアングルもライティングもすべてお任せで
うまくいきました。
カットグラス無理だと思ったらいけるんだ、、
