Segment Any RGBD
https://github.com/Jun-CEN/SegmentAnyRGBD GitHub
https://huggingface.co/spaces/mmlab-ntu/Segment-Any-RGBD Demo
https://gyazo.com/69dffef22d9cbfcc985c2c8a4febd7fe
通常の(RGB)画像をもとにセグメンテーションを行うと、テクスチャが邪魔をして過剰に分割をしてしまう(画像上)
これを解消するために深度マップを組み合わせる(画像下)
手法
深度マップはグレースケールで表現されることが多いが、別に色をつけても良いのでカラーマップ関数https://matplotlib.org/stable/tutorials/colors/colormaps.html#lightness-of-matplotlib-colormapsを利用して色付け
これをSegment Anything Modelに渡す