スマホ写真で内臓脂肪を推定、Googleが新AI「PhotoScan」
Seeing beyond BMI: Estimating cardiometabolic risk with smartphone imagery

Google Researchは、スマートフォンの標準的な2D写真から体脂肪率(BF%)、アンドロイド/ガイノイド比(A/G比)、内臓脂肪/皮下脂肪比(V/S比)などの3D体組成指標を推定する深層学習フレームワーク「PhotoScan」を発表した。UKバイオバンクの35,000人以上のデータで事前学習し、新たな677人のコホートで微調整。独立した132人の検証コホートでは、体脂肪率の平均絶対誤差(MAE)2.13を達成し、スマートウォッチの生体インピーダンス(BIA)センサー(MAE 2.91)を上回る精度を示した。さらに、インスリン抵抗性の分類において、基本情報にPhotoScanの指標を追加するとAUROCが0.692から0.760に向上し、臨床のDXAスキャン(0.773)にほぼ匹敵する性能を実証した。
「PhotoScanは、標準的なスマートフォン画像から詳細な体組成を推定し、DXAに近い精度を提供する、拡張可能で非侵襲的なフレームワークである」
HNでの議論
33- faangguyindia
スマートウォッチの体組成分析(生体インピーダンス法を使用)を打ち負かすのは大した偉業ではない。なぜなら、その単点の粗いセンサーは、同じ技術を使ったプロ仕様の多セグメント・多周波数のInBodyマシンと比較して、非常に不正確だからだ。
GoogleのPhotoScan(MAE約2.1パーセントポイント)は、DXAと熟練したオペレーターによる適切な多部位キャリパー法の中間に位置し、米国海軍の周囲径法や、コンシューマー向けBIA(ハンドル付きスマートスケール)、下手なキャリパー法よりはるかに優れているかもしれない。
しかし、マイクロソフトリサーチの論文を覚えている:
>2022年、マイクロソフトリサーチ関連チームが「スマートフォンカメラによる肥満度評価」を発表した。彼らのVisual Body Composition(VBC)システムは、通常のスマートフォン写真とCNNを使用して、DXAに対する体脂肪率を予測した。134人、2サイトの検証コホートでは、平均絶対誤差2.16±1.54パーセントポイントを達成し、DXAとの一致度はCCC=0.96だった。
それから2022年から2026年まで、人々に利益をもたらすモデルはまだ存在しない。
これは、現在単にGemini Flashをラップして「体脂肪」を検出しているアプリを使って、多くの人々を助けることができる。
残念ながら、これらのモデル、コード、トレーニングデータはどれも自由に利用できない。
これらの企業は、公共の利益を真剣に差し控えている。現在、DXAスキャンを受けたい人は、米国では50ドル、インドでは1,500〜4,000ルピーを支払わなければならない。
貧しい国では、DXAは大多数の人々にとって手頃ではないかもしれない。モデルが公開されれば、より良いカメラを備えた「フォトブース」を設置することもできるかもしれない。
- jerlam
Amazon Haloは5年前に同様のことを行った:
https://www.amazon.science/latest-news/the-science-behind-th...
最近の臨床試験(結果はまだ発表されていない)では、DXAをゴールドスタンダードとした場合、Amazon HaloのBodyは、スマートスケールよりもBFP測定精度が約2倍高いと判定された。
- ofrzeta
何も測定する必要はない。ただ運動をすればいい。それだけだ。
- kamranjon
これが保険会社によって保険料を決定するために使われる可能性はあるのだろうか?
- sgallant
これが十分に良くなれば、スマートフォンが定期的に体組成を追跡し、ウェアラブル、血液検査、血糖値などと組み合わせることを想像できるだろう。突然、現在はクリニックと専門機器を必要とするいくつかの測定が、実質的に無料で継続的に行えるようになる。
...同時に、GoogleやAppleに自分の体の写真を渡すのは気味が悪い。