Foveon – Bayer to Foveon X3, learned, Mac App using deep learning
Foveon is a Mac application that uses deep learning to convert standard Bayer pattern sensor images into Foveon X3-like images, offering improved color accuracy and detail by simulating the unique multi-layer sensor technology of Foveon sensors through neural network processing.
背景メモ
• **Foveon X3** は、従来の Bayer(ベイヤー)センサーと異なり、画素ごとに RGB 3色を積層で取得する独自方式のイメージセンサー。色滲みが少なく、被写界深度が浅い独特の描写で一部に熱狂的なファンを持つが、設計が複雑で高感度に弱く、製品数は限られている。
• **Sigma(シグマ)** が Foveon 社を買収して以降、同センサーを搭載したカメラ(SD シリーズ、dp / fp シリーズ)を製造しているが、市場シェアはごく小さく、あくまでニッチ製品。
• 本アプリは、機械学習(深層学習)を使って通常の Bayer センサー画像を Foveon X3 風の色味・質感に変換する Mac 向けツール。つまり、物理的な Foveon カメラがなくても、後処理でそのルックをシミュレーションできる。
• 同様の試みとしては、機械学習による Bayer→Foveon 変換を研究した学術論文("DeepFoveon" など)や、Lightroom 用プリセット、有志によるオープンソースプロジェクトが過去に存在するが、専用のネイティブ Mac アプリとして提供されるのは珍しい。