Galaxy S23 Ultra のクチコミ掲示板

ピクセルビニング時のカラーフィルタの切り替えについて

[totop]

※当スレッドは、カメラセンサーの技術面についての情報交換が目的です。
　　採用メーカーごとの良し悪し、売れるか否か、など、技術面とは関係ない書き込みはご遠慮ください。

カメラセンサーにおけるピクセルビニング時、カラーフィルタをどうやって切り替えているのか、ご存じの方いらっしゃいますでしょうか。
ピクセルビニング自体は、こちらの機種に限った技術ではありませんが、カラーフィルター切り替えの様子を動画で説明したものがあったため、こちらの板にスレッドを立てました。

https://www.excite.co.jp/news/article/Ubergizmo_japan_20906/
こちらの0:40ぐらいの所に、カラーフィルタが切り替わる動画がありますが、これは実際の動作でしょうか。それとも動作のイメージでしょうか。

Xperia 1 Vのように、ピクセルビニング固定であれば、最初からカラーフィルタを2x2の束にして配置（クアッドベイヤー）していると思っています。一方、Galaxyのように出力画素数が切り替えられるピクセルビニングの場合、フル画素であれば全体をベイヤー配列にし、ビニングに応じて、カラーフィルタを切り替える必要がありますよね。
カラーフィルターって、集光レンズの後ろにある物理的なフィルタだと思っているのですが、これを入れ替えるのは実際にはどうやっているのか、という疑問です。

書込番号：25268139

[sky878]

https://k-tai.watch.impress.co.jp/cda/article/keyword/4416.html
https://www.sony-semicon.com/ja/technology/mobile/quad-bayer-coding.html
https://www.itmedia.co.jp/mobile/articles/2208/22/news023_2.html

ISOCELLがどうなっているかは定かではありませんが、Sonyのセンサーでは基本的には4個分のフォトダイオードを同色のカラーフィルタにして、例えばただのベイヤー撮影時は色を再現する処理をしてそれっぽく仕上げているようです。

仮にカラーフィルタを反転させたとしても2種の色を再現するのにはかなり難しいでしょうし、実現していた反転させる機構を組み込むのが現実的じゃないかと。
後は1枚で2色を再現できるカラーフィルタがあってひっくり返せる機構を載せていたら大々的に発表しているんじゃないかなと思います。

書込番号：25268265

[しげ散歩]

＞totopさん
sky878さんも触れられていますがフィルターが入れ替わることは無いはずです。
動画見ましたがイメージでしょう。

下記の「どんな光源下でも鮮やかな画像」の部分がわかりやすいかもしれません。
分かりやすいとは言ってもそういうものだろうと思って見ないと、わかりにくい表現ですが。
https://semiconductor.samsung.com/jp/insights/technology/pixel-technology/

これで見るとXperia 1 Vのクアッドべイヤーと同様に、ISOCELL HPシリーズは2x2ビニングがベースとなっていると思われます。
再配置という表現はいまいちわからないですが、4画素を1画素とみなすということと理解できます。
それに対し1x1はリモザイク、4x4は合成という表現になっています。
リモザイクはビニングに対する一般的な処理と私は理解しており、sky878さんの挙げられた2つ目のリンクからするとSonyのクアッドべイヤーも同様ですね。

totopさんが別に立てられているスレッドにも書き込みましたが、Xperia 1 Vもやろうと思えば48MP出力は出来るはずです。
高画素化はクアッドべイヤーの利点ということでやっても良いとは思うのですが、（リモザイク由来での）不利益もあるのであえて行っていないのかなと推測しています。

書込番号：25268302

[sky878]

すみません、一部誤字で読みにくくなってしまいました。

×仮にカラーフィルタを反転させたとしても2種の色を再現するのにはかなり難しいでしょうし、実現していた反転させる機構を組み込むのが現実的じゃないかと。

〇仮にカラーフィルタを反転させたとしても2種の色を再現するのにはかなり難しいでしょうし、反転させる機構を組み込むのが現実的じゃないかと。

色々と調べてみましたがベイヤー撮影だと先にも書かれている通り、メーカー問わず基本的にはやっぱりデモザイク処理をして色を補完しているようですね。

あとはHP1のマクロ撮影画像だと下記のようになっています。
https://www.techinsights.com/blog/samsung-isocell-hp1-found-motorola-moto-x30-pro

HP3でもビニング時の撮影画素数は1250万画素になりますから、基本的なカラフィルタの取り扱いは16画素1カラーではないでしょうか。

これもしげ散歩さんと同意見になる部分ですが、Xperia 1Vが解像度の変更を許さなかったのはSonyがXperiaで目指すところの"色の表現力"に拘った結果ではないでしょうか?
色の補完をデモザイクとかディベイヤーとかいうみたいで、それってセンサー内で完結して出力されるらしいですが、やっぱり色の表現力を多少なりとも損ねるモノでしょうし。
ただ自社のセンサーの処理アルゴリズムを信じ切ってないんかいって思う所もありますが、きっと何らかの目的があって搭載していない所なんだと思います。

今のところ1Vのレビューを見ていると、今回のXperiaは今までより更にメインレンズの色の再現度だったり、ダイナミックレンジだったり、シャープネス処理であったり、色々な面で評価を得ているようです。実際作例も凄い綺麗に撮れてますしね。

1VだとExmorT IMX 888搭載らしいですが（数字は正式発表時に変わるかもです）、ビニング処理に何らかの制約があるのかないのかも定かではないものの、出来ないから1200万画素固定になっているというわけではなく、Xperia 1Vのコンセプト的にそれを許さなかったって感じじゃないでしょうか?

あくまでも憶測ですが。

書込番号：25268342

[ネモフィラ1世]

1�Xでのスレにも書きましたが、1200万画素固定なのはこれまでのXPERIAを振り返ると分かる通り速写性を重視してるからです
他社では当たり前な高画素そのままの撮影、加えて高倍率ズームに手を出さないのはsky878さんの仰る通りソニー自身が掲げているコンセプトから逸脱するからなんですよ
それがリアルタイムトラッキングとか今回の秒30コマなんていう高画素撮影では難しい機能です

まぁ、スマホでこれを実現できるのはまだまだ先かな・・・
個人的には4800万画素そのままの撮影モードがあっても面白かったですが、広角24mm（１倍）〜望遠85mm（光学3.5倍）が離れ過ぎなのでそこの画質劣化を抑えられるようにもなったというメリットもあるから良いのかなと

書込番号：25268408　スマートフォンサイトからの書き込み

[totop]

みなさま

　有益な情報をレスいただき、ありがとうございます。
　Xperia 1 Vで立てていた類似のスレッドにレスいただいた方々にこちらのスレを案内させていただきました。
　これまでにレスいただいた内容の参照にご利用ください。

　結果的にマルチスレになりかかっておりますこと、お詫び申し上げます。

　<Xperia 1 Vの類似スレ>
　　https://bbs.kakaku.com/bbs/J0000041387/SortID=25266094/#25268825


　さて。
　皆様からレスいただき、かなり分かってきたような気がします。

　下記は、ベイヤー配列の一部です。左がフル画素、右は2 x2のクアッドベイヤーになった場合です。

　　RGRG 　　　　RRGG
　　GBGB 　　　　RRGG
　　RGRG 　　　　GGBB
　　GBGB 　　　　GGBB

　例えば、1行目2列目のピクセルは、フル画素であればＧ、クアッドベイヤーであれば、Ｒになります。
　カラーフィルタは集光フィルタの後ろになる物理的なもの、だと思っているので、ビニングに応じて物理的なフィルタを切り替えられるのかが疑問で、そこにスレ冒頭のサムスンの解説動画を見たものだから、サブミクロンオーダーのフィルタを、どうやって動かすの？　と思ってしまったわけです。

　実際には物理的にフィルタを入れ替えているわけではなく、分析によってリモザイクしているようですね。今回のXperiaのセンサーだと、物理的なフィルターは上図右側のようになっていて、1行目2列目であれば常にRフィルタを通るものの、これをフル画素出力する場合（Xperia 1 Vは2x2ビニング固定ですが）必要な色はGになりますが、光の強度と色の強度を分析して最終的にフル画素の画像を得ると。ここの詳細が知りたかったところなのですが、詳しくはお話しできない、とのこと。ここはメーカーごとのノウハウ満載なのでしょう。
　
　
　つまり、フル画素は素のフル画素ということではなく、リモザイクという処理を経た画像であり、Galaxyの2億画素も同様で、5,000万画素からのリモザイクかも？　いずれにしても2億画素のトリミング耐性はすさまじい、と思いますが。

書込番号：25268888

[FZmania]

1 �Xのスレにも書きましたが改めて。
ソニー的には12MPで十分、という姿勢でこれまで頑なに12MPセンサーを採用し続けましたが、今回1 VでExmor-Tセンサーを搭載するにあたって、今更新たに12MPセンサーを製造しても外販で売れないので、48MPセンサーのピクセルビニング固定で代用しているのではと思います。
正直48MPをフル画素出力（リモザイク出力）しても過剰というか無駄にサイズがでかくなって扱いづらいだけですが、デジタルズーム時の解像度低下を抑えるには有効です。しかし、GSMArenaの1 Vのレビューによれば、
https://m.gsmarena.com/sony_xperia_1_v-review-2567p6.php
"We shot a few 2x zoomed photos, and those look cropped and upscaled from the default 1x output."
とあるように明らかにデジタルズーム時の解像度が低く、デジタルズーム時もピクセルビニングを使っているものと思われます。

書込番号：25268892　スマートフォンサイトからの書き込み

[FZmania]

＞totopさん

＞つまり、フル画素は素のフル画素ということではなく、リモザイクという処理を経た画像であり、Galaxyの2億画素も同様で、5,000万画素からのリモザイクかも？
カラーフィルターは5000万画素（もしかしたら4x4で1250万画素？）でも、輝度信号は2億画素あるので、うまくカラー合成（リモザイク）することで理論上2億画素相当の解像度を保てているものと思います。もっとも画素ピッチが極小になり、レンズ分解能の限界もあるので、実解像度は下がりますが。

書込番号：25268898　スマートフォンサイトからの書き込み

[arrows man]

同じく1200万画素を維持し続けたiPhoneに勝てる余地はあったにも関わらず、あちらが1200万画素を卒業して4800万画素へアップグレードしたのを見て、ソニーも焦りを感じたのかやっと重い腰を上げて同画素へアップグレードしました。
しかしその報せを聞いて『おお！』と声を上げた今や希少な信者を裏切るかのような、結局1200万画素に拘るという頑固振り。
これがGalaxy S23 Ultraより高い21万円、あまりに素晴らし過ぎてGalaxyへ移った自分を褒めたくなりました。
100倍ズームで月がくっきり撮れるとかいうのは嘘であるという記事に関して、iPhone民と同じく便乗して叩いてたのは多分Xperia民でしょうけど、笑える立場ではありませんよね？

書込番号：25268900

[AccuBattery Pro]

↑ 迷惑行為はやめましょう。
メーカーに対する誹謗中傷をやめましょう。
リアル社会でも同じですよねw

書込番号：25268910　スマートフォンサイトからの書き込み

[FZmania]

補足ですが、従来の配列（ベイヤー配列）でも各ピクセルにRGBの内の1色しか取り込めないので、演算による補完で色情報を復元しています（もちろん完璧に復元できる訳ではなく、偽色が発生する原因となります）。
クアッドベイヤー配列のリモザイクもその応用と言えるのではないでしょうか。

書込番号：25268911　スマートフォンサイトからの書き込み

[首都高湾岸線]

＞totopさん
＞Xperiaのセンサーだと、物理的なフィルターは上図右側のようになっていて、1行目2列目であれば常にRフィルタを通るものの、これをフル画素出力する場合（Xperia 1 Vは2x2ビニング固定ですが）必要な色はGになりますが、光の強度と色の強度を分析して最終的にフル画素の画像を得ると。

私は詳しいことは分かりませんが、今のスマホカメラの画像処理をAIが担っているとしたら、カラーフィルター配列が素のフル画素にしろクワッドベイヤーにしろ、AIに与える情報量に変わりはないのではないでしょうか。

何となくですが、最近のスマホカメラの画像処理をAIが担っていることを考えると、”画素数多い→AIに与える情報量が多い→AIの精度向上”なのかなと。（ただ、私はAI技術はよく分かりませんので、適当な意見ですが。。。）

書込番号：25268968

[totop]

＞arrows manさん

スレッドの冒頭でお断り申し上げた通りです。
どつぞ、お引き取りください。

書込番号：25268990　スマートフォンサイトからの書き込み

[FZmania]

度々失礼します。
クアッドベイヤー配列（4x4はヘキサデカベイヤー配列）のフル画素出力はセンサー内で一度普通のベイヤー配列に変換（リモザイク）して出力してから、さらに画像処理チップ（ISP）で色補完（デモザイク）しているようです。
どの程度AIが使われているのかは分かりませんが、一度リモザイクしてしまえば、少なくともISP内では従来通り画像処理できるということですね。失礼しました。

書込番号：25269004　スマートフォンサイトからの書き込み

[あたらしいモノが好き]

他社と同じ事をしないのは普通の企業の在り方なんですよ。
同じ事をやるのは他に術がなくなった場合です。
同じ事をやってたら最終的には価格競争になります。

そもそもここに書き込んでいないで、ギャラクシーの口コミに書き込めば良いじゃないですか。
わざわざ嫌いなものに近づいていって文句を言うのは、感心しませんね。

もっともあなたの場合、単純にサムソンからギャランティを受け取ってこういう書き込みをしている可能性が高そうです。正直羨ましい。噂ではふつうのサラリーマンでは到底到達できない年俸をもらえるとか。

書込番号：25270874　スマートフォンサイトからの書き込み

写真が綺麗

[ゆめとむまま]

GALAXYを使い続けてます。
画面が大きいのが見やすいのでこの前機種はノートでした。買いかえて1番感じたのは写真が綺麗なこと。
色んなシーンに合わせて撮れるのはもちろん、画像が綺麗で驚きました。
使い方がこれまでとは違うのと、メモリーカードが無くなったので、動画や写真が多い私は１テラを選べばよかったかなと後悔です。

書込番号：25264922　スマートフォンサイトからの書き込み

s23ultraサイコー

[熊のぷぅ〜さん]

今までの使った。スマホで、一番ですね〜これは、長く使って行きたいですね〜

書込番号：25256521　スマートフォンサイトからの書き込み

[αの中級者]

そら20万円近いハイエンドモデルですから・・・

書込番号：25256527

[arrows man]

同じ20万でもXperia 1 Vとかよりこっちの方がどう見ても満足度高いでしょうね。

書込番号：25256596　スマートフォンサイトからの書き込み

[XR21]

＞＞キーボードの変換機能がすこし弱い

FEPの工夫はしていますか？

書込番号：25260686

通話の不具合状況

[ごちゃ丸]

twitterや掲示板でau版S23 無印やultraの発着信が出来ない不具合が報告されているようですが、au版を使っている人は症状出ていますか？

どうもau simの5G SAが悪さをしているようで、au版の端末にdocomoのsimを挿すと発症しないようです。

書込番号：25258585　スマートフォンサイトからの書き込み

[†家電殿下†]

au版 ultra 1TBモデルを5/2から使ってます。

5/9に友達から「電話が繋がらないよ」と言われるまで気づきませんでした。
その後再起動で直りましたが、翌日も発着信出来ない状態になりました。

再び再起動で直り、とりあえず今日まで不具合は再発していないようです&#129300;

書込番号：25258761　スマートフォンサイトからの書き込み

[ごちゃ丸]

返信ありがとございます。

au版ヤバイですね。

他社のsimだと発生していないという報告がありますが。

5ちゃんでは、一応SAMSUNG側はこの事象を把握している、とうい書き込みがありましたが対応がいつになるなるやら。

書込番号：25258779　スマートフォンサイトからの書き込み

バッテリーが長持ち

[1おでん]

S20より分厚いしほんのり重いけど、その分バッテリーがめっちゃ長持ち！助かる&#128591;

書込番号：25256541　スマートフォンサイトからの書き込み

発売日から使用してみて！

[makotaron]

製品予約して発売日にXperia1�Vからセルフ機種変しました。
本日まで使用してきた感想！
�@Xperia卒業して良かった！GalaxyS23Ultra最高！
�A電池のもちがとてもいいです。Xperiaの時は、朝晩充電してました(笑)
�Bカメラ機能も凄いわ。ただ瞳フォーカスはXperiaに軍配。発色もXperiaは自然的でしたが、こちらは鮮やかですね。
�C画面がサクサク！日中、外でもハッキリ！見やすい。
�Dストラップホール付のケースカバーを付けました。
画面フィルムは貼りません！せっかく綺麗な画面だしさ。
auの製品保証には加入しときました。
�Eそれなりに重たいですが、私には最適。絶対落とせませね。ストラップ、大事！
�F細かなバグがあるようですが、アップデートしていくでしょう。
�Gとにかく機種変して大正解でした！
Xperia1�Xも出ましたね。評価を待ちましょう。
ありがとうございました。

書込番号：25256235　スマートフォンサイトからの書き込み