PCアナログ放送(NTSC伝送)が7月24日に終了し、テレビ放送がデジタルに一本化されました。MPEG-2でノイズを目立つ事無く圧縮するには放送波の帯域が不足しており、動きのあるシーンではモスキートノイズやブロック歪み(ノイズ)が暴れがちです。これは、アナログ信号のノイズとは異なる性質を持つため、従来のノイズリダクション(以下NRと表記)フィルタでは「掛かってほしくない部分までフィルタリングされてしまう」欠点があります。フィルタ」と「スムージングフィルタ」を組み合わせる擬似的なモスキートNR効果を狙う処理は、スキマ産業さんが2011年8月3日に公開された「低周波成分保護フィルタ」に「スムージングフィルタ」を組み合わせます。この処理のベースには、スムージングフィルタが輪郭周りにブラーもしくはLPFを掛けて結果的にスムージング効果をもたらすと同時に、「輪郭周りに発生するモスキートノイズも潰れる」という副次的な効果を利用した点にあり、もちろん、スムージングフィルタのみでは輪郭の角が丸まって潰れるなど変形してしまうため、実用が難しい(用途が限られる)フィルタでもあります。そこに現れたのが「低周波成分保護フィルタ」。スキマ産業さんが説明されているとおり、Wavelet変換で低周波成分の取得、再Waveletで低・高周波成分の取得・再構築を行うフィルタで、readmeにも書かれていますが、用途としては低周波成分(映像の微細なディテール)を保護しながらノイズNR系のフィルタと組み合わせてディテール保持のNR効果を狙うものです。額面どおり「そのまま」の使い方をしても十分効果はありますが、処理の仕組みから「スムージングフィルタと組み合わせたら、輪郭崩れを防ぎつつジャギーや歪みを補正しながらモスキートノイズを低減できるのでは?」と考え、試してみると......イメージに近い効果がありました。NR系フィルタとは異なる利点として、輪郭以外にフィルタがほぼ適用されないため、真面目なNRフィルタよりも処理が軽く、モスキートノイズだけでなくブロック歪みによる輪郭歪み・ジャギー補正も同時に行える点でしょうか。疑似モスキートNRの処理サンプル以下が、上記処理による擬似的なモスキートNRを施した比較映像です。トリミングした領域を3倍に拡大しており、画像をクリックする度に「元映像(フィルタOFF)」と「疑似モスキートNR」のスクリーンショットが入れ替わります。同じ領域をトリミングし、同じ位置でフィルタリング効果を確認できるため、違いがわかりやすいはずです。*ご不便をおかけしますが、画像が横に長いため、ブラウザを最大化するか横方向にスクロールしてご覧ください。[疑似モスキートNR・等倍]輪郭、とくにテロップ周りのモスキートノイズを低減しつつ、輪郭(キャラクターの主線)やテロップ文字の変形をほぼ防いでいます。【比較サンプル2】モスキートノイズは少なめですが、前髪の主線(目に掛かっている髪の輪郭線など)にブロック歪みが見受けられます(8x8ピクセル単位でブロック状の歪みがうっすら見えるはず)。これも、疑似モスキートノイズNRでこのように補正が効きます。フィルタ」を使わず、スムージングフィルタのみ適用した例(サンプル1と同じ強度)。輪郭が縮んだり丸まるなどして、画の性質が大きく変化してしまい残念な事に。判りやすいテロップ文字での変化は、キャラクターや背景等の主線でも同じように発生します。スムージングを弱く掛けてもそれなりに出てしまう欠点であり、それこそ極端に弱く掛けるとモスキートノイズを低減できないため、スムージングフィルタのみではまず使い物になりません。このような画の崩れは、WarpSharp系フィルタでも似たようなかたちで発生します。このように、低周波成分保護フィルタと組み合わせることで、スムージングフィルタの欠点をできる限り抑えつつ、モスキートNR的な効果を狙えることが確認できました。Wavelet3DNR4にはモスキートノイズNR・ブロックノイズNRが実装されているものの、シングルスレッド動作しかできない事もあり処理が極端に遅く、後段のフィルタやエンコーダの時間が長くなり、CPUがあくびをかく現象を起こします(ゆえに遅い)。同様の効果を狙える「疑似モスキートNR」であれば、Wavelet3DNR4よりも2~3倍程度高速に処理でき、エンコードデータのファイルサイズ削減も期待できます。2」が後段の処理となりますので、この2つのフィルタ間に「スムージングフィルタ」が来るよう各フィルタを並び替えます(左の画像)。この3つのフィルタがセットで「1つの疑似モスキートNR」と捉えると良いでしょう。復元率を指定しますが、今回の処理サンプルは元映像成分の復元度を高めるため、最大の100を指定。この数値を下げると映像成分の復元度が低くなり、間に適用するフィルタの処理特性が強く出ます。フィルタがスムージング時の輪郭変形を抑えるため、単体で掛けるときよりもやや強く掛けます。「範囲拡大」のチェックボックスは必ず入れ、適用範囲を広げつつサンプルでは強度を1にセット(範囲拡大をOFFにすると、先に書いたスムージング処理の欠点が出やすく、モスキートノイズへの効果も低くなるため、あまりオススメできません)。フィルタ強度に関しては、個々の主観や映像ソースの性質で左右するため、このセッティングが最適値というわけではありませんが、強度1はギリギリのラインかな......と個人的には感じました。0だと強すぎますので、範囲拡大&強度1~5程度が疑似モスキートNRとしての美味しいラインかな、と。プレビュー画面でフィルタ効果を確認する際は、スムージングフィルタのチェックボックスをON/OFFして画質変化の差を見ると把握しやすいでしょう(低周波成分保護フィルタはONのままでかまわない)。相まって背景等のディテールが保持されるモスキートノイズ低減や輪郭補正効果で、エンコード後のファイルサイズ縮小効果が期待できるWavelet3DNR4よりも処理が軽くやや速い1,2,4については先に述べましたが、3は映像特性やエンコーダのセッティングでも左右するため一概に「これくらいファイルサイズに縮小化できる」とは言えません。参考程度ですが、x264でかなりディテールを拾うセッティングにて「ゆるゆり」本編・数話をエンコードした限りでは10%~15%程度ファイルサイズが縮みました。デメリット主線がソフトではなく、やや高解像でコントラストが高めの映像はスムージング強度の調整に注意が必要I/P変換(60p化)や逆2-3後(24fps化)等のプログレッシブ映像専用処理。インタレース映像には適用できないWavelet3DNR4より速いといっても、やはりそれなりの処理速度ペナルティがある最後の処理速度については、この効果と処理速度を天秤に掛けたとき、「あり」だと思えるか「だめ」だと判断するかで評価が分かれると思います。モスキートノイズを低減した画質やファイルサイズ縮小化が嬉しい人は「この処理速度ならあり」と思える可能性が高いですし、「これくらいの改善なら速度を取ってフィルタリングしない」と判断する人もいるでしょう(結局は個々の価値観です)。最後の「~わからない」は、フィルタリングをしても主線やディテールの変化が気にならないという意味において、「気にならないなら、むしろ処理したほうが得かもしれない」という考えです。逆説的に「MPEG-2ノイズさえも映像の一部だから気にせず残したい」と捉える人にはウケが悪いかもしれません(であればトランスコード自体をしないという考え方もある)。フィルタ」を利用したフィルタリングについて、その一例をお伝えしました。18:48スムージング強度1だと実線は綺麗だけどエッジの保持具合はPMD_MTより劣るのでうーんと言った感じでしたが、スムージング強度5にしてみたら保持具合も良好且つ線も綺麗という結果が得られて気に入りました。エンコ時間が結構伸びてしまうのが悩ましいですね。記事では効果をわかりやすく見せるため強めに処理していますが、エッジを真面目に処理する場合は強度4,5程度まで弱くするのが実用的だと思います。フィルタが多くなるとエンコード時間が延びるのは、ある意味宿命ですが、画質と時間のトレードオフを考慮しても、やや重たい部類に入るフィルタリングになりますね。23:31はじめましてこんばんはいつも大変勉強になる記事ありがとうございます。この疑似モスキートNR処理を使用して疑問点がありこちらで質問させていただきます。この疑似モスキートNR処理を使用する際に、エッジ処理はNR前の処理の方が良いのでしょうか?それとも後でしょうか?基本的にNR系処理は最初の方にやると記憶してたのですが、このフィルタの場合はNRとはちょっと違った感じだと思い、後処理の方が良いのかと?疑問が生まれました。宜しければご教示orアドバイス頂けますと幸いです。それでは宜しくお願い致します。10:18「エッジレベル調整」の事でしょうか。いう効果を求めるか、にもよると思うのですが、輪郭を際立たせるという意味においては「疑似モスキートNR」の後のほうが良いと思います。モスキートノイズやブロック歪み低減後に処理したほうが、それらのノイズを強調する(影響される)ことなく「エッジレベル調整」の効果を期待できるためです。)、スムージングとエッジレベルの効果を把握しにくくなる可能性があるため、疑似モスキートNRの後の処理を個人的には推奨したいですね。23:02POP様お忙しい中ご返答大変有難うございます勉強になりました年末で忙しいかと思われますが更新楽しみにしております。20:07自分の場合をwavelet-typeGとNL-Meansを同時に使う方法が質感があまり失われないのでそれ、一本でまれにwavelet-3DNR4の高周波3DNRのみを兼用することもあります。コメントをキャンセルメールアドレスが公開されることはありません。コメントデータの処理方法の詳細はこちらをご覧ください。