
1500個の数値からなる、ある測定結果があります。
この測定結果はおよそ100個で1周期を取るような波形データですが、ところどころ高い値を示すノイズが見られます。
この測定結果からノイズを除去してきれいな波形を得るためにフィルタをかけようと思い、いろいろ調べたところsavitzky-golayという方法を見つけ、それを実現するプログラムも見つけました。
このプログラムは計算に使用する前後のデータポイント数と、多項式の次数を設定しなければなりません。現在、データポイント数を前:50・後:50、次数4として実行してみたところ、意図していたような近似グラフが得られました。
しかし、この二つの数字に根拠は無いというのが現状です。
そこで質問なのですが、この二つの項目を指定するに当たり、何か決まりや指標といったものはあるのでしょうか?
ちなみに、測定結果は全て正の数値で、必要なのはピーク値のみです。
宜しくお願いしいます。
No.1ベストアンサー
- 回答日時:
savitzky-golayは、移動多項式回帰(最小2乗近似)ですよね。
そこで似た例として、移動しない多項式補間の例で考えてみます。(1)次数が低い補間では、十分滑らかな補間にならない。例えば折れ線補間。
(2)高い次数では、いくらでも滑らかな補間ができるが、過適合の危険がある。
http://ja.wikipedia.org/wiki/%E9%81%8E%E5%89%B0% … の最初の図。
それで(1)と(2)のバランスをとるために、補間曲線の曲率絶対値の平均最小化という考えがあります。式で書けば、補間曲線をw(x),補間区間をLとして、
I=∫(d^2w/dx^2)^2 dx (Lで積分)の最小化.
です。Iの変分を取ると、wは3次関数という結果になります。根拠は、ベイズー赤池の情報量最小基準にあるようです。
http://ja.wikipedia.org/wiki/%E8%B5%A4%E6%B1%A0% …
今の場合、補間ではなく回帰なので、3次と4次の違いは、あまりない気がします。もう一つは補間であっても、3次と4次では最低サンプル点数の違いは一個なので、4次補間は、3次のスプライン補間と概ね同等ではないかと、個人的には思っています。
次に周期データの補間(回帰でも同じ)の場合、最低サンプル点数5の4次関数を使用したいです。理由は、どんな周期データも規格化して考えれば、sinのような波形であり、腹と節の5点でおさえられると思うからです。この場合周期データという条件があるので、4次は過適合ではないと考えています。重要なのは、この5点が一周期を覆っている事です。
そう考えると、100個で1周期なので、前後50個に4次多項式の回帰を行うのは、妥当と思えます。特に移動回帰でもあるので、1周期分をづらして計算すると、計算結果が連続化されて、結果が安定する気もします。
早速のご回答有難うございます。
さらに細かい説明やリンクなどもつけていただきありがたい限りです。
正直なところ、前半の解説の内容はまだイマイチな理解度なのですが、この数値が妥当と思えるとのことで安心しました。せっかくここまで説明していただいたので、工学部出身者として引き続き調べてddtddtddtさんの解説の理解に努めていきます。
取り急ぎ、お礼までにと思いまして。
本当にありがとうございます。
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
似たような質問が見つかりました
- 統計学 確率統計の問題です。 3 2022/04/07 04:39
- Access(アクセス) Accessテーブルの結合で別々のテーブルのフィールドを組み合わせて値を出す方法について 2 2022/07/20 19:43
- 化学 有効数字の取り扱いについて 高校化学では、測定値同士の計算結果の有効数字は、測定値に合わせるようにな 4 2022/06/30 14:07
- その他(自然科学) 風車音の測定 3 2023/04/28 07:12
- その他(Microsoft Office) Excelで時間計算(負) 8 2023/02/26 05:47
- 物理学 測定値と理論値の誤差について 交流回路の実験でRL回路、RC回路、RLC直列回路の周波数を上げた時の 1 2022/05/22 23:37
- 計算機科学 エクセルのデータの表すことについて 2 2023/03/05 20:49
- C言語・C++・C# [C言語] コメント文字列を無視して、数値データを読み込むプログラム部分について 5 2022/10/05 11:03
- 統計学 回帰分析検証不一致 5 2022/05/04 20:48
- 物理学 スピン 行列表示 固有状態 測定値 1 2022/08/16 18:39
このQ&Aを見た人はこんなQ&Aも見ています
おすすめ情報
- ・漫画をレンタルでお得に読める!
- ・「それ、メッセージ花火でわざわざ伝えること?」
- ・ゆるやかでぃべーと すべての高校生はアルバイトをするべきだ。
- ・【お題】甲子園での思い出の残し方
- ・【お題】動物のキャッチフレーズ
- ・人生で一番思い出に残ってる靴
- ・これ何て呼びますか Part2
- ・スタッフと宿泊客が全員斜め上を行くホテルのレビュー
- ・あなたが好きな本屋さんを教えてください
- ・かっこよく答えてください!!
- ・一回も披露したことのない豆知識
- ・ショボ短歌会
- ・いちばん失敗した人決定戦
- ・性格悪い人が優勝
- ・最速怪談選手権
- ・限定しりとり
- ・性格いい人が優勝
- ・これ何て呼びますか
- ・チョコミントアイス
- ・単二電池
- ・初めて自分の家と他人の家が違う、と意識した時
- ・「これはヤバかったな」という遅刻エピソード
- ・ゴリラ向け動画サイト「ウホウホ動画」にありがちなこと
- ・泣きながら食べたご飯の思い出
- ・一番好きなみそ汁の具材は?
- ・人生で一番お金がなかったとき
- ・カラオケの鉄板ソング
- ・自分用のお土産
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
スペクトル解析と周波数解析の違い
-
Igorの使い方について
-
分解能の値が大きいと小さいも...
-
有効数字…?
-
1/3オクターブバンドについて質...
-
gnuplot でこのような濃淡グラ...
-
時間を100進法であらわしたい。
-
10,000百万円っていくらですか?
-
穴が開く? 空く? 明く?
-
穴あけのあけってどんな漢字で...
-
「強度」は高い?強い?
-
ダブルナットとスプリングワッ...
-
「強度が弱い」という文はおか...
-
「1人あたりの1年間あたりの~...
-
積分定数Cとは一体なんですか?
-
角度の計算でdegとradがあると...
-
合成関数の微分を使う時と、使...
-
1MB=1024kBなのは分かりました...
-
SUS304
-
ドリルであけた穴がドリルの直...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
Igorの使い方について
-
隣接平均と移動平均
-
どなたか、S45Cの電気伝導率(S...
-
分解能の値が大きいと小さいも...
-
FFTのDC成分って、なんで大きく...
-
指数関数のカーブフィッティング
-
1/3オクターブバンドについて質...
-
近似直線について
-
MOSFETのgm-Vgs特性
-
半値幅の測り方
-
Ngraphで円を描く方法を教えて...
-
光学定数について
-
B-H曲線について
-
データの回帰分析と相関係数(R,...
-
gnuplot でこのような濃淡グラ...
-
原点修正の方法
-
savitzky-golayのフィルタについて
-
スペクトル解析と周波数解析の違い
-
IGOR Proを使っての計測方法を...
-
1Gは何メートル毎秒毎秒ですか?
おすすめ情報