
ユーザー側で、Microsoft SQL Server2000を使用しています。
計算結果がおかしいので、仕事場で、SQL2008環境で互換モードでも、以下の現象が出てこまって
おります。テストで、確認しました。
23.0 - 22.1
の計算結果を0.9と出したいのですが、
0.899999999999999
と結果が返ってきます。
どこが間違っているのでしょうか?
SELECT
[Field01] AS 'Field01'
,[Field02] AS 'Field02'
,[Field01]-[Field02] AS 'Field01-02'
,(CAST(23 AS FLOAT) - cast(22.1 AS FLOAT) ) AS 'test1'
,(CAST(23 AS REAL ) - cast(22.1 AS REAL ) ) AS 'test2'
FROM
[dbo].[Table01]

No.2ベストアンサー
- 回答日時:
間違ってはいません。
しかし浮動小数点データは概数であるため、データ型の範囲に含まれるすべての値を正確に表せるわけではありません。
SQLServer 2008 などの概数型は IEEE754 仕様に従っています。
概数型では、多くの場合、指定されたとおり正確な値が格納されません。正確な値にきわめて近い概数が格納されます。多くのアプリケーションでは指定した値と格納される概数のわずかな差は問題にはなりません。ただし、その差が問題になる場合もあります。float 型と real 型にはこのような概数の性質があるので、財務アプリケーション、丸めが行われる演算、等価性のチェックなど、正確な数値動作が必要な場合には、これらのデータ型を使用しないでください。
代わりに、int 型、decimal 型、money 型、smallmoney 型を使用することをお勧めします。
実際にはどういうことなのか、多少極端ですが、例を上げてみましょう。
いま、ここで新しいCPUを構想していて、4ビットで 0.00~4.00 までの実数を表現するものを考えているとします。
この例題で、4 ビットのうちの上位2ビットを 1の位、下位2ビットを小数点以下の位にすると仮定した場合、小数点以下は2ビットしかありませんから、2進数の 00 を 0.00、2進数の 01 を 0.025、2進数の 10 を 0.05、2進数の 11 を 0.075 と表現する合計4つのみとなります。そして、1の位は 0、1、2、3 です。
この範囲で表現できる数値では正確な4は表現できませんが、概数として表せば、3.75 が一番4に近い数値となるわけです。
実際にはもう少しビット数が多いわけですが、おおむねこのような仕組みで実数が表現されています。
詳しいご回答ありがとうございました。
以下の様なやり方で、正しく出来そうです。
少数桁は、4桁までなのでMONEY型処理で大丈夫そうです。
SELECT
[Field01] AS 'Field01'
,[Field02] AS 'Field02'
,(CAST([Field01] AS MONEY) - cast([Field02] AS MONEY) ) AS '正01'
,(CAST(([Field01]-[Field02]) AS MONEY) ) AS '正02'
FROM
[dbo].[Table01]
しかし、浮動小数点ってやっかいな型なのですね。
勉強になりました。
No.3
- 回答日時:
おかしくなって当然です。
回避策は、#2 さんがしめされているので
なぜか?
の部分をExcelの場合で説明されています。
SQLServer でも考え方は一緒です。
※ #2 さんの詳しい解説ですね。
日経PC21 / エクセル(Excel)「演算誤差」対策講座
http://pc.nikkeibp.co.jp/pc21/special/gosa/
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
このQ&Aを見た人はこんなQ&Aも見ています
関連するカテゴリからQ&Aを探す
おすすめ情報
このQ&Aを見た人がよく見るQ&A
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
SQLのVARCHARとVARCHAR2の違い
-
VBAで変数内に保持された二次配...
-
ヌル値は記憶容量を必要としな...
-
オラクルのデータ型・通貨について
-
postgreSQLのデータ型
-
Float型の時の計算結果がおかしい
-
MySQLカラム名は日本語と英数字...
-
LIMIT で条件を満たしているの...
-
LIKE で清音と濁音・半濁音を区...
-
テーブル作成でエラーが出てき...
-
mysqlがインストールされている...
-
プレースホルダを使った複数カ...
-
ユーティリティーとは?OPatch...
-
シングルクォーテーションとダ...
-
ERROR 1045 (28000) (using pas...
-
存在しているファイルがロード...
-
MySQL の安全な再起動とコネク...
-
副問合せにLIKE文を使う方法は...
-
mysql_queryでのdelimiterの設...
-
ACCESSとXサーバーをODBCで接続...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
SQLのVARCHARとVARCHAR2の違い
-
INT型は金額の型に使用するべき...
-
プライマリーキーの昇順でソー...
-
VBAで変数内に保持された二次配...
-
Float型の時の計算結果がおかしい
-
Excel VBA SelectedItems
-
ヌル値は記憶容量を必要としな...
-
オラクルのデータ型・通貨について
-
postgreSQLのデータ型
-
オラクルのDATE型について
-
経過時間(hhmmdd)をDATE型には...
-
MYSQLで、ファイルを格納する方...
-
データの連続格納について
-
DB2 INSERT時の格納順序
-
DataSet ds = new DataSet();
-
-3.34 が -3.3399999999999999 ...
-
PDFをDBに格納する/取り出すには?
-
AccessからOrcleのODBCリンクテ...
-
Oracle9i で XMLType (CLOB) の...
-
ブログサイトを作る時、mysqlは...
おすすめ情報