tagCANDY CGI VBレスキュー(花ちゃん) の Visual Basic 2010 用 掲示板(VB.NET 掲示板)
VBレスキュー(花ちゃん) の Visual Basic 2010 用 掲示板(VB.NET 掲示板)
[ツリー表示へ]  [ワード検索]  [Home]

タイトル Re: VB2005の倍精度計算精度は?
投稿日: 2008/10/05(Sun) 20:35
投稿者オショウ
>             sj1 = 2.0# * (n - i) * sj2 / x - sj3

  この式の評価の順序がVB6と.NETで違うのではないでしょうか?

  因みに、倍精度変数と整数の変数が混ざっています。
  整数変数部を倍精度に精度合わせすれば解消しません?

  私も浮動小数点演算で、難儀しましたので・・・

※ 未検証ですので、コーディングして確認して下さい。

以上。

- 関連一覧ツリー をクリックするとツリー全体を一括表示します)

古いスレッドにレスはつけられません。