データベース | 漫ろで行こう

Posts tagged ‘データベース’

[MySQL]Connector/Net を利用した無効な日付の処理

11月 5th, 2009

会社の人に何故か質問されたのでメモ。

事の発端は、他の課の人から「無効な日付、例えば 0000-00-00 00:00:00 が含まれるデータを Connector/Net 経由でデータ抽出する場合にエラーが発生するのですが、その回避方法が掲載されているオフィシャルのドキュメントが意味不明なんです」というもの。
問題のドキュメントはこちら「MySQL :: MySQL 5.1 リファレンスマニュアル :: 24.2.4.6 Connector/NET で日付時間情報を処理する」
で、問題の記述「24.2.4.6.4. 無効な日付の処理」

無効な日付に MySqlDateTime を返すよう Connector/NET に指示するには、次のラインを接続ストリングに追加してください :

NotOverridable Public ReadOnly Property State As ConnectionState _
_
Implements IDbConnection.State

あー、うん。意味不明。VB での ConnectionState 取得方法な気がする。
ということで、当の本人には「公式ドキュメントが間違えている旨」と「Allow Zero Datetime を使用する旨」を伝えておきましたが、一応自分でチェックしておかないと怖いので念のため確認。

テスト環境は以下のような感じ。

MySQL : 5.1.38
MySQL Connector/Net : 6.1.2
言語 : C#

まずテーブルを作成してテスト用のデータを入れておく。

DROP TABLE IF EXISTS `hoge`;
CREATE TABLE `hoge` (
`id` bigint(20) auto_increment,
`str` varchar(255) DEFAULT ” NOT NULL,
`CDdate` datetime DEFAULT ’0000-00-00 00:00:00′,
`CStamp` timestamp DEFAULT NOW(),
KEY `id` (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

INSERT INTO (str) values(‘a’),(‘b’),(‘c’),(‘d’);
SELECT * FROM hoge;

+—-+—–+———————+———————+
| id | str | CDdate | CStamp |
+—-+—–+———————+———————+
| 1 | a | 0000-00-00 00:00:00 | 2009-11-05 10:18:20 |
| 2 | b | 0000-00-00 00:00:00 | 2009-11-05 10:18:20 |
| 3 | c | 0000-00-00 00:00:00 | 2009-11-05 10:18:20 |
| 4 | d | 0000-00-00 00:00:00 | 2009-11-05 10:18:20 |
+—-+—–+———————+———————+

次にコードを書きますが端折ります。
基本的な書き方は System.Data.SqlClient と同様で、MySql.Data.MySqlClien を参照するだけです。
接続文字列に Allow Zero Datetime を設定しているパターンと設定していないパターンの結果が以下になります。
各出力の１行目にコネクションストリングを出力し、２行目以降に SELECT 結果を出力するようにしました。

Allow Zero Datetime 未設定

Database=test;Data Source=localhost;User Id=hoge;Password=hoge;
1 a MySql.Data.Types.MySqlConversionException: Unable to convert MySQL date/time value to System.DateTime
場所 MySql.Data.Types.MySqlDateTime.GetDateTime()
場所 MySql.Data.MySqlClient.MySqlDataReader.GetValue(Int32 i)
場所 MySql.Data.MySqlClient.MySqlDataReader.get_Item(Int32 i)
場所 AllowZeroDatetime.Program.ExecMySql(String cns) 場所 C:\test\AllowZeroDatetime\AllowZeroDatetime\Program.cs:行 43

Allow Zero Datetime 設定

Database=test;Data Source=localhost;User Id=hoge;Password=hoge;Allow Zero Datetime=True;
1 a 0000/00/00 0:00:00 2009/11/05 10:18:20
2 b 0000/00/00 0:00:00 2009/11/05 10:18:20
3 c 0000/00/00 0:00:00 2009/11/05 10:18:20
4 d 0000/00/00 0:00:00 2009/11/05 10:18:20

Allow Zero Datetime を設定していない場合、案の定 0000-00-00 00:00:00 が設定されているカラムで Exception が発生しました。設定している場合には、問題なく出力されていることが分かります。
個人的にはデフォルト値で 0000-00-00 00:00:00 を設定するのは気持ち悪いのでやりたくないですね。設定するくらいなら NULL にしておきたいですが。

ドキュメントの該当箇所に関してはフィードバックをしておきたいと思います。

Filed under: MySQL | Comment (0)

[言語][C#]Fatal error encountered during command execution

9月 22nd, 2009

所用で C# から MySQL :: Connector/Net 6.0 を利用して MySQL からデータを抜く必要があったため、コーディングしていたのですが
Fatal error encountered during command execution
といったエラーが。

原因は直ぐに特定できたのですが、どうにも腑に落ちない。
というのも、原因は条件式の検索文字列の先頭に「@」が付いているため、変数として誤認されるのが原因で回避策は後回しとして、通常の SELECT 文とプロシージャコールで挙動が異なること。
プロシージャは以下のような感じ。これで同様のエラーが発生することはなく、問題なく動作してしまう。



string hoge = "@abc";

string fuga = "asdf1234";

string query = string.Format("call proc_Test('{0}', '{1}');", hoge, fuga);

一方、通常の SELECT 文だと先述したプロシージャのようなコーディングを行うと Fatal error encountered during command execution と怒られてしまう。
対処方法としては以下のような感じにする必要がある。


string cns = "MySQL接続文字列";

string hoge = "@abc";

string fuga = "asdf1234";

string query = string.Format(

  "select * from atTest where testName=@TEST and testPass='{0}';", fuga);

using (MySqlConnection conn = new MySqlConnection(cns))

{

  MySqlCommand cmd = new MySqlCommand(query, conn);

  cmd.Parameters.Add(new MySqlParameter(

    "@TEST", MySqlDbType.VarChar, 40));

  cmd.Parameters["@TEST"].Value = hoge;

  cmd.CommandTimeout = 300;

  conn.Open();

  // 処理

  conn.Close();

}

後者も完璧ではないけども（fuga 変数の内容も本来であれば、Parameters に Add するべきなんだけど）プロシージャの場合は問題無いのはどういうことだろう？
Conncector/Net のバグなのか仕様なのか……。

official.MySQL Query Analyzer – Improving SQL Query Performance

Filed under: C#, MySQL | Comment (0)

[MySQL]MySQL 5.1.38 環境で InnoDB Plugin を試してみる

9月 7th, 2009

先週末にリリースされた MySQL 5.1.38 において、InnoDB のプラグイン化がされたそうなので、試してみました。且つ覚書的な。

試してみた環境

OS バージョン: CentOS release 5.3 (Final)
MySQL バージョン: MySQL 5.0.45

Cent OS 5.3 ですが、MySQL :: MySQL 5.1 GA から Red Hat Enterprise Linux 5 RPM (x86) 版をダウンロード。
とりあえず、Server, Client, Shared libraries, Headers and libraries の４つ。

rpm -Uvh MySQL-client-community-5.1.38-0.rhel5.i386.rpm MySQL-server-community-5.1.38-0.rhel5.i386.rpm MySQL-devel-community-5.1.38-0.rhel5.i386.rpm MySQL-shared-community-5.1.38-0.rhel5.i386.rpm

実行したら Server のみ怒られました……。
なので、Server のみ削除してインストールします。

rpm –nodeps -ev mysql-server-5.0.45-7.el5

削除できたらインストール。

rpm -Uvh MySQL-server-community-5.1.38-0.rhel5.i386.rpm

インストールできたら mysqld を動作させて、過去バージョンとの差異というか整合性をあわせるために以下のコマンドを実行。

mysql_upgrade

これで準備完了。
my.cnf に以下を記述。

[mysqld]
ignore-builtin-innodb
plugin-load=innodb=ha_innodb_plugin.so

プラグインファイルを発見出来ず、起動することが出来ない場合があったら、プラグインのディレクトリを追記してあげます。
自分の環境ではプラグインの場所はこんな感じでした。

[user@host etc]# locate innodb_plugin
/usr/lib/mysql/plugin/ha_innodb_plugin.a
/usr/lib/mysql/plugin/ha_innodb_plugin.la
/usr/lib/mysql/plugin/ha_innodb_plugin.so
/usr/lib/mysql/plugin/ha_innodb_plugin.so.0
/usr/lib/mysql/plugin/ha_innodb_plugin.so.0.0.0

なので、my.cnf に記述すると以下のようになります。

[mysqld]
ignore-builtin-innodb
plugin-load=innodb=ha_innodb_plugin.so
plugin_dir=/usr/lib/mysql/plugin

設定が反映させているか確認。

Library が NULL ではなく、Plugin ファイル名が表示されていれば OK です。

InnoDB Plugin にしてどうなるか？ということは特にないです。
寧ろ現状ベータ版につき、不具合が発生するかもしれません。
5.1.38にアップデートしたら InnoDB は使えなくなるかというと No で、ちゃんと今まで通りビルトイン環境も残っているので、従来通りの使い方が出来ます。

じゃあ、InnoDB Plugin て不要じゃないかと思うかもしれませんが、今ではなく今後に期待すべきプラグインになります。
ビルトインじゃない分、プラグイン形式の方が開発に融通が利きます。また、新しいことを実装するためのテストなんかもプラグイン形式の方が作業を行いやすいです。
そういった融通の利きやすさに対して、今後に期待されています。

今度は Spider Plugin なんかも試してみたいですね。（SpiderForMySQL.com）

official.MySQL :: 世界でもっとも普及している、オープンソースデータベース

Filed under: MySQL | Comment (0)

[MySQL]演算結果に浮動小数点が出力される件について

8月 31st, 2009

仕事の絡みで以前にもやっていた集計をしていて嵌ったのでメモ。いや、普通に考えればそうしたら良いのだけど、混乱したので覚書。

以前の成功例
以前やっていたのは以下の状態。

MySQL 5.0.45
対象の型は「decimal」のhogeというカラム
decimal 型の小数点以下は切り捨て
対象の型には「正」の数値のみ
合計した値を10で割った数値を出力

上記条件を満たしたクエリは以下。

select sum(cast(hoge as unsigned)/10) from test;

前回はコレで問題なかったのですが、今回同様にしてみたところ。どうしても結果に浮動小数点が表示される……。

今回の失敗例

MySQL 5.0.45
対象の型は「int」のhogeというカラム
対象の型には「負」の数値のみ
合計した値を10で割った数値を出力

で、結果クエリがこうなりました。

select truncate(sum((hoge*-1)/10),0) from test;

「/10」がどうも悪さをしているようで、「/10」が無ければ浮動小数点が表示されないけども、10で割りたい。割ったら浮動小数点が表示される。悩んだ挙句、trancate の存在を忘れていたことを思い出したので解決。
うーん、整数で割ってて浮動小数点が表示されるのは何故なんだろう？

Filed under: MySQL | Comment (0)

[MySQL]Windows で mysql-proxy

7月 28th, 2009

Windows で mysql-proxy を使用するための設定メモ的な。

Linux では利用しているのですが、Windows 環境では初めてだったため、面倒だなぁと思いつつも〆切りが近いのもあって渋々やることに。

以下から mysql-proxy Win32 版をダウンロード。
MySQL :: MySQL Proxy Alpha :: Windows

やったことは完結に以下のこと。

ダウンロードした Zip ファイルを解凍
出来たフォルダを mysql-proxy にリネームして C:\Program Files 直下へ
mysql-proxy\share\mysql-proxy\ に自分の好みの記述をした lua スクリプトの設置
mysql-proxy\bin\mysql-proxy.exe のショートカットをデスクトップに作成
ショートカットを開いて “C:\Program Files\mysql-proxy\bin\mysql-proxy.exe” を “C:\Program Files\mysql-proxy\bin\mysql-proxy.exe” –daemon –proxy-backend-addresses=[MySQL IP]:[MySQL Port] –proxy-lua-script=”C:\Program Files\mysql-proxy\share\mysql-proxy\hoge.lua” に修正
起動を確認

Windows では、何気に面倒な作業があるんじゃなかろうかという先入観があった状態で作業していたので、簡単に終わって拍子抜け。
後は適当に、本当に接続できるか確認して終わり。

なお、mysql-proxy はデフォルトで 4040 と 4041 ポートで起動しているので、そこだけ注意。
※あれ？接続出来ないぞ？的な意味で。

official.MySQL :: 世界でもっとも普及している、オープンソースデータベース

Filed under: MySQL | Comment (0)

[MySQL]ネットマスクのAND演算処理

7月 16th, 2009

諸事情により言語側での IP チェック処理をしたくないため、MySQL で完結出来ないかなぁと探してみたのですが、ピンポイントで欲している情報がなかったため、色々試行錯誤した結果のメモ的な。

◆やりたいこと

DB 上に IP およびネットマスクが登録されている
接続元 IP が DB に登録されている情報にマッチするかチェック
OK であれば、先へ進める
NG であれば、もちろん弾く

まず、テーブルとサンプルデータを用意。
Yahoo! 様と Google 様にご協力いただきました（勝手に）
本当であれば Yahoo! 様は２つ、Google 様は３つあるのですが、各１つずつ利用サンプルとして利用させていただきました。

DROP TABLE IF EXISTS `tbl_IPMask`;
CREATE TABLE `tbl_IPMask` (
`id` int(10) unsigned auto_increment NOT NULL,
`ip` int(10) unsigned NOT NULL,
`mask` int(10) unsigned NOT NULL,
`name` varchar(40) collate utf8_bin NOT NULL,
`cdate` timestamp NOT NULL default CURRENT_TIMESTAMP,
PRIMARY KEY (`id`),
KEY `idx_ip` (`ip`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8 COLLATE=utf8_bin;

INSERT INTO tbl_IPMask values
(0, INET_ATON(’124.83.128.0′), INET_ATON(’255.255.128.0′), ‘yahoo.co.jp’, CURRENT_TIMESTAMP),
(0, INET_ATON(’74.125.0.0′), INET_ATON(’255.255.0.0′), ‘google.co.jp’, CURRENT_TIMESTAMP);

１．登録済みネットマスクの取得
DB に登録してあるネットマスクをユニークで抜き出します。

SELECT DISTINCT(mask) from tbl_IPMask;

２．接続があった IP をチェック
MySQL には INET_ATON() と INET_NTOA() という関数があるので、これを利用します。
MySQL :: MySQL 5.1 リファレンスマニュアル :: 11.10.4 その他の関数

取得したユニークなマスクの分だけループして以下の SQL を回します。

SELECT COUNT(id) FROM tbl_IPMask WHERE ip=(INET_ATON(‘接続元 IP アドレス’) & 取得したネットマスク);

Yahoo! 様の場合「124.83.139.192」Google 様の場合「74.125.91.104」から接続があったこととします。

– Yahoo! 様の場合
SELECT COUNT(id) FROM tbl_IPMask WHERE ip=(INET_ATON(’124.83.139.192′) & 4294934528);
– Google 様の場合
SELECT COUNT(id) FROM tbl_IPMask WHERE ip=(INET_ATON(’74.125.91.104′) & 4294901760);

上記を実行すると「1」が返ってきます。「0」が返ってきた場合、NG なので弾きます。
登録されている情報にもよりますが、「0＝NG」「0<>OK」とした方が良いかと思われます。

もっと良いやり方があれば、是非に教えていただければ！

via.MySQL :: MySQL 5.1 リファレンスマニュアル :: 11.10.4 その他の関数

Filed under: MySQL | Comment (0)

[MySQL]MySQL 6.0.9-alpha リリース

1月 20th, 2009

本日5.1系の後継である、6.0のアルファ版がリリースされました。

ダウンロードはこちらから：

http://dev.mysql.com/downloads/mysql/6.0.html

MySQL 6.0 について詳しく知りたい方はこちら：

http://www.mysql.com/mysql60/

via.MyNA Web Site – News -

Filed under: MySQL | Comment (0)

漫ろで行こう

Posts tagged ‘データベース’

[MySQL]Connector/Net を利用した無効な日付の処理

[言語][C#]Fatal error encountered during command execution

[MySQL]MySQL 5.1.38 環境で InnoDB Plugin を試してみる

[MySQL]演算結果に浮動小数点が出力される件について

[MySQL]Windows で mysql-proxy

[MySQL]ネットマスクのAND演算処理

[MySQL]MySQL 6.0.9-alpha リリース

Auther : Suzuro

固定ページ

カテゴリー

Popular Posts

Similar Posts

最近の投稿

Link

RSS Feeds