MySQLはCSVデータからNULL値をロードします

カンマで区切られた3〜4列の数値を含むことができるファイルがあります。空のフィールドは、行の最後にある場合を除いて定義されます。

1,2,3,4,5
1,2,3,,5
1,2,3

次のテーブルはMySQLで作成されました。

+ ------- + -------- + ------ + ----- + --------- + ------- +
| フィールド| タイプ| ヌル| キー| デフォルト| エクストラ|
+ ------- + -------- + ------ + ----- + --------- + ------- +
| 1つ| int（1）| はい| | NULL | |
| 2 | int（1）| はい| | NULL | |
| 3 | int（1）| はい| | NULL | |
| 4 | int（1）| はい| | NULL | |
| 5 | int（1）| はい| | NULL | |
+ ------- + -------- + ------ + ----- + --------- + ------- +

MySQL LOADコマンドを使用してデータをロードしようとしています：

LOAD DATA INFILE '/tmp/testdata.txt' INTO TABLE moo FIELDS 
TERMINATED BY "," LINES TERMINATED BY "\n";

結果のテーブル：

+ ------ + ------ + ------- + ------ + ------ +
| 1つ| 2 | 3 | 4 | 5 |
+ ------ + ------ + ------- + ------ + ------ +
| 1 | 2 | 3 | 4 | 5 |
| 1 | 2 | 3 | 0 | 5 |
| 1 | 2 | 3 | NULL | NULL |
+ ------ + ------ + ------- + ------ + ------ +

問題は、生データでフィールドが空で定義されていない場合、MySQLが何らかの理由で列のデフォルト値（NULL）を使用せず、ゼロを使用するという事実にあります。フィールドがすべて欠落している場合、NULLは正しく使用されます。

残念ながら、私はこの段階でNULLと0を区別できなければならないので、どんな助けでも感謝します。

ありがとうS.

編集する

SHOW WARNINGSの出力：

+ --------- + ------ + -------------------------------- ------------------------ +
| レベル| コード| メッセージ|
+ --------- + ------ + -------------------------------- ------------------------ +
| 警告| 1366 | 不正な整数値：行2の列 'four'の '' |
| 警告| 1261 | 行3にすべての列のデータが含まれていません|
| 警告| 1261 | 行3にすべての列のデータが含まれていません|
+ --------- + ------ + -------------------------------- ------------------------ +

これはあなたが望むことをします。ローカル変数に空の文字列が含まれている場合、4番目のフィールドをローカル変数に読み込み、実際のフィールド値をNULLに設定します。

LOAD DATA INFILE '/tmp/testdata.txt'
INTO TABLE moo
FIELDS TERMINATED BY ","
LINES TERMINATED BY "\n"
(one, two, three, @vfour, five)
SET four = NULLIF(@vfour,'')
;

それらがすべて空である可能性がある場合は、次のようにそれらをすべて変数に読み込み、複数のSETステートメントを作成します。

LOAD DATA INFILE '/tmp/testdata.txt'
INTO TABLE moo
FIELDS TERMINATED BY ","
LINES TERMINATED BY "\n"
(@vone, @vtwo, @vthree, @vfour, @vfive)
SET
one = NULLIF(@vone,''),
two = NULLIF(@vtwo,''),
three = NULLIF(@vthree,''),
four = NULLIF(@vfour,'')
;

MySQLマニュアルによると：

LOAD DATA INFILEを使用してデータを読み取る場合、空または欠落している列は ''で更新されます。列にNULL値が必要な場合は、データファイルで\ Nを使用する必要があります。文字列「NULL」は、状況によっては使用されることもあります。

したがって、次のように空白を\ Nに置き換える必要があります。

1,2,3,4,5
1,2,3,\N,5
1,2,3

動作はデータベース構成によって異なります。厳密モードでは、これはエラーをスローし、それ以外の場合は警告をスローします。次のクエリは、データベース構成を識別するために使用できます。

mysql> show variables like 'sql_mode';

入力CSVを前処理して、空白のエントリを\ Nに置き換えます。

正規表現を試す：s / ,, // \ n、/ gおよびs /、$ /、\ N / g

幸運を。

（variable1、@ variable2、..）SET variable2 = nullif（@ variable2、 '' or ''）>>任意の条件を置くことができます

変数を表示

Show variables like "`secure_file_priv`";

注：上記のコマンドで指定した場所にcsvファイルを保存してください。

create table assessments (course_code varchar(5),batch_code varchar(7),id_assessment int, assessment_type varchar(10), date int , weight int);

注：ここで、「date」列にはcsvファイルのいくつかの空白値があります。

LOAD DATA INFILE 'C:/ProgramData/MySQL/MySQL Server 8.0/Uploads/assessments.csv' 
INTO TABLE assessments
FIELDS TERMINATED BY ',' 
OPTIONALLY ENCLOSED BY '' 
LINES TERMINATED BY '\n' 
IGNORE 1 ROWS 
(course_code,batch_code,id_assessment,assessment_type,@date,weight)
SET date = IF(@date = '', NULL, @date);