18992849520
029-81544086
1.拼SQL语句,insert后面带1000个value一次性提交;
2.使用连接池,保持长连接插入;
3.更换Mysql的存储引擎为Inforbright,然后把数据做成文本,批量导入
4.使用队列,保持最高插入速度
有没人有其他更好的方法,最近有130G每天都文件要入库分析,期待指引密经。
[代码][SQL]代码
view source
1 LOAD DATA INFILE 'F:\a\data.txt' IGNORE INTO TABLE music.album CHARACTER SETutf8 FIELDS TERMINATED BY ',' lines terminated by '\r\n'(album_id,album_name,singer_name,publish_time,song_count);