Skip to content

Zeroplex 生活隨筆

軟體開發、伺服器和生活瑣事

小 縮小字型大小。 中 重設字型大小。 大 放大字型大小。

MySQL 透過 LOAD DATA 塞資料

Posted on 2021 年 8 月 16 日2021 年 8 月 16 日 By 日落 在〈MySQL 透過 LOAD DATA 塞資料〉中尚無留言

若有文字檔等大檔案,寫 parser 再建立 insert into 的語法來塞資料速度不算快。簡單格式的檔案 (如一行一筆資料或 comma 分隔等) 可以透過 LOAD DATA 來將資料塞進 table 中。

LOAD DATA 需要特殊權限,請先檢查 my.cnf 檔案中是否已允許該語法:

[mysql]

# enable LOAD FILE syntax
local-infile = 1

再來是檔案內容,這邊的範例是一行一筆資料:

alice
bob
cell
......

確定資料格式以後,建立一個暫時的 table 供匯入使用:

CREATE TABLE tmp (
  str varchar(50)
);

注意,匯入速度要快的話,臨時的 table 不要設定任何 trigger、primary key、index 等,不然會有大量的 disk I/O 拖慢速度。

最後就是下指令來將檔案中的內容匯入資料庫中:

LOAD DATA LOCAL INFILE '/path/to/file/simple-data.txt' into table tmp;

資料都匯入臨時的 table,就可以使用 INSERT INTO … SELECT 語法來將資料拉進正式環境了:

INSERT INTO words (`word`) 
  SELECT (`str`) FROM tmp
Tags:MySQL

文章導覽

Previous Post: OXOPO 1.5v 充電 鋰電池
Next Post: SQL Server 行行好

發佈留言 取消回覆

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *


其他

關於我  (About me)

小額贊助

  文章 RSS Feed

  留言 RSS Feed

Apache AWS Bash C/C++ Docker FreeBSD GCP Git Google Java JavaScript Laravel Linux Microsoft MSSQL MySQL Nginx PHP PHPUnit PostgreSQL Python Qt Ubuntu Unix Vim Web Windows WordPress XD 作業系統 分享 好站推薦 專題 攝影 新奇搞笑 新聞 旅遊 生活雜記 程式設計 網路架站 網頁設計 資訊學習 資訊安全 遊戲 音樂


創用 CC 授權條款
本著作係採用創用 CC 姓名標示-相同方式分享 4.0 國際 授權條款授權.