mysql匯入文字或excel檔案

liujinwei633發表於2009-04-10

用excel另存為tab分割的文字檔案。利用ultraEdit轉換編碼為utf8
方法一:mysqlimport 匯入
   [root@phpcms ~]# mysqlimport -uroot -p test test1.txt
  注意事項是txt檔名稱和表名一致,並需要將檔案cp到資料目錄的相應資料庫下

方法二:mysql登入後,用load命令執行
mysql> load data local infile '/root/Address.txt' into table ip_data;
Query OK, 175522 rows affected, 65535 warnings (0.95 sec)
Records: 175522  Deleted: 0  Skipped: 0  Warnings: 283399
注意事項是:database必須是utf8的,負責漢字會亂碼。database是lantin的,creata table時指定為utf8的情況下,方法二是亂碼,方法一正確。


參考資料:
1).MySQLimport的語法介紹:

  MySQLimport位於MySQL/bin目錄中,是MySQL的一個載入(或者說導 入)資料的一個非常有效的工具。這是一個命令列工具。有兩個引數以及大量的選項可供選擇。這個工具把一個文字檔案(text file)匯入到你指定的資料庫和表中。比方說我們要從檔案Customers.txt中把資料匯入到資料庫Meet_A_Geek中的表 Custermers中:

  MySQLimport Meet_A_Geek Customers.txt

  注意:這裡Customers.txt是我們要匯入資料的文字檔案,而Meet_A_Geek是我們要操作的資料庫,資料庫中的表名是Customers,這裡文字檔案的資料格式必須與Customers表中的記錄格式一致,否則MySQLimport命令將會出錯。

  其中表的名字是匯入檔案的第一個句號(.)前面檔案字串,另外一個例子:MySQLimport Meet_A_Geek Cus.to.mers.txt

  那麼我們將把檔案中的內容匯入到資料庫Meet_A_Geek 中的Cus表中。

  上面的例子中,都只用到兩個引數,並沒有用到更多的選項,下面介紹MySQLimport的選項

  2).MySQLimport的常用選項介紹:

  選項 功能

  -d or --delete 新資料匯入資料表中之前刪除資料資料表中的所有資訊

  -f or --force 不管是否遇到錯誤,MySQLimport將強制繼續插入資料

  -i or --ignore MySQLimport跳過或者忽略那些有相同唯一關鍵字的行, 匯入檔案中的資料將被忽略。

  -l or -lock-tables 資料被插入之前鎖住表,這樣就防止了,你在更新資料庫時,使用者的查詢和更新受到影響。

  -r or -replace 這個選項與-i選項的作用相反;此選項將替代表中有相同唯一關鍵字的記錄。

  --fields-enclosed- by= char 指定文字檔案中資料的記錄時以什麼括起的, 很多情況下資料以雙引號括起。 預設的情況下資料是沒有被字元括起的。

  --fields-terminated- by=char 指定各個資料的值之間的分隔符,在句號分隔的檔案中,分隔符是句號。您可以用此選項指定資料之間的分隔符。

  預設的分隔符是跳格符(Tab)

  --lines-terminated- by=str 此選項指定文字檔案中行與行之間資料的分隔字串或者字元。 預設的情況下MySQLimport以newline為行分隔符。

  您可以選擇用一個字串來替代一個單個的字元:

  一個新行或者一個回車。

  MySQLimport命令常用的選項還有-v 顯示版本(version),-p 提示輸入密碼(password)等。

  3).例子:匯入一個以逗號為分隔符的檔案

  檔案中行的記錄格式是這樣的:

  "1", "ORD89876", "1 Dozen Roses", "19991226"

  我們的任務是要把這個檔案裡面的資料匯入到資料庫Meet_A_Geek中的表格Orders中,我們使用這個命令:

  bin/MySQLimport –prl –fields-enclosed-by=" –fields-terminated-by=, Meet_A_Geek Orders.txt

   這個命令可能看起來很不爽,不過當你熟悉了之後,這是非常簡單的。第一部分,bin/MySQLimport ,告訴作業系統你要執行的命令是MySQL/bin目錄下的MySQLimport,選項p是要求輸入密碼,這樣就要求你在改動資料庫之前輸入密碼,操作 起來會更安全。我們用了r選項是因為我們想要把表中的唯一關鍵字與檔案記錄中有重複唯一關鍵字的記錄替換成檔案中的資料。我們表單中的資料不是最新的,需 要用檔案中的資料去更新,因而就用r這個選項,替代資料庫中已經有的記錄。l選項的作用是在我們插入資料的時候鎖住表,這樣就阻止了使用者在我們更新表的時 候對錶進行查詢或者更改的操作。

  批處理是一種非互動式執行MySQL程式的方法,如同您在MySQL中使用的命令一樣,你仍然將使用這些命令。

  為了實現批處理,您重定向一個檔案到MySQL程式中,首先我們需要一個文字檔案,這個文字檔案包含有與我們在MySQL中輸入的命令相同的文字。

  比如我們要插入一些資料,使用包含下面文字的檔案(檔名為New_Data.sql,當然我們也可以取名為New_Data.txt及任何其他的合法名字,並不一定要以字尾sql結尾):

  USE Meet_A_Geek;

  INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, "Block");

  INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, "Newton");

  INSERT INTO Customers (Customer_ID, Last_Name) VALUES(NULL, "Simmons");

  注意上面的這些句子的語法都必須是正確的,並且每個句子以分號結束。

  上面的USE命令選擇資料庫,INSERT命令插入資料。

  下面我們要把上面的檔案匯入到資料庫中,匯入之前要確認資料庫已經在執行,即是MySQLd程式(或者說服務,Windows NT下面稱為”服務“,unix下面為”程式“)已經在執行。

  然後執行下面的命令:

  bin/MySQL –p < /home/mark/New_Data.sql

  接著按提示輸入密碼,如果上面的檔案中的語句沒有錯誤,那麼這些資料就被匯入到了資料庫中。

  命令列中使用LOAD DATA INFILE 從檔案中匯入資料到資料庫:

  現在您可能會問自己,"究竟為什麼我要輸入所有的這些SQL語句到檔案中,然後通過程式執行它們呢?”

   這樣看起來好像需要大量的工作。很好,你這樣想很可能就對了。但是假如你有從所有這些命令中產生的log記錄呢?現在這樣就很棒,嗯,大多數資料庫都會 自動產生資料庫中的事件記錄的 log。而大部分log都包含有用過的原始的SQL命令。因此,如果您不能從您現在的資料庫中匯出資料到新的MySQL資料庫中使用,那麼您可以使用 log和MySQL的批處理特性,來快速且方便地匯入您地資料。當然,這樣就省去了打字的麻煩。

  LOAD DATA INFILE

  這是我們要介紹的最後一個匯入資料到MySQL資料庫中的方法。這個命令與MySQLimport非常相似,但這個方法可以在MySQL命令列中使用。也就是說您可以在所有使用API的程式中使用這個命令。使用這種方法,您就可以在應用程式中匯入您想要匯入的資料。

  使用這個命令之前,MySQLd程式(服務)必須已經在執行。

  啟動MySQL命令列:

  bin/MySQL –p

  按提示輸入密碼,成功進入MySQL命令列之後,輸入下面的命令:

  USE Meet_A_Geek;

  LOAD DATA INFILE "/home/mark/data.sql" INTO TABLE Orders;

  簡單的講,這樣將會把檔案data.sql中的內容匯入到表Orders中,如MySQLimport工具一樣,這個命令也有一些可以選擇的引數。比如您需要把自己的電腦上的資料匯入到遠端的資料庫伺服器中,您可以使用下面的命令:

  LOAD DATA LOCAL INFILE "C:\\MyDocs\\SQL.txt" INTO TABLE Orders;

  上面的LOCAL參數列示檔案是本地的檔案,伺服器是您所登陸的伺服器。

  這樣就省去了使用ftp來上傳檔案到伺服器,MySQL替你完成了.

  您也可以設定插入語句的優先順序,如果您要把它標記為低優先順序(LOW_PRIORITY),那麼MySQL將會等到沒有其他人讀這個表的時候,才把插入資料。可以使用如下的命令:

  LOAD DATA LOW_PRIORITY INFILE "/home/mark/data.sql" INTO TABLE Orders;

  您也可以指定是否在插入資料的時候,取代或者忽略檔案與資料表中重複的鍵值。替代重複的鍵值的語法:

  LOAD DATA LOW_PRIORITY INFILE "/home/mark/data.sql" REPLACE INTO TABLE Orders;

  上面的句子看起來有點笨拙,但卻把關鍵字放在了讓您的剖析器可以理解的地方。

  下面的一對選項描述了檔案的記錄格式,這些選項也是在MySQLimport工具中可以用的。他們在這裡看起來有點不同。首先,要用到FIELDS關鍵字,如果用到這個關鍵字,MySQL剖析器希望看到至少有下面的一個選項:

  TERMINATED BY character

  ENCLOSED BY character

  ESCAPED BY character

  這些關鍵字與它們的引數跟MySQLimport中的用法是一樣的. The

  TERMINATED BY 描述欄位的分隔符,預設情況下是tab字元(\\t)

  ENCLOSED BY描述的是欄位的括起字元。比方以引號括起每一個欄位。

  ESCAPED BY 描述的轉義字元。預設的是反些槓(backslash:\\ ).

  下面仍然使用前面的MySQLimport命令的例子,用LOAD DATA INFILE語句把同樣的檔案匯入到資料庫中:

  LOAD DATA INFILE "/home/mark/Orders.txt" REPLACE INTO TABLE Orders FIELDS TERMINATED BY ','

  ENCLOSED BY '"';

  LOAD DATA INFILE語句中有一個MySQLimport工具中沒有特點:

  LOAD DATA INFILE 可以按指定的列把檔案匯入到資料庫中。

  當我們要把資料的一部分內容匯入的時候,這個特點就很重要。比方說,我們要從Access資料庫升級到MySQL資料庫的時候,需要加入一些欄目(列/欄位/field)到MySQL資料庫中,以適應一些額外的需要。

   這個時候,我們的Access資料庫中的資料仍然是可用的,但是因為這些資料的欄目(field)與MySQL中的不再匹配,因此而無法再使用 MySQLimport工具。儘管如此,我們仍然可以使用LOAD DATA INFILE,下面的例子顯示瞭如何向指定的欄目(field)中匯入資料:

  LOAD DATA INFILE "/home/Order.txt" INTO TABLE Orders(Order_Number, Order_Date, Customer_ID);

  如您所見,我們可以指定需要的欄目(fields)。這些指定的欄位依然是以括號括起,由逗號分隔的,如果您遺漏了其中任何一個,MySQL將會提醒您^_^

  Importing Data from Microsoft Access (從Access中匯入資料,略)

   您可以看到MySQL有很多可以匯入資料的方法,然而這些只是資料傳輸中的一半。另外的一般是從MySQL資料庫中匯出資料。有許多的原因我們需要匯出 資料。一個重要的原因是用於備份資料庫。資料的造價常常是昂貴的,需要謹慎處理它們。經常地備份可以幫助防止寶貴資料地丟失;另外一個原因是,也許您希望 匯出資料來共享。 在這個資訊科技不斷成長的世界中,共享資料變得越來越常見。

  比方說Macmillan USA維護護著一個將要出版的書籍的大型資料庫。這個資料庫在許多書店之間共享,這樣他們就知道哪些書將會很快出版。醫院越來越走向採用無紙病歷記錄,這 樣這些病歷可以隨時跟著你。世界變得越來越小,資訊也被共享得越來越多。有很多中匯出資料得方法,它們都跟匯入資料很相似。因為,畢竟,這些都只是一種透 視得方式。從資料庫匯出的資料就是從另一端匯入的資料。這裡我們並不討論其他的資料庫各種各樣的匯出資料的方法,您將學會如何用MySQL來實現資料導 出。

  使用MySQLdump:

  MySQLdump命令位於MySQL/bin/目錄中

   MySQLdump工具很多方面類似相反作用的工具MySQLimport。它們有一些同樣的選項。但MySQLdump能夠做更多的事情。它可以把整個 資料庫裝載到一個單獨的文字檔案中。這個檔案包含有所有重建您的資料庫所需要的SQL命令。這個命令取得所有的模式(Schema,後面有解釋)並且將其 轉換成DDL語法(CREATE語句,即資料庫定義語句),取得所有的資料,並且從這些資料中建立INSERT語句。這個工具將您的資料庫中所有的設計倒 轉。因為所有的東西都被包含到了一個文字檔案中。這個文字檔案可以用一個簡單的批處理和一個合適SQL語句導回到MySQL中。這個工具令人難以置信地簡 單而快速。決不會有半點讓人頭疼地地方。

  因此,如果您像裝載整個資料庫Meet_A_Geek的內容到一個檔案中,可以使用下面的命令:

  bin/MySQLdump –p Meet_A_Geek > MeetAGeek_Dump_File.txt

  這個語句也允許您指定一個表進行dump(備份/匯出/裝載?)。如果您只是希望把資料庫Meet_A_Geek中的表Orders中的整個內容匯出到一個檔案,可以使用下面的命令:

  bin/MySQLdump –p Meet_A_Geek Orders >MeetAGeek_Orders.txt

  這個非常的靈活,您甚至可以使用WHERE從句來選擇您需要的記錄匯出到檔案中。要達到這樣的目的,可以使用類似於下面的命令:

  bin/MySQLdump –p –where="Order_ID > 2000" Meet_A_Geek Orders > Special_Dump.txt

  MySQLdump工具有大量的選項,部分選項如下表:

  選項/Option 作用/Action Performed

  --add-drop-table

  這個選項將會在每一個表的前面加上DROP TABLE IF EXISTS語句,這樣可以保證導回MySQL資料庫的時候不會出錯,因為每次導回的時候,都會首先檢查表是否存在,存在就刪除

  --add-locks

  這個選項會在INSERT語句中捆上一個LOCK TABLE和UNLOCK TABLE語句。這就防止在這些記錄被再次匯入資料庫時其他使用者對錶進行的操作

  -c or - complete_insert

  這個選項使得MySQLdump命令給每一個產生INSERT語句加上列(field)的名字。當把資料匯出導另外一個資料庫時這個選項很有用。

  --delayed-insert 在INSERT命令中加入DELAY選項

  -F or -flush-logs 使用這個選項,在執行匯出之前將會重新整理MySQL伺服器的log.

  -f or -force 使用這個選項,即使有錯誤發生,仍然繼續匯出

  --full 這個選項把附加資訊也加到CREATE TABLE的語句中

  -l or -lock-tables 使用這個選項,匯出表的時候伺服器將會給表加鎖。

  -t or -no-create- info

  這個選項使的MySQLdump命令不建立CREATE TABLE語句,這個選項在您只需要資料而不需要DDL(資料庫定義語句)時很方便。

  -d or -no-data 這個選項使的MySQLdump命令不建立INSERT語句。

  在您只需要DDL語句時,可以使用這個選項。

  --opt 此選項將開啟所有會提高檔案匯出速度和創造一個可以更快匯入的檔案的選項。

  -q or -quick 這個選項使得MySQL不會把整個匯出的內容讀入記憶體再執行匯出,而是在讀到的時候就寫入導檔案中。

   -T path or -tab = path 這個選項將會建立兩個檔案,一個檔案包含DDL語句或者表建立語句,另一個檔案包含資料。DDL檔案被命名為table_name.sql,資料檔案被命 名為table_name.txt.路徑名是存放這兩個檔案的目錄。目錄必須已經存在,並且命令的使用者有對檔案的特權。

  -w "WHERE Clause" or -where = "Where clause "

  如前面所講的,您可以使用這一選項來過篩選將要放到匯出檔案的資料。

  假定您需要為一個表單中要用到的帳號建立一個檔案,經理要看今年(2004年)所有的訂單(Orders),它們並不對DDL感興趣,並且需要檔案有逗號分隔,因為這樣就很容易匯入到Excel中。 為了完成這個人物,您可以使用下面的句子:

  bin/MySQLdump –p –where "Order_Date >='2000-01-01'"

  –tab = /home/mark –no-create-info –fields-terminated-by=, Meet_A_Geek Orders

  這將會得到您想要的結果。

  schema:模式The set of statements, expressed in data definition language, that completely describe the structure of a data base.

  一組以資料定義語言來表達的語句集,該語句集完整地描述了資料庫的結構。

  SELECT INTO OUTFILE :

   如果您覺得MySQLdump工具不夠酷,就使用SELECT INTO OUTFILE吧, MySQL同樣提供一個跟LOAD DATA INFILE命令有相反作用的命令,這就是SELECT INTO OUTFILE 命令,這兩個命令有很多的相似之處。首先,它們有所有的選項幾乎相同。現在您需要完成前面用MySQLdump完成的功能,可以依照下面的步驟進行操作:

  1. 確保MySQLd程式(服務)已經在執行

  2. cd /usr/local/MySQL

  3. bin/MySQLadmin ping ;// 如果這個句子通不過,可以用這個:MySQLadmin -u root -p ping

  MySQLadmin ping用於檢測MySQLd的狀態,is alive說明正在執行,出錯則可能需要使用者名稱和密碼。

  4. 啟動MySQL 監聽程式.

  5. bin/MySQL –p Meet_A_Geek;// 進入MySQL命令列,並且開啟資料庫Meet_A_Geek,需要輸入密碼

  6. 在命令列中,輸入一下命令:

  SELECT * INTO OUTFILE '/home/mark/Orders.txt'

  FIELDS

  TERMINATED BY = ','

  FROM Orders

  WHERE Order_Date >= '2000-01-01'

  在你按了Return(回車)之後,檔案就建立了。這個句子就像一個規則的SELECT語句,只是把想螢幕的輸出重定向到了檔案中。這意味這您可以使用JOIN來實現多表的高階查詢。這個特點也可以被用作一個報表產生器。

  比方說,您可以組合這一章中討論的方法來產生一個非常有趣的查詢,試試這個:

  在MySQL目錄建立一個名為Report_G.rpt 的文字檔案,加入下面的行:

  USE Meet_A_Geek;

  INSERT INTO Customers (Customer_ID, Last_Name, First_Name)

  VALUES (NULL, "Kinnard", "Vicky");

  INSERT INTO Customers (Customer_ID, Last_Name, First_Name)

  VALUES (NULL, "Kinnard", "Steven");

  INSERT INTO Customers (Customer_ID, Last_Name, First_Name)

  VALUES (NULL, "Brown", "Sam");

  SELECT Last_Name INTO OUTFILE '/home/mark/Report.rpt'

  FROM Customers WHERE Customer_ID > 1;

  然後確認 MySQL程式在執行,並且您在MySQL目錄中, 輸入下面的命令:

  bin/MySQL < Report_G.rpt檢查您命名作為輸出的檔案,這個檔案將會包含所有您在Customers表中輸入的顧客的姓。 如您所見,您可以使用今天學到的匯入/匯出(import/export)的方法來幫助得到報表。

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/32939/viewspace-587035/,如需轉載,請註明出處,否則將追究法律責任。

相關文章