oracle外部表的創(chuàng)建
1.創(chuàng)建兩個外部文件分別為1.txt,2.txt其中分別只有一條數(shù)據(jù)。2.創(chuàng)建一個邏輯目錄并進行適當授權:SQL>createdirectoryztj_diras"c:\\ztj\";目錄已創(chuàng)建
然后在物理路徑上手工創(chuàng)建實際的目錄,如:在c:\\盤下創(chuàng)建ztj目錄文件夾。SQL>grantreadondirectoryztj_dirtoscott授權成功
SQL>grantwriteondirectoryztj_dirtoscott
授權成功
注意:創(chuàng)建完畢邏輯目錄之后把平面文件拷貝到該目錄下,另外還要注意文件名字不要寫錯,如:把前面創(chuàng)建的外部文件1.txt,2.txt分別移動到手工創(chuàng)建的目錄下面(c:\\ztj)3.創(chuàng)建外部表SQL>ED
編輯已寫入的文件createtabledemo(emp_idnumber(4),enamevarchar2(12),jobvarchar2(12),mgr_idnumber(4),hiredatedate,salarynumber(8),commnumber(8),dept_idnumber(2))
organizationexternal(
typeoracle_loaderdefaultdirectoryztj_dir
accessparameters(recordsdelimitedbynewlinefieldsterminatedby",")location("1.txt","2.txt"))
SQL>/表已創(chuàng)建
4.進行select選擇操作看看是否正確SQL>select*fromdemo;
如果要得到外部表的有關信息:SQL>selectowner,table_name,default_directory_name,access_parametersdba_external_tables;
如果DBA想要知道平面文件的位置,使用如下的查詢:SQL>select*fromDBA_EXTERNAL_LOCATIONS;
from使用外部表卸載數(shù)據(jù)
--準備一個簡單的select語句向這個目錄中卸載數(shù)據(jù)
createtabledemoorganizationexternal(typeoracle_datapumpdefaultdirectoryztj_dir
location("3.txt"))--"3.txt"在c:\\ztj\\目錄下面,通過createtable創(chuàng)建demo時,"3.txt"會在c:\\ztj\\目錄下面自動創(chuàng)建asselect*fromemp
講3.txt文件拷貝到要加載該表的機器,使用如下語句抽取DDL重建這個表selectdbms_metadata.get_ddl("TABLE","DEMO")fromdual;--抽取后的DDL語句如下:
CREATETABLE"SCOTT"."DEMO"(
"EMPNO"NUMBER(4,0),"ENAME"VARCHAR2(10),"JOB"VARCHAR2(9),"MGR"NUMBER(4,0),"HIREDATE"DATE,"SAL"NUMBER(7,2),"COMM"NUMBER(7,2),"DEPTNO"NUMBER(2,0)
)ORGANIZATIONEXTERNAL(TYPEORACLE_DATAPUMP
DEFAULTDIRECTORY"ZTJ_DIR"
LOCATION("3.txt"))
抽取有用的建表語句建表:
CREATETABLE"SCOTT"."DEMO1"(
"EMPNO"NUMBER(4,0),"ENAME"VARCHAR2(10),"JOB"VARCHAR2(9),"MGR"NUMBER(4,0),"HIREDATE"DATE,"SAL"NUMBER(7,2),"COMM"NUMBER(7,2),"DEPTNO"NUMBER(2,0)
)--重建該表后,執(zhí)行如下語句就可以加載這個表的信息
insert/*+append*/intodemo1select*fromdemo;與上面隔開外部表建表語句
createtablealert_fgisdb(textvarchar2(400))organizationexternal(typeoracle_loader
defaultdirectorybdumpaccessparameters(
recordsdelimitedbynewlinenobadfilenodiscardfilenologfile)
location("alert_fgisdb.log"))
rejectlimitunlimited
擴展閱讀:Oracle外部表使用
Oracle外部表
上一篇/下一篇201*-01-1023:59:06
查看(60)/評論(2)/評分(0/0)
Oracle9i的新特性之一是外部表的概念。這是在數(shù)據(jù)庫的數(shù)據(jù)字典中定義的一個表,但數(shù)據(jù)本身卻存儲在數(shù)據(jù)庫的外部。例如,您可定義一個外部表,它的數(shù)據(jù)來自用SQL*Loader裝載的文本文件。這樣其實正好,因為您需要裝載的人口普查數(shù)據(jù)就放在這樣一個文本文件中。創(chuàng)建外部表之前,需要先創(chuàng)建一個Oracle目錄對象,該Oracle目錄對象指向您的文本文件所在的操作系統(tǒng)目錄。CREATEDIRECTORYcensus_dataAS"/data/census";
現(xiàn)在,您可使用一種新形式的CREATETABLE語句,它看起來就像SQL語句和SQL*Loader控制文件的混合:
CREATETABLEcity_populations_ext(city_nameVARCHAR(9),pop_1990NUMBER,pop_201*NUMBER)
ORGANIZATIONEXTERNAL(TYPEoracle_loader
DEFAULTDIRECTORYcensus_dataACCESSPARAMETERS(RECORDSFIXED20
LOGFILEcensus_data:"city_populations.log"BADFILEcensus_data:"city_populations.bad"FIELDS
MISSINGFIELDVALUESARENULL(city_name(1:10)CHAR(9),pop_1990(11:15)INTEGEREXTERNAL(4),
POP_201*(16:20)INTEGEREXTERNAL(4)))
LOCATION("city_populations.dat"))
PARALLEL4REJECTLIMITUNLIMITED;當創(chuàng)建一個外部表時,實際只創(chuàng)建了一些數(shù)據(jù)字典項。您可像對其他任何SQL表那樣對外部表進行查詢,F(xiàn)在,假定您有下面這張工作表:CREATETABLEcity_populations(city_nameVARCHAR(9),census_yearNUMBER,populationNUMBER,
CONSTRAINTcity_populations_pkPRIMARYKEY(city_name,census_year));
有了這張表后,您可用下列INSERT...SELECTFROM語句以標準化格式從外部數(shù)據(jù)文件中提取人口普查數(shù)據(jù),并將其插入工作表。
INSERTINTOcity_populations(city_name,
census_year,population)SELECTcity_name,1990,pop_1990FROMcity_populations_extWHEREpop_1990ISNOTNULLUNIONALL
SELECTcity_name,201*,pop_201*FROMcity_populations_extWHEREpop_201*ISNOTNULL;
創(chuàng)建外部表時,由于將并行度設為4,所以數(shù)據(jù)庫將對文件進行劃分,使其由4個并行運行的進程讀取。并行處理是自動進行的,不需要由您采取額外的操作,這確實相當方便。要用SQL*Loader并行進行裝載,您必須將輸入文件人工分割為多個較小的文件。
導入論壇收藏分享給好友推薦到圈子管理舉報TAG:":[{"c":{"ix":0,"iy":0,"iw":960,"ih":1280},"p":{"h":1280,"opacity":1,"rotate":0,"w":1080,"x":135,"x0":135,"x1":135,"x2":1215,"x3":1215,"y":113.625,"y0":1553.625,"y1":113.625,"y2":113.625,"y3":1553.625,"z":0},"ps":null,"s":{"pic_file":"/home/iknow/conv//data//bdef//9699064//9699064_3_0.jpg"},"t":"pic"}],"page":{"ph":1263.375,"pw":893.25,"iw":960,"ih":1280,"v":6,"t":"1","pptlike":false,"cx":135,"cy":113.625,"cw":758.25,"ch":1149.75}})引用刪除mget/201*-01-1100:00:49
表函數(shù)
前面展示的INSERT語句是通過聯(lián)合兩條SELECT語句而實現(xiàn)的。這意味著外部數(shù)據(jù)文件被讀了兩遍--每條SELECT語句都要讀一遍。但是,讀兩遍輸入文件并不合人心意,特別是在文件非常大的情況下。幸運的是,用表函數(shù)可以解決這方面的問題,這是我在本文中將要介紹的第二個ETL特性?蓪⒈砗瘮(shù)想象成一個高度簡化的轉換引擎。如圖2所示,表函數(shù)將一組行作為輸入,然后返回一組不同的行作為輸出。和傳統(tǒng)函數(shù)不同的是,表函數(shù)可從SELECT語句的FROM子句中調用。
對于人口普查數(shù)據(jù)來說,您打算取得每一個輸入行,并將其轉換成兩個輸出行。每個輸入行都擁有來自兩個不同的人口普查年度的數(shù)據(jù),但是,標準目標表要求每一年的數(shù)據(jù)占一行,所以表函數(shù)必須能將來自每個輸入行的兩次人口計數(shù)轉換成兩個單獨的輸出行。
創(chuàng)建表函數(shù)之前,您需要創(chuàng)建一些類型。表函數(shù)返回的總是一個記錄集,所以在最開始的時候,請創(chuàng)建一個表類型,令其對應于目標數(shù)據(jù)表的定義。為此,首先創(chuàng)建一個對象類型來定義記錄,然后根據(jù)那個對象類型創(chuàng)建一個表類型。
CREATETYPEcity_populations_rowASOBJECT(city_nameVARCHAR2(9),census_yearNUMBER,populationNUMBER);/
CREATETYPEcity_populations_tableASTABLEOFcity_populations_row;/
函數(shù)的輸入是由對外部表city_populations_ext執(zhí)行一條SELECT語句而返回的數(shù)據(jù)行,因此,您需要一個恰當?shù)腞EFCURSOR類型。下面的語句將創(chuàng)建一個包,其中包含一個名為pop_cursor_type的REFCURSOR類型,它與city_populations_ext表的記錄結構相匹配。這個包還定義了一個表函數(shù),該表函數(shù)將這樣一個游標作為輸入?yún)?shù)。注意您首先必須創(chuàng)建表類型city_populations_table,以便可在表函數(shù)的RETURN子句中使用那種類型:
CREATEORREPLACEPACKAGEcensus_packageAS
TYPEpop_cursor_typeISREFCURSORRETURNcity_populations_ext%ROWTYPE;FUNCTIONcensus_transform(indataINpop_cursor_type)RETURNcity_populations_table
PARALLEL_ENABLE(PARTITIONindataBYANY)PIPELINED;END;/
函數(shù)中的PARALLEL_ENABLE子句使數(shù)據(jù)庫可并行執(zhí)行函數(shù)。PARTITIONindataBYANY子句指出輸入行可被分割為任意數(shù)量的數(shù)據(jù)桶,然后便可對其進行并行處理。PIPELINED子句使函數(shù)能遞增地返回結果集,同時其他輸入數(shù)據(jù)仍能得到處理。在調用函數(shù)的查詢執(zhí)行期間,可設想數(shù)據(jù)行都“經過(flowingthrough)”此函數(shù)。在清單1中,在包主體(PACKAGEBODY)中定義的函數(shù)代碼負責將每個輸入行轉換成要求的兩個輸出行。
我知道這些設置起來似乎比較復雜。但它最終帶來的好處可以說明這些麻煩是完全值得的,特別是對那些需要經常重復的有相同規(guī)律的裝載操作來說。通過啟用并行DML,然后使用表函數(shù),現(xiàn)在只需一次操作,即可實現(xiàn)人口普查數(shù)據(jù)的裝載和轉換:
ALTERSESSIONENABLEPARALLELDML;
INSERT/*+APPENDPARALLEL(t,4)*/INTOcity_populationstSELECT*
FROMTABLE(census_package.census_transform(
CURSOR(SELECTcity_name,pop_1990,pop_201*
FROMcity_populations_ext)));
圖3:并行裝載和智能更新/插入
圖3:一個單步、流水線的和并行的裝載過程
人口普查數(shù)據(jù)將從外部表讀取,采用文件內的并行機制,這一過程將被并行化處理。每個并行操作的輸出結果都會送入單獨的進程,這些進程也是并行運行的,可將每個輸入行轉換成您希望的兩個輸出行。由于表函數(shù)負責進行轉換,所以只需對外部文件遍歷一次即可。在此,還應提醒您注意的是不必用任何形式的工作表來暫存數(shù)據(jù),數(shù)據(jù)以流水線的方式從外部數(shù)據(jù)文件提取,經過表函數(shù)的處理,然后直接傳送給目標表。由于減少了數(shù)據(jù)復制的次數(shù),所以有效地減少了對磁盤空間的占用。":[{"c":{"ix":0,"iy":0,"iw":960,"ih":1280},"p":{"h":1280,"opacity":1,"rotate":0,"w":1080,"x":135,"x0":135,"x1":135,"x2":1215,"x3":1215,"y":113.625,"y0":1553.625,"y1":113.625,"y2":113.625,"y3":1553.625,"z":0},"ps":null,"s":{"pic_file":"/home/iknow/conv//data//bdef//9699064//9699064_6_0.jpg"},"t":"pic"}],"page":{"ph":1263.375,"pw":893.25,"iw":960,"ih":1280,"v":6,"t":"1","pptlike":false,"cx":135,"cy":113.625,"cw":758.25,"ch":1149.75}})引用刪除mget/201*-01-1100:00:10
外部表性能
用SQL*Loader進行原始數(shù)據(jù)裝載和通過一個外部表進行相同的裝載,兩者的性能有何差異呢?這個問題實際上是當我聽說Oracle新的外部表特性時所首先想到的,而且我相信,它也是大多數(shù)人關心的問題。我向Oracle公司的HermanBaer提出這一問題時,他的答復是假如將一個外部表作為數(shù)據(jù)源,那么一個INSERT/*+APPEND*/語句采用的是同SQL*Loader相同的內部直接路徑插入機制。
按我的設想,在比較外部表同SQL*Loader的性能時,需要關心的并不僅僅是完成原始數(shù)據(jù)裝載所需花費的時間,應考察整個裝載和轉換過程的性能。使用SQL*Loader,如果在裝載期間需要使用任何類型的SQL函數(shù),那么必須采用常規(guī)。如您所知,常規(guī)路徑裝載的性能通常遠不及直接路徑裝載的性能。采用外部表時,則不會在使用SQL函數(shù)時出現(xiàn)對性能的影響。同樣,在某些情況下,使用外部表使您能避免創(chuàng)建一個中間工作表。如果正在對數(shù)據(jù)進行歸納,則可用外部表一次完成歸納與裝載。但如果使用SQL*Loader,則必須將數(shù)據(jù)載入一個工作表,進行歸納,再將歸納結果插入到目標表。最后,從易用性的角度出發(fā)很重要的一點是,外部表使您能"透明地"并行訪問外部數(shù)據(jù)文件。
不管怎樣,在您考察外部表的性能,或在考察任何Oracle9i的新ETL(提取、轉換和裝載)特性性能時,一定要綜合考察整個過程,而不是僅僅考察這個過程中的單獨一個步驟。
友情提示:本文中關于《oracle外部表的創(chuàng)建》給出的范例僅供您參考拓展思維使用,oracle外部表的創(chuàng)建:該篇文章建議您自主創(chuàng)作。
來源:網絡整理 免責聲明:本文僅限學習分享,如產生版權問題,請聯(lián)系我們及時刪除。