怎样将txt格式的文件导入到数据库中

怎样将txt格式的文件导入到数据库中,第1张

步骤:

1读取TXT文件内容。

2分析TXT文件内容记录特点。

3设计好SQL数据字段

4执行插入。

不知道楼主用什么语言,无法具体回答。不过如果楼主懂编程的话,根据这几点很容易搞定。

相信读取文件和插入 *** 作都不是难事吧。

txt同样是可以导入到Sql

Server2000数据库的

但是

前提是你的txt文件内容是有特定的格式

比如

你要的信息字段内容必须用特定的符号隔开(默认是逗号)

a,b,c

e,f,g

如果这样的要求满足的话

然后你

打开sql

server2000

选择数据库——>导入数据

显示导入数据向导-》下一步

在选择数据源的时候

"数据源"选择“文本文件”->下一步

选择行分隔符->下一步

选择列分隔符。。。。。下一步。。。。完成

使用场景:

比如将

C:\Test\

目录下的所有

txt文件内容

导入到

Table_1

--定义临时表,用于存放获取的文件名称

CREATE

TABLE

#files

(name

varchar(200)

NULL,

sql

varchar(7000)

NULL)

--获取文件名称,存放在#files

INSERT

#files(name)

exec

masterxp_cmdshell

'dir

c:\test

/b'

--删除不要的文件名称

DELETE

#files

WHERE

coalesce(name,

'')

NOT

LIKE

'Code%'

--插入需要

导入文件内容的

命令SQL,需要修改

Table_1(改为导入的Table)和文件路径

UPDATE

#files

SET

sql

=

'BULK

INSERT

Table_1

FROM

'''

+

'C:\Test\'+name

+

'''

WITH

('

+

'DATAFILETYPE

=

''char'',

FIELDTERMINATOR

=

''\t'',

'

+

'ROWTERMINATOR

=

''\n'')'

--开始执行导入

DECLARE

@sql

varchar(8000)

DECLARE

cur

CURSOR

STATIC

LOCAL

FOR

SELECT

sql

FROM

#files

OPEN

cur

WHILE

1

=

1

BEGIN

FETCH

cur

INTO

@sql

IF

@@fetch_status

<>

0

BREAK

EXEC(@sql)

END

DEALLOCATE

cur

主要分为读取文件夹下所有文件和导入文件内容两部分

--读取文件夹下所有文件

declare

@files

table

(ID

int

IDENTITY,

FileName

varchar(100))

insert

into

@files

execute

xp_cmdshell

'dir

c:\test

/b'

select

'c:\'+

[FileName]

AS

FILEPATH

INTO

#temp

from

@files

SELECT

FROM

#temp

--导入文件内容

BULK

INSERT

dboTable_1

FROM

#temp

WITH

(

ROWTERMINATOR

='\n'

)

还需要开启

/

Step

1

开启

xp_cmdshell

Use

Master

GO

EXEC

masterdbosp_configure

'show

advanced

options',

1

RECONFIGURE

WITH

OVERRIDE

GO

EXEC

masterdbosp_configure

'xp_cmdshell',

1

RECONFIGURE

WITH

OVERRIDE

GO

/

参考:

>

把TXT文本数据导入到Sybase数据库中的方法:

1、使用bcp -c 导入。

bcp导入导出:

导出数据:

bcp DatabaseNamedbotableName out D:\tableNametxt -SServerName -Usa -P -c -b 10000

导入数据:

bcp DatabaseNamedbotableName in D:\tableNametxt -SServerName -Usa -P -c -b 10000

在导入大量数据时加上-b参数,分批提交不以致于数据库日志被塞满。

BufferedReader input;

try {

String s = new String();

input = new BufferedReader(new FileReader("f:\\123txt"));

while ((s = inputreadLine()) != null) { // 判断是否读到了最后一行

String info[] = ssplit(" ");

Systemoutprintln( info[0] + " " + info[1] + " " + info[2] );

}

inputclose();

} catch (FileNotFoundException e) {

// TODO Auto-generated catch block

eprintStackTrace();

} catch (IOException e) {

// TODO Auto-generated catch block

eprintStackTrace();

}

把info[0] + " " + info[1] + " " + info[2] 这三个值放在insert语句里就行了 经过测试

大型的数据库开发中常常遇到数据源是平面文件(如文本文件)的情况,对于这样的数据源,无法使用数据库对其数据进行有效的管理,另外也无法使用SQL语句对其进行查询和 *** 作,所以当务之急就是将这些平面文件导

入到数据库中,然后就可以对其进行高效的 *** 作了。

下面介绍几种常见的数据导入的方法,希望能够给大家启迪。另外,本文所涉及到的数据库均为ORACLE数据库,其实对于其他数据库而言,方法类似。

一、Sql:Loader

该方法是Oracle数据库下数据导入的最重要的方法之一,该工具由Oracle客户端提供,

其基本工作原理是:首先要针对数据源文件制作一个控制文件,控制文件是用来解释如何对源文件进行解析,其中需要包含源文件的数据格式、目标数据库的字段等信息,一个典型的控制文件为如下形式:

LOAD DATA

INFILE '/ora9i/fengjie/agent/data/ipaagentdetail200410txt'

TRUNCATE (也可以用append替换TRUNCATE)

INTO TABLE fj_ipa_agentdetail

fields terminated ","

trailing nullcols

( AGENT_NO char,

AGENT_NAME char,

AGENT_ADDRESS char,

AGENT_LINKNUM char,

AGENT_LINKMAN char

)

其中,INFILE '/ora9i/fengjie/agent/data/ipaagentdetail200410txt'指明所要导入的源文件,其实源文件也可以直接通过命令行来输入获得 ,fj_ipa_agentdetail为目标表的名字,fields terminated ","是指源文件的各个字段是以逗号分隔,trailing nullcols表示遇到空字段依然写入到数据库表中,最后这5个字段是目标数据库表的字段结构。通过上面这个典型的控制文件的格式分析可知,控制文件需要与源文件的格式信息一致,否则导入数据会出现异常。

除了控制以外,sqlloader的还需要数据文件,即源文件。根据格式的不同,源文件可以分为固定字段长度和有分隔符这两大类,这里将分别说明这两种情况:

固定字段长度的文本文件

就是每个字段拥有固定的字段长度,比如:

602530005922 1012

602538023138 1012

602536920355 1012

602531777166 1012

602533626494 1012

602535700601 1012

有分隔符的文本文件

就是每个字段都有相同的分隔符分隔,比如:

1001,上海长途电信综合开发公司,南京东路34号140室

1002,上海桦奇通讯科技有限公司,武宁路19号1902室

1003,上海邦正科技发展有限公司,南京东路61号903室

对于上述两种文件格式sqlloader均可以做处理,下面就前面那个固定长度的文本来举例说明:

由于该文本只有两个字段,一个为设备号,一个是区局编号,两者的长度分别为20和5,那么可以编制控制文件如下:

LOAD DATA

INFILE '/ora9i/fengjie/agent/data/ipaagent200410txt'

TRUNCATE

INTO TABLE fj_ipa_agent

( DEVNO POSITION(1:20) CHAR,

BRANCH_NO POSITION(21:25) CHAR

)

其中,'/ora9i/fengjie/agent/data/ipaagent200410txt'为该文件的完全路径,POSITION(M:N)表示该字段是从位置M到位置N。

对于有分隔符的数据文件,前面已经有一个例子,这里就不再赘述了。总之,使用SqlLoader能够轻松将数据文件导入到数据库中,这种方法也是最常用的方法。

二、 使用专业的数据抽取工具

目前在数据仓库领域中,数据抽取与装载(ETL)是一重要的技术,这一技术对于一些大的数据文件或者文件数量较多尤其适合。这里简单介绍目前一款主流的数据抽取工具 ――Informatica。

该工具主要采用图形界面进行编程,其主要工作流程是:首先将源数据文件的结构(格式)导入为Informatica里,然后根据业务规则对该结构进行一定的转换(transformation),最终导入到目标表中。

以上过程仅仅只是做了一个从源到目标的映射,数据的实际抽取与装载需要在工作流(workflow)里进行。

使用专业的数据抽取工具,可以结合业务逻辑对多个源数据进行join,union,insect等 *** 作,适合于大型数据库和数据仓库。

三、 使用Access工具导入

可以直接在Access里选择‘打开‘文本文件,这样按照向导来导入一个文本文件到Access数据库中,然后使用编程的方法将其导入到最终的目标数据 库中。

这种方法虽然烦琐,但是其对系统的软件配置要求相对较低,所以也是有一定的使用范围

以上就是关于怎样将txt格式的文件导入到数据库中全部的内容,包括:怎样将txt格式的文件导入到数据库中、把txt文本数据导入sql2000数据库中,如何实现、如何用sql语句将一个文件夹下的所有txt文件导入到数据库中急!在线等等相关内容解答,如果想了解更多相关内容,可以关注我们,你们的支持是我们更新的动力!

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/sjk/9519078.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-04-29
下一篇 2023-04-29

发表评论

登录后才能评论

评论列表(0条)

保存