如何把采集到的东西写入SQL数据库

如何把采集到的东西写入SQL数据库,第1张

问的好,本人正在研究这个。往论坛里用采集器转了一些帖子。因为是非注虽然不会破解软件,但是我采集完之后修改数据库全部搞定了。

找到数据库中相应的存放帖子的表,记下表名。

然后执行SQL语句

update [表] set [列]=left([列],len(列)-[末尾广告的长度])

后面最好加上一个条件,比如某个时段的帖子或采集的信息。上面主要目的是把末尾的广告截了

这样只是对末尾加上广告的采集器采集的资源有效,如果插到文中了,那就不好搞得了

通用的采集软件都可以进行采集数据的发布,介绍三款软件,自己选择:

网络神采 共享版 采集规则自定义,可采集任意网站数据。可发布access、mssql、mysql,付费后还可发布到oracle。但网络神采共享版对采集任务数据由最大限制,好像是只能采集300条数据,用起来很不爽,其他的版本价格个人认为偏高。

火车头 免费版 采集规则配置起来略微复杂,也可发布access、sqlserver、mysql及oracle。但免费版受限较大,此方面可以参看>

ifix数据库入sql或者别的数据库

(1) ifix实时数据入sql

在ifix数据库中建立sqt sqd

sqt进行基本的配置(相当于触发数据采集的方案配置)

sqd包含要导入的数据列表

看看置顶的那个帖子, 历史报表

(2) ifix实时数据入调出或入别的数据库

可以采用编程的方式调用ifix vdbadll 的方法

具体可以参考ifix开发手册

通过这个方法 可以实时访问ifix的实时数据库

你可以在delph中通过这种方法直接访问ifix的实时数据

第一种方法 属于间接方法 但容易

第二种方法 属于直接方法 需要很多资源来支持。

数据库设计的时候考虑需要采集数据的详细信息

你在保存txt的时候肯定也是取到数据了的

把保存txt的方法稍微修改一下就能提交到数据库

网页显示的话也就是从数据库中取数据出来呈现而已

个人理解:

数据采集分为多种,如从纸质的或非结构化资料中整理成可以存入数据库的结构化数据的过程可以算一种数据采集;再如将已有的某数据库中数据导出到另一个数据库中也可以算一种数据采集;还如通过观察记录获得某些环境指标(空气质量、温度、湿度、人体体温、机器cpu占用率等等)变化的过程也可以算一种数据采集等等。总之,就是一种数据存在形式经过“某种处理”转变成另一种数据存在形式,我个人认为所谓的“某种处理”都统称为数据采集。

数据抓取一词用的较多的就是如网页内容数据抓取等,从某种意义上说与数据采集有部分含义雷同,但性质上貌似数据主体有一种主动和被动的区别。当然,数据抓取更多的是指,从已有的某结构化数据中获得数据的过程。

以上就是关于如何把采集到的东西写入SQL数据库全部的内容,包括:如何把采集到的东西写入SQL数据库、网络采集工具,可以把数据放到数据库中的、IFIX如何与SQL 2008通讯我想将IFIX采集到的数据写入数据库中等相关内容解答,如果想了解更多相关内容,可以关注我们,你们的支持是我们更新的动力!

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/sjk/9336037.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-04-27
下一篇 2023-04-27

发表评论

登录后才能评论

评论列表(0条)

保存