如何使用linux的shell 命令输出本地网页数据 例如sed,awk,grep 指令

如何使用linux的shell 命令输出本地网页数据 例如sed,awk,grep 指令,第1张

图片中看到average throughput 放在了表格中,sed、awk等都是处理文本的,所以是对网页的源文件进行处理的,需要查看你源文件中  该变量的前后文,才能写出来

grep、sed一般是处理在同一行中的,内容,sed虽然也可以处理跨行的情况,不过比较难,所以建议使用awk进行处理。

简单地说,就是使用socket向目标服务器发送一个字节流。这个字节流必须符合http请求头的格式。目标服务器会根据http请求头进行相应。

以前练过手,代码找不到了。找了一篇博客,写得很详细。代码没有排版,不过也没关系,重在思想。

如果看完了还不懂或者理解不了代码,可追问

1、第一种是编写一个 HTTP 客户端程序,主动连接对端地址,并发送 GET 请求,然后接收响应。代码量较大,而且需要对 HTTP 协议非常熟知,不仅要处理 HTTP, 若是安全连接的网站,可能还要处理 HTTPS, 不建议采用;

2、第二种是使用外部工具,若你 Linux 下编程,可以在程序中调用 wget 命令,将请求的 URL 传入 wget 做为参数,并将返回的结果输出到一个指定的文件,然后去读取这个文件,分析返回的 HTML 源码即可;

3、第三种是使用 HTTP 库,比如 libcurl 库,网上有使用方法,使用起来很简单,推荐使用这种方法。


欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/yw/8688335.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2023-04-19
下一篇 2023-04-19

发表评论

登录后才能评论

评论列表(0条)

保存