可以将一个更强大的HTML解析器连接到Python机械化?

可以将一个更强大的HTML解析器连接到Python机械化?,第1张

概述我正在使用机械化解析并在网站上提交表单,但内部表单解析器似乎无法检测到表单及其元素.我怀疑它是笨拙的 HTML格式,我想尝试使用更好的解析器来解析它,以便处理不良的HTML(比如说lxml或BeautifulSoup),然后将精美的清理输出提供给表单解析器.我需要机械化,不仅提交表单,而且还用于维护会话(我在登录会话中工作). 我不知道如何做到这一点,如果这是真的可能..我不熟悉的HTTP协议的各 我正在使用机械化解析并在网站上提交表单,但内部表单解析器似乎无法检测到表单及其元素.我怀疑它是笨拙的 HTML格式,我想尝试使用更好的解析器来解析它,以便处理不良的HTML(比如说lxml或BeautifulSoup),然后将精美的清理输出提供给表单解析器.我需要机械化,不仅提交表单,而且还用于维护会话(我在登录会话中工作).

我不知道如何做到这一点,如果这是真的可能..我不熟悉的http协议的各种细节,如何让各个部分一起工作等任何指针?

解决方法 阅读从 mechanize website第一页的大例子:
# Sometimes it's useful to process bad headers or bad HTML:response = br.response()  # this is a copy of responseheaders = response.info()  # currently,this is a mimetools.Messageheaders["Content-type"] = "text/HTML; charset=utf-8"response.set_data(response.get_data().replace("<!---","<!--"))br.set_response(response)

所以看起来非常有可能用另一个解析器来预处理响应,这个解析器将重新生成格式良好的HTML,然后将其提交回机械化进行进一步处理.

总结

以上是内存溢出为你收集整理的可以将一个更强大的HTML解析器连接到Python机械化?全部内容,希望文章能够帮你解决可以将一个更强大的HTML解析器连接到Python机械化?所遇到的程序开发问题。

如果觉得内存溢出网站内容还不错,欢迎将内存溢出网站推荐给程序员好友。

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/web/1144895.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-05-31
下一篇 2022-05-31

发表评论

登录后才能评论

评论列表(0条)

保存