使用JSOUP实现网络爬虫:从一个URL加载一个Document
存在问题
你需要从一个网站获取和解析一个HTML文档,并查找其中的相关数据。你可以使用下面解决方法:
解决方法
使用 Jsoup.connect(String url)方法:
view plain copy print?
Document doc = Jsoup.connect("http://example.com/").get();
String title = doc.title();
说明
connect(String url) 方法创建一个新的 Connection, 和 get() 取得和解析一个HTML文件。如果从该URL获取HTML时发生错误,便会抛出 IOException,应适当处理。
Connection 接口还提供一个方法链来解决特殊请求,具体如下:
view plain copy print?
Document doc = Jsoup.connect("http://example.com")
.data("query", "Java")
.userAgent("Mozilla")
.cookie("auth", "token")
.timeout(3000)
.post();
这个方法只支持Web URLs (http和https 协议); 假如你需要从一个文件加载,可以使用 parse(File in, String charsetName) 代替。关注公众号:拾黑(shiheibook)了解更多
[广告]赞助链接:
四季很好,只要有你,文娱排行榜:https://www.yaopaiming.com/
让资讯触达的更精准有趣:https://www.0xu.cn/

随时掌握互联网精彩
赞助链接
排名
热点
搜索指数
- 1 三个层面看我国民营经济发展前景 7957981
- 2 航班故障返回西安 旅客:发动机起火 7916779
- 3 《哪吒2》票房破135亿 7831802
- 4 春回大地农事起 春耕备耕正当时 7738659
- 5 25岁女子伪装成律师 当庭射杀黑老大 7688126
- 6 女儿遭家暴失明母亲自责让其闪婚 7552197
- 7 湖南严禁用AI生成医疗处方 7466800
- 8 高校称助茅台增产30% 茅台:不可能 7319732
- 9 美女网红救人溺亡 母亲又遭车祸 7283487
- 10 美国要求乌的补偿是实际援助的5倍多 7155704