文章详情页
Java如何抓取ajax生成的页面
浏览:59日期:2023-06-11 10:49:02
问题描述
如题,最近在做一个从网上抓内容的工具,发现需要的内容刚好是ajax动态加载的,不知道有什么办法可以搞定这个问题?有什么推荐使用的Java库么?我找了找,发现有人说htmlunit好像可以,还在琢磨。谢谢了!
问题解答
回答1:如果说是要抓js生成的页面,貌似没有这方面的类库(本人去年在用程序模拟新浪微博登录的时候找过,没找到。。。)不过有可以解析javascript语句的java类库
你可以先对页面进行分析,然后确定哪些数据是必须的,即使是ajax动态加载的,数据也是可以获取到的,只是展现形式不同罢了
标签:
java
上一条:JavaScript 在一个文本框中输入人名,如何通过JavaScript获取人名,并将这些人名按每组3人进行随机分组下一条:java 怎么解析json,有没现成的工具,还是自己写正则表达式?
相关文章:
1. javascript - 修改表单多选项时和后台同事配合的问题。2. mysql - 索引过滤性不好是由什么原因引起的,应该怎么解决3. javascript - vue生成一维码?求助!!!!!急4. javascript - H5页面怎么查看console信息?5. android - Listview模仿朋友圈点赞的TextView没有刷新?6. dockerfile - [docker build image失败- npm install]7. mysql - 我的myeclipse一直连显示数据库连接失败,不知道为什么8. docker内创建jenkins访问另一个容器下的服务器问题9. 网页爬虫 - Python:爬虫的中文编码问题?10. angular.js - angularjs 怎么封装 upload 上传
排行榜
