文章详情页
Java如何抓取ajax生成的页面
浏览:239日期:2023-06-11 10:49:02
问题描述
如题,最近在做一个从网上抓内容的工具,发现需要的内容刚好是ajax动态加载的,不知道有什么办法可以搞定这个问题?有什么推荐使用的Java库么?我找了找,发现有人说htmlunit好像可以,还在琢磨。谢谢了!
问题解答
回答1:如果说是要抓js生成的页面,貌似没有这方面的类库(本人去年在用程序模拟新浪微博登录的时候找过,没找到。。。)不过有可以解析javascript语句的java类库
你可以先对页面进行分析,然后确定哪些数据是必须的,即使是ajax动态加载的,数据也是可以获取到的,只是展现形式不同罢了
标签:
java
上一条:JavaScript 在一个文本框中输入人名,如何通过JavaScript获取人名,并将这些人名按每组3人进行随机分组下一条:java 怎么解析json,有没现成的工具,还是自己写正则表达式?
相关文章:
1. python - celery beat 调度如何运行期间动态添加任务?2. javascript - 关于tostring转换的问题3. java连接mysql的线程安全问题4. mysql 怎么做到update只更新一行数据?5. python中merge后文件莫名变得非常大6. MYSQL 运算的问题7. linux - 为什么我在mysql的my.cnf下找不到bind-address?8. python - pip install出现下面图中的报错 什么原因?9. python - 如何使用requests模块在一个post中提交含有多个相同名称的数据?10. spring - mysql中事务是互斥的么?
排行榜

网公网安备