我试图抓取一些网站内容,使用jsoup和java结合。 保存相关细节到我的数据库和每日做同样的活动。
但这里是交易,我在浏览器中我得到呈现的HTML打开网站(与所有元素标签在那里)。 JavaScript的一部分,当我测试它,它工作得很好(这我应该用它来提取正确数据的)。
但是,当我做了解析/用jsoup(从Java类)得到的,只是初步的网站下载了解析。 含义有一个网站的部分动态,我想获得这些数据,但因为他们是渲染后得到,该网站我无法用jsoup捕捉到它的异步。
有谁知道解决的办法? 我使用正确的工具集? 有经验的人,我吩咐你的建议。