如何趴取网页的jsp变量？

[fifaoresp]

各位大大，刚想用httpClient爬一个网站的数据，发现重要的数据都是经过jsp变量遍历出来的，请问这种数据java如何获取？
部分代码如下

<ul class="page_notice_list_content"> <% for(var i = 0; i < list.length; i++) { %> <li>
<a href="/zh-cn/notice_detail/?id=<%= list[i].id %>">
<h2 class="page_notice_title"> <% if( list[i].topNotice){ %> <i class="is-top">重要</i> <% } %> <%= list[i].title %></h2>
<span class="page_notice_time"><%= time2Date(list[i].created) %></span>
</a>
</li> <% } %> </ul>

[fifaoresp]

引用 1 楼 maradona1984 的回复:

你爬虫还能爬到人家jsp代码?除非人家jsp出现异常了,把错误的那段jsp给打印出来了,你才能看到这个 java定义变量用var?JDK10才出多久,就有人拿来用,我是不信的

他这个操作可能是为了防爬虫，有什么方案可以解决吗？就是他的重要内容是通过jsp变量遍历的，这种情况的话，其他人爬虫的时候是通过什么方案解决的，或者有什么方案可以绕过这个问题，比如抓包可不可以抓到？

[maradona1984]

引用 2 楼 fifaoresp 的回复:

[quote=引用 1 楼 maradona1984 的回复:] 你爬虫还能爬到人家jsp代码?除非人家jsp出现异常了,把错误的那段jsp给打印出来了,你才能看到这个 java定义变量用var?JDK10才出多久,就有人拿来用,我是不信的

他这个操作可能是为了防爬虫，有什么方案可以解决吗？就是他的重要内容是通过jsp变量遍历的，这种情况的话，其他人爬虫的时候是通过什么方案解决的，或者有什么方案可以绕过这个问题，比如抓包可不可以抓到？[/quote] 感觉你不太懂web开发啊... jsp只是服务端语言,在服务端执行完成,输出到浏览器(你这里就是你的httpclient)都是html了,根本不存在jsp代码的 如果你觉得他防爬虫,那你得伪装成看起来不像爬虫才是你的方向啊,抓包那也得你访问了对方页面才有的抓啊 或许你得需要补下相关基础知识,至少要清楚整个流程吧...

[fifaoresp]

引用 3 楼 maradona1984 的回复:

[quote=引用 2 楼 fifaoresp 的回复:] [quote=引用 1 楼 maradona1984 的回复:] 你爬虫还能爬到人家jsp代码?除非人家jsp出现异常了,把错误的那段jsp给打印出来了,你才能看到这个 java定义变量用var?JDK10才出多久,就有人拿来用,我是不信的

他这个操作可能是为了防爬虫，有什么方案可以解决吗？就是他的重要内容是通过jsp变量遍历的，这种情况的话，其他人爬虫的时候是通过什么方案解决的，或者有什么方案可以绕过这个问题，比如抓包可不可以抓到？[/quote] 感觉你不太懂web开发啊... jsp只是服务端语言,在服务端执行完成,输出到浏览器(你这里就是你的httpclient)都是html了,根本不存在jsp代码的 如果你觉得他防爬虫,那你得伪装成看起来不像爬虫才是你的方向啊,抓包那也得你访问了对方页面才有的抓啊 或许你得需要补下相关基础知识,至少要清楚整个流程吧...[/quote]好的，谢谢你的耐心解答

[maradona1984]

你爬虫还能爬到人家jsp代码?除非人家jsp出现异常了,把错误的那段jsp给打印出来了,你才能看到这个 java定义变量用var?JDK10才出多久,就有人拿来用,我是不信的