webmagic采集CSDN的Java_WebDevelop页面

项目中使用到了webmagic,采集论坛一类的页面时需要一些特殊的配置。在此记录一下

先来看看我要采集的页面

点击第2页可以看到它的url是http://bbs.csdn.net/forums/Java_WebDevelop?page=2

点击尾页可以看到它的url是http://bbs.csdn.net/forums/Java_WebDevelop?page=758

也就是说我们需要采集的范围是从2到758页

这样我们就可以通过自己拼接一个url来模拟所有 的连接了代码如下:

<span style="white-space:pre">	</span>List<String> list=new ArrayList<String>();

        for (int i=2;i<758;i++){
            list.add("http://bbs.csdn.net/forums/Java_WebDevelop?page="+i);
        }

再来看看如何匹配页面的所有title

page.putField("title", page.getHtml().css(".title>a","text").all().toString());

其中css方法的第二个参数是选择a标签的text内容而不包括<a>标签本身

总体代码如下:

package us.codecraft.webmagic;

import org.apache.http.HttpHost;
import org.apache.http.auth.UsernamePasswordCredentials;
import us.codecraft.webmagic.pipeline.ConsolePipeline;
import us.codecraft.webmagic.processor.PageProcessor;

import java.util.ArrayList;
import java.util.List;

/**
 * Created by hepan on 2016/5/23.
 */
public class CSDNJavaWebDevelopProcessor implements PageProcessor {
    private Site site = Site.me().setRetryTimes(3).setSleepTime(1000)
            .setHttpProxy(new HttpHost("192.168.2.49", 8080))
            .setUsernamePasswordCredentials(new UsernamePasswordCredentials("hepan", "abcdef"));
    /**
     * process the page, extract urls to fetch, extract the data and store
     *
     * @param page page
     */
    @Override
    public void process(Page page) {
        List<String> list=new ArrayList<String>();

        for (int i=2;i<700;i++){
            list.add("http://bbs.csdn.net/forums/Java_WebDevelop?page="+i);
        }

        page.addTargetRequests(list);
        page.putField("title", page.getHtml().css(".title>a","text").all().toString());
    }

    /**
     * get the site settings
     *
     * @return site
     * @see Site
     */
    @Override
    public Site getSite() {
        return site;
    }

    public static void main(String[] args) {

        Spider.create(new CSDNJavaWebDevelopProcessor())
                //设置采集的起始页面
                .addUrl("http://bbs.csdn.net/forums/Java_WebDevelop")
                //输出
                .addPipeline(new ConsolePipeline()).thread(5).run();
    }
}

最后输出结果:

D:\Java\jdk1.8.0_45\bin\java -Didea.launcher.port=7533 "-Didea.launcher.bin.path=D:\JetBrains\IntelliJ IDEA 15.0\bin" -Dfile.encoding=UTF-8 -classpath "D:\Java\jdk1.8.0_45\jre\lib\charsets.jar;D:\Java\jdk1.8.0_45\jre\lib\deploy.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\access-bridge-64.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\cldrdata.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\dnsns.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\jaccess.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\jfxrt.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\localedata.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\nashorn.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\sunec.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\sunjce_provider.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\sunmscapi.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\sunpkcs11.jar;D:\Java\jdk1.8.0_45\jre\lib\ext\zipfs.jar;D:\Java\jdk1.8.0_45\jre\lib\javaws.jar;D:\Java\jdk1.8.0_45\jre\lib\jce.jar;D:\Java\jdk1.8.0_45\jre\lib\jfr.jar;D:\Java\jdk1.8.0_45\jre\lib\jfxswt.jar;D:\Java\jdk1.8.0_45\jre\lib\jsse.jar;D:\Java\jdk1.8.0_45\jre\lib\management-agent.jar;D:\Java\jdk1.8.0_45\jre\lib\plugin.jar;D:\Java\jdk1.8.0_45\jre\lib\resources.jar;D:\Java\jdk1.8.0_45\jre\lib\rt.jar;E:\workspace\webmagic\webmagic-samples\target\classes;E:\workspace\webmagic\webmagic-core\target\classes;E:\.m2\repository\org\apache\httpcomponents\httpclient\4.3.3\httpclient-4.3.3.jar;E:\.m2\repository\org\apache\httpcomponents\httpcore\4.3.2\httpcore-4.3.2.jar;E:\.m2\repository\commons-logging\commons-logging\1.1.3\commons-logging-1.1.3.jar;E:\.m2\repository\commons-codec\commons-codec\1.6\commons-codec-1.6.jar;E:\.m2\repository\com\google\guava\guava\15.0\guava-15.0.jar;E:\.m2\repository\org\apache\commons\commons-lang3\3.1\commons-lang3-3.1.jar;E:\.m2\repository\us\codecraft\xsoup\0.3.1\xsoup-0.3.1.jar;E:\.m2\repository\org\slf4j\slf4j-api\1.7.6\slf4j-api-1.7.6.jar;E:\.m2\repository\org\slf4j\slf4j-log4j12\1.7.6\slf4j-log4j12-1.7.6.jar;E:\.m2\repository\log4j\log4j\1.2.17\log4j-1.2.17.jar;E:\.m2\repository\commons-collections\commons-collections\3.2.1\commons-collections-3.2.1.jar;E:\.m2\repository\org\jsoup\jsoup\1.8.3\jsoup-1.8.3.jar;E:\.m2\repository\commons-io\commons-io\1.3.2\commons-io-1.3.2.jar;E:\.m2\repository\com\jayway\jsonpath\json-path\0.8.1\json-path-0.8.1.jar;E:\.m2\repository\net\minidev\json-smart\1.1.1\json-smart-1.1.1.jar;E:\.m2\repository\commons-lang\commons-lang\2.6\commons-lang-2.6.jar;E:\.m2\repository\com\alibaba\fastjson\1.1.37\fastjson-1.1.37.jar;E:\workspace\webmagic\webmagic-extension\target\classes;E:\.m2\repository\redis\clients\jedis\2.0.0\jedis-2.0.0.jar;E:\.m2\repository\commons-pool\commons-pool\1.5.5\commons-pool-1.5.5.jar;D:\JetBrains\IntelliJ IDEA 15.0\lib\idea_rt.jar" com.intellij.rt.execution.application.AppMain us.codecraft.webmagic.CSDNJavaWebDevelopProcessor
16-05-23 09:48:32,245 INFO  us.codecraft.webmagic.Spider(Spider.java:307) ## Spider bbs.csdn.net started!
16-05-23 09:48:32,297 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop
get page: http://bbs.csdn.net/forums/Java_WebDevelop
title:	[热烈祝贺CSDN社区大联欢上海站圆满结束, 【新手提问导读】提问的艺术, sturts2 s标签的问题 大神快来, 大神们,一个jsp问题求助,两个字符串对比,不同的部分用红色显示,怎么实现呢, JAVA 网站服务器开发, 将oracle语句改为mysql 急用,大神们帮忙吧!, 想知道报这个错的原因是什么..., 既然mybtis更换数据库sql语句要变,为啥还有那么多公司用mybatis?, 关于页面答题分数总结的问题, Dbutils.QueryRunner的继承问题, 如何用java获得当前网页的url呢, s2sh购物网站的版本控制version,遇到update就出错, SSH注解整合问题, myBatis如何通过@Autowired方式注入多数据源, 刚学easyui,使用datagrid数据不显示,页面数据空白,但记录数对的, myeclipse项目, 读取大量数据文件更新到数据库。, 关于表单提交后跟ajax请求, java web上传文件功能的问题, solr高亮问题, java web上传文件到项目里自动刷新项目后才能读取到, 求教一个手机网站开发问题, 用MyEclipse做图书管理系统出现HTTP Status 500 - , 新人请教个jsp传值给servlet的问题, 请大家帮帮我,谢谢,耽误你们点时间,帮我指导指导,我做了2天都没有做出来,明天就要交作业了,请大家帮帮我。 , 请教hibernate排序问题, java 权限管理, 如何实现在jsp页面中选择txt文件,点击下载时进行下载, 帮忙注释下面代码,谢谢, HIBERNATE HQL查询问题请教, 第一次发帖,求各位大神帮忙解决个tomcat问题。, 大家帮忙看下写的工具类有没有问题,或者能不能改善,多谢?, 新手跪求大神帮忙啊!!, 能不能读取struts2标签获得的值,然后写入数据库?, Selenium 测试用例异常,求大神指点, hibernate无法进行查询更新操作是为什么, axis2客户端程序接收不到cxf服务端发来的报文, mvc+spring+hibernate在tomcat启动时报错,求大神。, myeclipse 安装问题, mybatis入门helloworld项目,出现异常。, jquery Json解析, 求json大神帮我看看这个格式的json如何解析, 求助:jsp+easyUI保存多个同类型model, 关于PWC6033: Unable to compile class for JSP问题的求助, 关于在同一个页面。点击查询按钮,下面会出现表格, tomcat https 单向认证配置, ssh整合+websocket报错org.springframework.beans., jsp页面传值,把查询出来的表格选择数据传到添加表单, iframe三级嵌套相关问题, ssh框架,能上传视频文件吗?, 将一个类路径放到classpath中,jsp文件编译时找不到该类,但普通java程序却可以, Tomcat开启了SSL启动报错误 Keystore was tampered with, or password was incorrect]
16-05-23 09:48:35,258 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=2
16-05-23 09:48:35,258 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=4
16-05-23 09:48:35,259 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=5
16-05-23 09:48:35,258 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=3
16-05-23 09:48:35,258 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=6
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=3
title:	[button点击事件,怎么做?急!!, 谁有java实现的邮件的接收与发送系统,可以给一下源代码吗, 判断json 是否有重复数据, 急!!新手求助, MyEclipse导入maven项目,包名多了main.java, ssh项目,求帮忙!!, 请问如何设置SVN的权限, 腾讯视频 根据腾讯视频的vid获取视频信息, 求教activiti关于普通表单的理解~, mmGrid提交数据到struts action, 菜鸟求助!对接多个银行这样设计合不合理呢?, 这是什么错??Resource Path Location Type , 一台服务器请求,另一台服务器中直接重定向,请求的服务器会重定向新的页面吗?, java jsoup 爬虫爬asp.net网站遇到_doPostBack不能获取翻页数据, 前台通过ajax传空的字符串到后台,但是springmvc却变成了null,报空指针异常, 新手求助,急!!, tomcat7在eclipse中启动maven项目后不能访问, 一个高深莫测的面试题, 请问这是什么路径"sysmng.logon.do?userID=", spring mvc 异常处理 HandlerExceptionResolver 不能返回到视图, echarts动态设置X轴的值时,始终无法显示相关值, .jsp, spring mvc 表单类, DriverManager.getConnection()返回值类型问题, 阿里大鱼API文档实现, Myeclipse导入工程出错, spring aop 做日志记录功能, 求大神, 通过网页访问.jsp出现HTTP Status 500 - Unable to compile class for JSP 新手比较急 , spring mvc ajax异步请求找不到路径, MyBatis关联映射,关联字段的展示问题, 求助,ssh整合后,tomcat启动listener失败, 如何组装微信中MediaId的语音消息?, 单位排班维护界面怎么开发,急 急 急, 请问高手,关于xstream插件的问题, JSP中if-else-if语句多的时候,运行就会报错!, myeclipse导入web项目出错, 求助:怎么将一个有web项目目录结构的java项目部署到tomcat中访问?, 一台机器上面部署两个Tomcat没有成功, JAVA FTP下载文件前如何选择最新版本文件下载, service层是多余的吗?求各位水友指点迷津, Tomcat在windows管理的服务中启动,但其他终端不能访问, 安装Tomcat出现问题,求大神解救!, JDBC保存数据报错, java.lang.IllegalStateException: ApplicationEventMulticaster not initialized - c, 求推荐一个开源适合新手学习的基于java的cms系统,  新手求各位大佬 pdfbox 将pdf首页转为图片出错, Struts框架启动报错,新手求教,查了很久没搞定。, oracle12cORA-28040: No matching authentication protocol错误, 求解]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=4
title:	[各位大神,apache-tomcat-6.0.39重新部署总是出现这个问题怎么解决啊?, POI读取docx格式文档报错:Package should contain a content type part [M1.13], 高手看一下String转byte[] 数据丢失, spring配置文件从web移到kernel包之后,启动报错找不到配置文件, springmvc报错, 将网页上面的表以excel形式导出时候的数字问题, 怎么让一个jsp网站的java程序时刻运行, org.apache.jasper.JasperException: An exception occurred processing JSP page , struts2 拦截器怎么修改返回的jsp路径, spring hibernate 如何捕获DataIntegrityViolationException, dom4j asXML 后空元素自闭和如何解决, There is no Action mapped for namespace /customer and action name toCustomerList, HTTP Strtus 500错误怎么解决, 遇到问题,解决两天了,不知道哪里错了,应该是外键和映射的问题,但是改不出来,,求帮助, 不同系统之间的信息推送, Base64编码后再解码汉字变成乱码, 项目部署到weblogic出错, 已整理了一个中奖概率算法,请问是否有更好的?, 求助,获取上传本地图片的宽高, 请教关于加大文本框字符显示间隔的方法, 求助!spring实现同一个账号,重复登陆,后一个会把前一个挤掉,删除session的问题,附我的源代码!, 一套程序根据需求不同切换不同功能, spring+mybatis的问题,关于SqlSessionTemplate的, java 注解, java.lang.NoSuchMethodError: java/util/Collections.emptyIterator()Ljava/util/Ite, srping用hibernateTemplate提交数据问题, MYSQL提交数据后,等一会才能生效,是怎么回事呢?, 求一个完整的java web 学习视频!, 用java如何在获得jquery展现的数据以及及时更新问题, 怎么使用jQuery获取servlet的值?, 如何检测和修复IE控件、根证书、IE设置等等, 初学, Hibernate, 报错,找不到域namingStrategy, jdbc连接Oracle数据库,结果是数据库驱动有问题, MyEclipse2014找不到Install JPA Facet选项, springMVC整合Hibernate开发,properties文件的键值对莫名其妙变成其他的值, svg2gfx.xsl报错Xpath is invalid, tomcat部署,axis2报错, dtd 对xml约束问题,虽然知道,但是有个细节不是很懂啊, 求解点击一个”添加“按钮出现一个文本框然后输入信息再点一次按钮能在当前jsp页面添加一条新的记录(删除按钮直接删除这一行记录)怎么写, 如何对list进行分页?, Java程序员的瓶颈,求帮助。, springmvc中的使用jquery的$("#name").val()获取不到值输入框的值, spring3.2+quartz2.21,怎么实现动态配置cronExpression?, mysql中的my.ini和my-default.ini中文无法显示或者操作, 自学小白求助!!!, Hibernate 5.1.0 final SchemaExport求助, 请问怎样关联struts, REDIS提问,一个redis可以分表吗?, JSP和SERVLET的理解, 菜鸟一枚,求助,关于tomcat和eclipse配置问题已经绝望]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=5
title:	[tomcat启动出错, jsp怎样进行两数相加?, shiro 注解@RequiresPermissions("user:insert")不起作用, 请教问Mybatis 如何打印SQL语句, 3DES自定义密钥问题, 如何开发一款app后台接口, extjs 做一个下载文件 我后台使用struts 做的 交互的有问题, ModelAndView传参问题, 做一个app服务器开发,求解决客户端登录时给它j加个标记的问题, 社区问答第22期:架构探险, 本人新手 看了马士兵老师的视频 部署srvlet 在Servlet中直接连接数据库,并查询显示信息一直出错, awt问题, 大神们求帮忙, ant编译tomcat原码报错,请知道的给以援助,谢谢!, struts升级到2.3.28出现的问题, jquery.datatable插件如何给每一行绑定鼠标单击事件, tomcat6.0无法访问页面, 请教大神:SSM框架在本地测试的时候一切都没有问题,但是在部署到阿里云上的时候由于Mybatis导致出错了。详情如下,恳请诸位大神指教!拜谢, oscache怎么缓存jsp页面中input标签中输入的内容, tomcat下直接考别到webapp下的文件, 求大神!JSP页面中调用matlab函数将结果显示在Jsp页面上, select如何从数据库中选取初值?, 用FTPClient实现ftp操作过程中出现的一个异常, a 链接通过action跳转 出现There is no Action mapped for namespace [/blog] and action name, 请教各位大神教怎么部署这个网盘系统, webservice xfire错误, 只用Myeclipse和sql坐jsp时,做增加语句,出现 :该语句没有返回结果集。, iframe内嵌,,弹出窗口“Not Found“,怎么处理掉弹窗,或者跳转, 关于实体类之间的映射。, 这样的表怎么创建,数据库啊数据库,谢谢, spring3 mvc 不能调用controller, 启动报错,配置文件古怪问题求解救!, 如何将一个datagrid保存传到另一个datagrid同时根据数据找出另一条数据保存到同页面下的另一个datagrid下?求指教, jdbc接口实现问题,来大神, 新手 Myeclipse运行时出现以下错误 有没大神帮下 在线等, 求解,怎么获得@responsebody后的 response响应值, 有对MethodParameter这个类熟悉的人吗?请教个问题, firefox无法发送Referer信息,怎么解决?, 用maven管理的项目中如何实现不打war包就能部署, springmvc 访问路径要不要加项目名?, java web开发需要学那些工具, 为什么我的Servlet无法获取jquery ajax传过去的值呢?, Servlet配置web.xml,使用通配符出问题, 这两种断点有什么区别, javaWEB知道文件的全路径,可不可以直接上传到服务器,可以用ajaxfileupload吗, 奇怪的问题!提交表单到springMVC不能有update、delete、select等关键字!, 毕设,求救!黑名单功能, java.lang.ClassNotFoundException: org.apache.commons.beanutils.Converter, 关于stucts中action的问题, select多次点击不叠加option]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=2
title:	[java mysql数据已经插入成功!数据库有值为什么还报错?, 哪位好心人来帮帮忙啊!org.springframework.beans.factory.BeanCreationException, JSP页面中有一个按钮 点击之后执行JAVA文件, 求教关于servlet里链接数据库的问题, 请教Struts2 动态方法调用!, java 连接sql server 2008 驱动问题 [, SSH整合_Unable to instantiate Action, employeeAction, defined for 'emp-list' in na, 用httpclient进行post请求到云巴,云巴返回给ios的中文是?????,乱码, bootstrap的table控件自定义的搜索框,java后台接收不到有关page的参数,初始化的时候参数传过去了, 从SVN导入代码的问题, @RequestMapping post 数组怎么在controller接受, 关于条件查询的类里面有三个表, 一个简单的JSP按钮权限问题,  jsp使用数据源连接数据库,出现 Cannot create resource instance, jsp页面传值,把查询出来的表格选择数据传到添加表单, 从SVN中检出的项目报错,求大神解决,在线等!!!!!!!, 简单的多态问题, hibernate和struts2.0分页, 菜鸟请教,经常看到大神们开着SecureCRT, myeclipse使用lombok, 使用GET方法时报错,  求大神 废品回收系统 用Javaweb 做 有会做的吗?, 如何将4字节utf-8的emoji表情转换为unicode字符编码, java统计ip访问量, 关于SSH中使用EhCache缓存问题?, 创建的过滤器不能显示在线人数,一直报错, 我这个项目用的是什么框架啊,为什么那么多功能类却只有这么几个?, axis2客户端可以调用axis1写的webservice服务吗, HttpsURLConnection 访问URL中指定端口, 阿里巴巴API调用, 如何大家一个agularjs框架 求大神指导, HttpClient post请求接口报the current request is not multipart request, jquery 的datatables插件动态表头如何实现, java通过tess4j调用tesserat-ocr,报错:java lang error,invalid memeory access, spring mvc ,Required String parameter 'usercode' is not present, tomcat8下jsp被截断,tomcat7没有, 求大神解答一下session问题,急!!!, java web 请教前辈, 新手求帮忙~连接数据库的问题, SpringMVC中mvc:resources没有作用,  activemq延迟发送,消费者会实时得到消息, 求解决方案,List<Map<String, Object>>大小10W时排序, spring mvc HelloWorld.jsp不显示,新手求解答, 多重c:foreach循环怎么统计总的循环次数, IE有时会报ext events为空或不是对象,请大侠帮忙看看, 求助:大型网站高并发pv文章阅读数实现, SPRINGMVC如何显示字段的关联值, 高分求助:例如有个字符串001或者0010,用了BigDecimal类的toPlainString方法后前面的00就没有了,怎么让00不消失?, 判断json 是否有重复数据, javaweb项目当域用户登录到域中以后,可以直接登录到web项目中去,不需要输入用户名和密码。, 请教怎么在单个jsp页面实现分页查询]
16-05-23 09:48:36,822 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=7
16-05-23 09:48:36,828 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=8
16-05-23 09:48:36,831 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=9
16-05-23 09:48:36,869 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=10
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=9
title:	[自己搭建Spring+hibernate4可以保存数据,但无法删除数据, JHeatbugs运行时的javaswarm.dll是32位,与64位系统不匹配, java中关于在Linux中用sftp上传文件异常问题, 关于java后台往android、ios推送的问题, 支付宝转账和批量付款功能, 关于微信支付成功回调后,怎么给微信返回值, idea启动tomcat出现异常, JSP开发, 第一次做ssh2整合不知道怎么处理这个问题,求助大神们。, 各类拦截器分别适合什么时候用, java 接口方法定义, 在IE8中用window.open的问题,弹出一个页不是当前页,怎么才能把window.open打开的页面作为当前页面??, axis2 在was下发布的问题, 急。求助, 请问18位的组织机构代码怎么验证啊!!, java, Spring AOP 和 Spring拦截器Interceptor有什么区别和联系呢?, ios微信浏览器如何一直显示关闭按钮, 关于EL, jetty:run的时候总是无法打开mvc-dispatcher-servlet.xml, jsp 中用jfreechart 运行出错 求大神解答 或求折线例子, mvn一个父项目打war包,命令行怎么写才能为不同子工程设置不同target?, 写了个发邮件的功能,却收不到,有会的吗?, maven编译报错-source 1.5 中不支持 diamond 运算符, ms的.net framework 4.0安装时候第二个进度条一直不动, ie11下的session问题, Java Web 项目RSA加密的流程, Shiro unauthorizedexception返回500 Internal Server Error, springmvc和hibernate集合后web.xml配置问件问题,  mybatis selectlist 问题 , 获取request中的内容报错,  上次做了一个淘宝一样类似的购物网站,有没有大神帮我看看下面这些功能怎么实现?, DAO session factory not selected错误问题, struts2 在执行完处理方法之后跳转到某一页面,此页面乱码, 使用@WebServl可以正确访问页面,但是用web.xml配置之后发布就找不到资源,为什么?新手求教, spring 和 struts2 的配置问题, 求助 有没有 上传和下载文件的例子, 解析json的问题, spring security登录问题 , java生成word的方案请大家推荐一下, Build path is incomplete. Cannot find class file for org/aspectj/weaver/refl, 各位!!poi 处理word 超链接如何对应到当前文档某个文字标签, 大神们,小弟求助!, 萌新问一个浏览器打开JSP文件,中文乱码或者显示问号的如何解决, 关于resp.addCookie(cookie)空指针问题, JAVA WEB问题。在JSP页面一个按钮调用扫描仪, 是struts2的配置问题吗,老是出错,请教各位大神, 用java另存visio为htm, 在springMVC中怎样判断性别是否选择, 求助在spring中访问不了controller]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=6
title:	[HTTP Status 500 - java.lang.NullPointerException 什么问题~?, java爬虫拿到的页面和和用浏览器的页面源码不一致, java Web项目Filter在xml配置完成后,部署到linux服务器tomcat后报404, Spring框架 JAX-WS集成webservice客户端调用出现问题,特来请教, resin启动异常 , 求微信公众号获取用户当前定位 java实现代码, jsp页面查询条件保存,下次登陆时默认显示上一次的查询条件,有什么方法可以实现, springmvc和ajax交互, 收银台开发是自建CA还是使用CFCA的证书?, ORCLE保存Emoji表情乱码问题, 面试题:上亿用户同时访问一个网站,如何保证网络不拥挤,还要保证用户的体验?, 为什么刷新后sesion失效了?, WebSphere8.5 + CXF2.5.2启动报错:Error creating bean with name 'cxf' defined in class, window.open post到新窗口, 求大神解决org.springframework.beans.factory.BeanCreationException:, tomcat 部署发布项目 浏览器输入地址没反应, 关于java抢购机制的实现, A.jsp页面通过按钮C用jQuery的load方法加载B.jsp页面到A.jsp页面的一个div区域时的问题, 关于websocket外网连接建立服务器没有反应的问题, 关于tomcat的问题-环境变量都配置好了,点击startup也可以显示,无闪退现象,但是访问http://localhost:8080/却提示错误, java服务器端解析MultipartEntity这种数据流, (Jenkins持续集成)ANT 打tar包是不是不支付中文文件名, 为什么老是SSH,有没有更简便的快速开发框架?, mybatis传递常量谁用过吗?, 扫描二维码图片 java zxing, 字符串、json对象, struts2迭代标签的问题, 关于spring整合hibernate有问, 可不可以帮忙解释一下这些代码是什么意思?是三大框架里的spring的搭建吗?最近刚学实在看不懂, 表单登录问题,中文用户名登录不成功, Spring整合Hibernate的问题, hibernate插入语句出错, Tomcat设置了禁止某些IP访问,即deny,怎么自定义403页面呢?, java web 验证码问题 ,刷新能显示,点击看不清就不会显示, 【Spring oxm问题】oxm可以marshaller,但是在unmarshaller中提示root elements无法找到, web页面在手机端获取手机号或者手机识别码, Activiti 3 字节的 UTF-8 序列的字节 3 无效, 求救求救啊 下面这段数据库操作的代码有什么错。之前用还好,最近总是出现问题,在于那个invoke上。, 急急急:java Web项目在linux上的tomcat部署, tomcat 配置host name为域名或IP后找不到DNS,求解,急。。。。, 急!!shiro权限注解,无法跳转!!, java web开发中,如何得到server.xml中的数据库的配置信息, java实现后台自动打开网页并触发事件, URLConnection 无法正常读取到html的内容啊, 添加了struts2-core-2.3.28.1以后出现的问题, java com.sshtools.j2ssh.SshClient访问linux中文文件问题, 求一个集成SSH+JBPM6.3的实例 能够运行的, 使用负载均衡和读写分离之后 数据库的行锁和同步方法(Java)还有没有用?, 空指针错误 求解答, 映射文件出问题]
16-05-23 09:48:38,393 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=11
16-05-23 09:48:38,396 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=12
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=10
title:	[报Unknown column 'uid' in 'field list', HTTP Status 500 - Servlet execution threw an exception, 关于web项目引入CSS,JS 出现的问题, 这样设计登录合理吗?, 一个jsp系统注册功能出现500错误, EL表达式调用函数报错 实际部署没有问题是为什么呢, ajax连接数据库,数据库内容更新了,获取的内容还是旧内容, 如何用java提取网页页面中JS内的数据, JAVAWEB关于JSP页面转向的问题, sendRedirect重定向问题, 我在myeclipse里建立包为啥最后一个自动给建了个目录?怎么才能一排?, js中这是什么问题呢, java web怎么实现套打功能, Java将xml格式的word文档另存为普通word文档的问题, 怎么让html显示jsp的东西?, 一个网上书店系统,SQL server + eclipse,运行时提示Http500内部服务器错误, 怎么把值传到圣诞框里面啊, 求助大神这是什么错误造成的, frameset session丢失, 怎么基于云存储服务,开发云存储Web应用和Android移动客户端, 这里有什么问题啊, 使用tomcat8和websocket进行消息推送失败, Spring webosket 握手拦截器中获取不到session, 用JSP新写了个网站,大家来测试一下有没有错误, 利用spring+quartz配置执行定时任务,大概一小时后就会莫名其妙不执行, SSH框架如何配置action?, the selected package might contain files that will be overwritten by artifact , 关于tomcat发布项目设置IP问题, SpringEL求助:, 小概率遇到点登录,没反应,然后刷新发现已经登录上了, 主从库中默认库的选择讨论, 求解controller中一个方法,测试均已通过,在页面中实施不成功, 如何扩大 iframe 标签中 截取的字体大小 急急急~!!!!, 怎么用java实现doc文档模板插入数据和表格并导出?急急急,在线等, war包部署到tomcat问题, mybatis怎么实现时间段查询, netty-socketio的跨域问题, 导入工程报错,请问该如何处理, 破解后的MyEclipse为什么配置不了Tomcat??, tomcat启动时出现问题,大神帮忙看看是啥问题, 关于用io流输出问题, 原始sql语句转换成jpql语句 , 请教jetty的X-Frame-Options 怎么设置, 通过FormData向java后台传文件(图片)+string后台接收如何写, 我们做的网站mac系统不显示, Java 访问access, <s:action name="head" executeResult="true">死循环, a 标签的 href 问题, axis调用webservice接口, 一次特别的求助]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=8
title:	[过滤器初始化两次问题, xfire调用webservice时hibernate的懒加载机制报错 求大神!!!, hibernate 数据库访问, JSONP如何验证调用 ?, web 应用,在web.xml中配置servlet filter报错, 关于eclipse打开文件问题, 上传文件时遇到这个问题 An exception occurred processing JSP page /docUploadConvertAction.js, [分享]tomcat设置https双向协议, 读取word并显示在页面上乱码, 怎样可以关闭正在传输数据的stream而不会导致异常?, jsp中js代码的执行顺序, 百度UEditor 上传图片问题, spring boot 发布到tomcat的问题, JS,或者jquery怎么在前端判断手机是否安装某个app, 初学hibernate框架,连接了第一个sql server 2005 数据库,出现一个问题, 关于FastJson bean转json首字母大写的问题, nginx+tomcat 应该如何部署war包, org.dom4j.Element是什么意思?, java 初学者求助有关struct配置的问题 "Invalid path /startExam was requested", 微信支付出现失败, 银联无跳转接口使用, Spring AOP中如何获取HttpServletResponse?, IO 异常 上传失败(用的是ueditor), 急!Spring JPA分页动态查询问题,自动做cross join查询, myeclipes报错500, 项目中spring的所有jar包如果版本不一致,编译一直报错。, HttpsURLConnection连接网站返回英文乱码问题, shh小项目500报错, 只能输入中文数字中文英文./()-字符,但是不允许全部都是数字./()-的正则表达式, 错:Usage: java javassist.tools.web.Webserver <port number> , 微信支付问题get_brand_wcpay_request fail jsp页面, 新人求大神指教。问题是java方面的传送后文件的获取问题。, struts2查询List输出到jsp无显示, Spring Struts2整合 注解无法生效的问题, 微信公众号 支付 报错, 网页选中文字后可以高亮显示,下次打开依然可以记录,类似做笔记, java web怎么实现限制登录?, 关于多表关联情况下保存数据的问题, spring mvc 注入报错, 关于用户密码加密问题, 小白求教从JSP页面向oracle数据库中插入中文,在数据库中显示为乱码, cfca工具包 加解密问题, flex tree选中某个节点,使该节点颜色发生变化, JDBC 读取ORACLE blob字段时,程序卡在执行sql语句处,在线急等, ssh配置相关问题, CentOS7下的Tomcat部署的JSP可以在本机访问在局域的别的电脑上访问不了,求大神, jquery事件委托疑问(delegate), POI导出EXCEL怎么工作表标签的颜色 , 把项目从一个linux服务器复制到另一个linux服务器后,无法读取xml文件中的$,改成%就识别了, easyui treegrid排序,按正序或逆序]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=7
title:	[freemarker导出word太大了,另存为的XML也很大, 请问:要想在个人网页上实现在线支付功能,一般是自己找银行还是找第三方支付公司买接口呀?, myeclipse2013中如何导入tomcat 源码??? 求指教, myeclipse里使用freemarker宏报错, 求助,关于struts实现一个简单页面链接的问题, java调用webservice服务org.apache.axis2.AxisFault: Read timed out问题, eclipse下如何编译项目, JSP页面返回的问题, dwr2 反向推送消息到前台,前台无响应, SOLR配置IkAnalyzer如果关闭IkAnalyzer默认分词功能,只用mydict.dic中的扩展分词?, 关于keep alive, 关于多次请求返回画面的问题, struts2中怎么我压入值栈中的list显示为空?, 关于ajaxFileUpload 异步上传完刷新页面的问题, 求助!请大神帮忙解决一下中文乱码问题,百度上的都不适合我出现的这种情况, Java Cipher类DES加密问题, 部署完的项目,404错误~, MYSQL left join逗号,问题(超变态,一般人勿进), 求大神帮助!!!!jeecms二次开发问题, html做修改功能,怎么传值?, 求大神帮帮忙,着急啊。。。, 如何根据本地的时间进行国际化 要求在外国显示外国的时间格式, js打印html页面中的一个div时,页面的值没有打印显示出来,而且点击打印以后,原始页面也没有相应的值了,怎么回事,求大神解决!!, 最近要交作业要用到websocket 尝试了tomcat下面的websocket例子,但是都提示Info: WebSocket closed., 求助!Websphere的项目,请问怎么迁移到tomcat上去?, jsp报错问题 Syntax error, insert "}" to complete Block, 用IntelliJ IDEA发布到Tomcat,JSP文件不编译为什么?, Spring+Hibernate+Oracle 报错: Caused by: org.hibernate.MappingException: entity..., 毕业设计救急:Java怎么提取PD文件里面文章的标题、作者等元数据, SSH+注解+配置多对一关系报错, shiro前后台分开登录怎么实现, 关于baseServlet , 求一个用javaEE7实现的websocket的例子,什么例子都可以能跑通就行, 关于DWZ查找带回 lookup, 各位大神,请教个问题,session如何通过cookie实现跨域, filter过滤输出的问题, 求各位大神指教,后台数据显示不出来显示JSON错误, SSH注解式Injection of autowired dependencies failed求教, 怎么隐藏frame的滚动条?, Mybatis基于注解的Mapper如何使用动态sql?, ssh项目,Properties类修改*.properties配置文件时,“:”和“=”被转义怎么解决?, 如何使用wdatePicker日期插件, 关于apache 配置openssl的疑问, Spring 整合 Hibernate,运行时错误:could not init listeners , mybatis调用Oracle存储过程的时候不能加载配置文件,求大神~, 拦截器拦截方法 替换敏感词, 新手求问!hibernate连接数据库sql server 2005,想要在数据库里添加一个图片字段,用Blob创建image对象,出现一个问题, 'sessionFactory' or 'hibernateTemplate' is required, 关于mySQl的时间与java时间 的转化, 获取应用所在的服务器IP地址]
16-05-23 09:48:39,750 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=13
16-05-23 09:48:39,998 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=14
16-05-23 09:48:40,161 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=15
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=12
title:	[java web Tamcat服务器启动不了, spring mvc和hibernate整合配置问题, 用户设置内容模板,类似于理财产品的风险提示书,后台将模版中的理财产品代码替换成正在操作的实际产品代码, 大神求助,weblogic安装不了,急!!, java生成和解析二维码demo源码, js json转list 出错, springMVC 添加了分页功能就一直报错, java web项目与执行java文件读取文件后字节码不同的问题, SSH框架怎样封装联合查询的结果?, spring data jpa @query 无法传表名, 大家说说用ssh的好处, JavaWEB使用RSA加密解密数据,项目启动运行几个小时后,加密和解密速度极慢, 学习马士兵老师的网上商城项目,但是向mysql插入时间是报错,求解答, Spring AOP事务 不生效,求解答在线等。, jenkins启动浏览器,界面后台运行怎么办?, jsp里的一些css、js文件加载很慢, java连接数据库问题求助,不知道问题出在哪(初学者), List<Map>去重合并变成Map<List>, form中的onsubmit无法执行,求大神解决, 关于session与cookie, hibernate 查询问题?, 日期 报错问题 怎么解决?? 求大神 急 Data truncation: Incorrect datetime value, java模拟登陆中验证码读取顺序问题, Java版QQ机器人扫一扫轻松登陆, 在spring AOP的切片类中怎样使用session?, 附件上传保存失败, .jsp(20,7) jsp:getProperty for bean with name 'file'. Name was not previously in, 求大神解决我的this .HibernateTemplate的空指针异常, 【求助】怎样把webservice调到的数据让jsp页面用表格的方式显示出来, java怎么实现三角定位算法, 数据库中的表以日期保存,每天都会有新表,新生表的Hibernate映射文件怎样自己生成, ssm_shiro 起栈就报错,急求大神帮忙看看, 救命啊,dorado无法start service up.异常:no sr in java.library.path, uploadify 怎么显示上传文件的图标, Dorado7连接oracle显示无数据, struts2框架 Ajax的问题, JSP程序运行, 求大神帮忙, 我用spring mvc报这个错误, 让我加入hibernate-validator, 可是我用的是mybatis呀, 新人求助,my eclipse出错, Servlet+POJO+JDBC取出带有表关系的数据信息,并且显示出来, mybitas 存储过程 无返回值 报错 求大神, eclipse 只要一点击 run 或Debug 就未响应, 微信上传永久素材-视频,报错40062 invalid title size hint, fullCalendar, 关于删除表格中一行的问题,但是我点击删除按钮的时候不起作用, Java Web开发中要求熟悉linux开发环境是为何, spring的@value注解取配置文件变量的值, postmethod, 在Controller中无法@Autowired自动加载service实现类]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=11
title:	[各位大神,求一个学习的思路, 安卓真机如何测试电脑上的localhost web接口?, 怎么用jsp选择性输出TXT文本的内容?, 这个怎么解决, 急!Java Web 用户注册页面 , https服务器为客户机自动生成证书怎么搞?, 求大神帮我看看这个+jsp实现分页怎么写,数据库查询结果实体我封装到集合里了, 同一个jsp页面中包含iframe和include引进的页面问题, $.post()無反應, myeclispse 好卡, 大神来看下 问个关于JS的问题, struts通过ajax返回json数据问题,大神求帮帮, spring自动装配失败,, struts2中用action向前台输出后台运行的线程数一直为0, SS2H整合 求们解答, Hibernate 关联查询DetachedCriteria查询结果返回Object数组, 利用poi导入EXCEL,遇到空单元格如何改变该单元格背景颜色, 写了ajax程序在IE下可以,在别的浏览器就不行了。, 大神们,java在线阅读pdf,并且能选中文字做笔记,怎么实现, 多文件下载统计全局下载数, 通过form target 指定上传文件后返回值到 iframe中,但跨域上传之后接收不到数据???, 关于多线程读取文件的问题, Spring 启动报错 Injection of autowired dependencies failed 求大神帮忙 !, JDBC结果集操作问题, table固定表头怎么实现?????????????????????????????, eclipse中Html页面 写入的js 元素内容必须由格式正确的字符数据或标记组成,  validateJarFile(D:\JAVAworkspace\.metadata\.me_tcat\webapps\Shopping\WEB-INF\li, 这个怎么回事???大神帮助啊, 高德地图 经纬度转换为地址, 关于SpringMVC拦截器的疑问, 页面用list遍历出来放入文本框里面,怎么对同一个class的不同值进行修改啊, java为APP提供的接口怎么方便统计接口调用情况, 奔溃!支付宝服务窗使用mediaId下载服务窗客户的聊天图片总不成啊, Hibernate 中怎样在子类中修改父类的注解?, SS2H整合哪里错了大神们, 求做一个非常简单的工作日志管理系统, 求助,各位大神给个extjs3.2用grid数据画柱状图的例子,谢谢, Java Web createSQLQuery(sql)的结果和SQL语句本身执行的结果不一致?, CloseableHttpAsyncClient异步请求失败后无法关闭, 第九行查不出问题, Java.io读取xml 为什么字节流不一样?, http接口怎么限流, easyui datagrid 如何实现鼠标滚动翻页效果(不是点击下一页), springMVC求大神看下下面的报错log:Invalid mime type "text/html;charset = UTF-8": , java.lang.NoClassDefFoundError: org/apache/http/conn/ssl/X509HostnameVerifier, 导出数据到excel数据过大,导出没数据, JAVA后台怎么和C++SocketServer进行数据交互?, 大神们,为什么用java下载本地的pdf文件不是弹出下载提示,而是直接在页面上显示啦,其他文件就可以,这个晕死阿!!!, JAVA导出Excel数据量过大(50万以上)内存溢出如何解决?, 求javaweb的项目比如整合了ssh或者ssm的谢谢了需要那种综合开发的项目]
16-05-23 09:48:41,597 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=16
16-05-23 09:48:41,723 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=17
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=14
title:	[求助!自己弄了好久老是出问题,求帮助!, 如何获取jsp页面中的日期,晕死了, 【100分】Tomcat不停的reload,“One of more JARs have been added to the web application“, jsp forEach单元格合并, 安卓短信拦截, maven+jersey报错, 整合spring+hibernate 测试出错, springmvc在浏览器中jsp页面显示不出来 但是有一个页面好用, hibernate缓存同步问题, 求一个java+mysql的教工年度考核系统, 如何用正则表达式 “增加固定内容到动态变化的数值”中?, 关于window.location.href传参后台下载问题, Jfinal注解报错:No bean named 'xxxService' is defined, 淘宝ump满就送和打折活动怎么实现?, ireport的表头的中文显示,有点显示,有点不显示, linux系统上使用poi+java实现html转word,无法转换图片, tomcat直接用IP地址访问,不用添加项目名称访问的问题, 请问用JAVA发送http请求的作用是什么或有什么好处, An error occurred at line: 84 in the jsp file: /zhifu.jsp, JAXB无法读取属性值?, 怎么使用ftpclient实现下载时间限制, spring mvc 统一返回全局数据的问题, 大量用户 同时调用后台某个方法 要怎么让线程一个一个的执行?, BeanCreationException, Struts2 的[There is no Action mapped for action name HelloWorld.]错误, 求大神指导 使用IMB MQ时报错问题, 在线考试 倒计时 ! 刷新页面倒计时 不重置 怎么弄 求大神 , jsp页面中怎么把数据库中一个表中的数据取出插入到另一个表中, hibernate主键注解问题, 请问一个基于WEB的文件管理系统应该有哪些功能及实体?, CXF做的Restful的WebService,为什么httpServletRequest.getParameter取不到Post过来的参数?, log4j为什么就只在控制台打印呢?, Servlet获取到了图片的dataurl,怎么转换成正常的图片, 怎么用div遍历servlet中的集合, linux远程调试web项目, 使用JavaEE7+Tomcat8实现WebSocket,不理解服务器如何启动, 百度地图自定义标注, cookie操作遇到的问题, htmlbox怎么用 想写个编辑器, struts2 标签, 求各位大神帮忙看下这是什么错误!!!, 数据库,java, 视频播放时,边播放边在另外的div显示对应的信息,根据视频播放时间显示对应的文字和图片, jdbc连接数据库报错,帮忙看下是什么问题 ,谢谢 !!!, IE9调用window.print方法,打印预览,流程图显示有问题, 其他版本IE没问题, Struts2文件上传 超过大小限制无法跳转至指定input页面, 浏览器中获取开启浏览器的电脑串口的信息, win7 ie11无法安装oxc打包的cab插件, 请问一个关于登录验证的实现方法问题, logic:iterate如何利用if语句判断? ]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=13
title:	[Spring task任务xml配置问题, 我该如何实现这个功能需求, Java远程调用.aspx页面, jsp用jstl遍历时遇到的问题, servlet 怎样获取textarea的值, 求写一个Db类, java 怎样统计系统当前在线人数?, echarts 。springMVC调用.do跳转echarts的jsp页面,显示一片空白,但是直接访问这个jsp页面就可以显示, 求大神, 重定向端口号消失, JSP注册写入数据库问题!, spring MVC+httl整合报错, jsp页面切换 大神进来看看, 关于js操作本地文件问题, 可以重置当前路径吗?, 求解The value for the useBean class attribute com.myoa.db.DBObject is invalid, Struts2的一点小问题,求帮助, 显示数据库驱动不存在,跪求大神帮忙解决,, web.xml启动服务器报错, 【求助!在线等!】SpringMVC数据渲染到指定新界面后,该新页面上的JS无效。, 请教一下SpringMVC报 java.lang.IllegalArgumentException, Java web + mysql 图书馆管理系统, 类似京东E卡,卡号,卡密如何实现?, 大家来探讨下spring里面p命名c命名空间的存在意义, jsp没有提示, IllegalStateException:反应发生后不能向前 ,该如何解决, (在线等)有会用json web token的吗 , dwr3.0第一次登陆不发消息, easyui 导出excel?, 关于restTemplate的传参取参数问题?, 负载均衡问题请教, win7 64位 ODBC设置 链接数据库问题, 关于token在服务器端处理, 启动服务器报错, weblogic jms 确认模式问题, java调用webservice header验证报错, json, 商品组合问题, 关于spring mvc框架的创建, Spring MVC 上传文件报错java.net.SocketException: Broken pipe, <s:date/>标签无法显示出时间, java怎么实现redis队列的监听, Struts2怎么接受Ajax请求参数,并且参数的能set到实体对象里面去, 如何查看servlet过滤的url范围, 求大的云空间,可以直接通过http进行直连下载的, eclipse 可以启动服务器 但是运行jsp 报端口占用 错误, aciton中操作文件, 刚入学Hibernate碰到的错误,不知道怎么解决,, 不睡觉!坐等大神解救myeclipse的struts2内存溢出问题, 关于cookie与session]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=15
title:	[fusioncharts, EL表达式怎么中断, 页面的排版一直混乱, 关于JSON的问题!!!!!!!!, 关于java后台调用webservice报错:NAMESPACE_ERR: 尝试以错误的名称空间创建或更改方式来创建或更改对象。, 为什么登录不了tomcat的管理平台,显示404, maven 聚合工程path路径获取问题( 图片读取不到), Unieap平台转换问题, Myeclispe按住alt+/ 导包没提示, 求教struts2.1 2.2 2.3的区别, mysql-connector-java-5.0.8.zip对应哪个mysql版本?, localhost:8080/项目名/***.jsp打不开,求大神帮忙, ?一个背景图片问题,求大神看下, 添加jar包后websphere6.1启动慢, 如何使用HttpClient往网页html中的input控件传参数并提交, 求解 代码这里为什么会出现问题?, MyEclipse中debug不能正常进行,直接出现Class.class,求指教求帮忙, IDEA生成可执行的jar包时候如何像eclipse那样自动生成MANIFEST中的ClassPath导入包, 后台查询回来的是一个List<Map<String,Object>>,如何转成json并传到JSP页面进行显示, 新手上路。。。MyEclipse连接SQL数据库时 用户 'sa' 登录失败!!!, spring security出现An AuthenticationManager is required异常, 学习jsp,遇到些基础知识,有些不懂。, 求助:redis 存 tomcat session,1分钟就过期?, SSH整合,启动tomcat服务器就报异常。。, 谁给看看 搜了半天找不到结果, 通过三张表联合查询,查处一张表,前提是用hql语言。, 请教各位大神,我的项目jsp不能显示图片,执行js也不正常。, jsp调用java程序,分词NLPIR,Error looking up function 'NLPIR_GetLastErrorMsg': 找不到指定的程序。, mybatis 报以下异常,求解答。。。, 小白求助啊关于maven项目导入, 修改了默认站点后,怎么进入tomcat的管理页面?, springboot websocket如何知道服务器是否成功, 初学jsoup求大神帮忙提取一段代码的内容, mysql入库时单双引号的转译问题, structs.xml配置问题, 今天在做SSH练习的时候,用到了struts2的fileupload拦截器文件引发的其他问题,求指教, 严重: Parse Fatal Error at line 1 column 1: Premature end of file., List对象里面怎么取出重复的数据?, 一个有数据库支持的web项目,打包成war包时应该怎么配置数据库才能在别人电脑上也能运行?, java通过调用kettle时连接数据库报 The Network Adapter could not establish the connection 错误, org.springframework.web.servlet.PageNotFound , java后台运行如何实现将数据转化成echart图片,急!!!!!!, SSH框架运行没有问题但一直是404, system进程占用8080端口, hibernate 在业务层用@Autowired 注入entity报错 而new 一个entity正常运行, maven+springmvc+spring+jdbcTemplate搭建demo的问题, update更新不了, 手机端获取上传文件的路径, 求助,tomcat服务自动重启多次报错, hibernate show_sql 后台打印语句语法问题]
16-05-23 09:48:42,884 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=18
16-05-23 09:48:43,242 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=19
16-05-23 09:48:43,313 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=20
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=17
title:	[IText导出Word问题, 关于全局变量和局部变量作用域的问题,返回的结果被在次覆盖!求解, Hibernate 怎样根据实体类的注解获取对应的数据库表名和属性对应字段名?, 一般微服务用什么架构组合, easyUI datagrid多次点击查询, chrome无法显示JSP生成的验证码, GPS经纬度如何转换为UTM象素坐标?, 求一个新浪微博API调用开发大神!!!, fusioncharts的样式调整问题, Tomcat部署JSP网站问题, 请问下快速掌握springmvc+mybatis的开发该如何做, 商城注册, jsp获取url参数值, struts 查询出现下面错误,但是页面显示正常, java后台转发和重定向都不能跳转页面, 为什么IE可以打开去掉htm后缀的文件,chrome和火狐不行?, 史上前所未有的resin报错, 新人求教,关于JAVA web项目如何使用mysql集群的问题,求教, 好久不研究框架了,现在java轻量级框架都有什么?, 怎么包裹RestController的返回值?, spring data 的count, SSH用户登录到不同的页面, Maven项目,做junit4测试一直出错, 单例模式中调用service层, 求助,s2sh整合关联映射后查询出错,困扰一天了, Swagger的注解, 面试问题:java oracle 50W条数据, maven-tomcat 插件启动不报错,但是无法访问, javaweb url访问项目下图片不显示, 大神求指导, 写了一个webproject java 在本机tomcat下各种功能可以实现。但是在服务器上就不行了, spring jpa 的注解查询中支持 limit 吗?, 真心求解 Kettle+DB2 连接问题, spring AOP 使用@aspect 注解,不生效, 求高手指点帮忙, @RequestBody 415 (Unsupported Media Type), 关于因nginx缓存html,过滤器对html不起作用的问题, 菜鸟求大神解救!!如何在JSP页面显示数据库保存的图片!!, 如何把这个JSON数据显示到页面中,初学者看不太懂,好像是解析成了JSON数据,有哪位大神愿意帮忙可以写一下注释, 关于httpClient4.x post重定向问题,大神请进。。。, 在javaweb实现时遇到的问题, kingEditor插件上传图片,controller收不到请求, 怎么在网页里用import, spring mvc 404, Struts2与ajaxFileUpload.js实现文件上传的问题, 求助 JS JQuery如何通过当前元素获取 前边指定元素, 树结构菜单的后台数据怎么处理, 火狐 uploadify 上传失败 http 302错误, servlet中调用java函数没效果, target runtime 作用解析]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=16
title:	[spring+mybatis整合Context initialization failed org.springframework.beans.factory., springmvc中的OpenSessionInViewInterceptor如何配置拦截的路径, Ext/js主从表数据在同一个界面展示的问题, 爬取的数据在页面源代码中找不到,帮我该数据在是如何获得的, spring jdbcTemplate的多表连接查询daoImpl怎么写, SSH框架方法无报错,却自动回滚, uploadify兼容火狐,上传图片问题, 求SSH框架 高手!, jsp具体怎么传值啊, 关于webservice返回xml格式的字符串问题, fullcalendar 的events参数传递, jsp+servlet, pdf2htmlEX 有人用java调用过吗, spring security, ajax获取json数据的问题, jbpm4.4 整合hibernate+ibatis的事务不回滚, get请求后面的参数乱码,这不是如何解决乱码的问题哦!我知道怎么解决,想知道为什么,我不是刚入行哦, 如何实现后台导出excle直接调用打印, tomcat https 配置, 用nginx转发请求出现域名在内网可以访问,外网不能访问, Spring session 可以和shiro集成吗?他们使用了同一个spring的filter?, 你画我猜的轮流作画实现原理, 自学java web的困惑, ajax如何异步提交多个表单, 请问对RTP包的byte[]类型的payload内容进行加密和对普通字节数组进行加密有什么区别?, <s:iterator >标签中怎么遍历一个List<User>对象,其中User中包含一个Set集合, 关于编码问题 tomcat 与浏览器, 用SHH做一个论坛,每次打开首页index.html ,就能让系统查询数据库, Java web项目 局域网 上传文件 读取, There is no getter for property named 'Student' in 'class com.domain.Student', Html页面中Ztree传值问题, 关于Jacob的远程访问连接失败的问题, 利用session进行判断登陆的一个问题, iText给PDF文件添加文字水印不能显示的问题, jsp忘记密码 求指点 求回复 感激不尽!!!!, Java中能不能实现关闭开启麦克风或者摄像头的功能啊, springmvc中表单提交后字段值结尾被自动添加了"null", HTTP请求怎么返回MMSE/SMIL类型协议数据, 两台数据库之间事务统一问题, java计算时间差问题求解?, 关于struts.xml的package继承"json-default"和"struts-default", struts中的模型驱动传值和属性传值的优缺点,, webuploader 在表单中批量上传图片,后台怎么接受表单的数据和图片,我用的是springMVc, 学习DAO出现的错误, 求助求助 已经查了好久 网上说的解决方法不对 急急急啊, 求大神解决, 使用Struts和Hibernate做分页查询时,点击下一页时文本框会出现逗号。, websocket怎么实现一对多的聊天,在线客服类型的!保存聊天记录!, 部署项目时报错。。求助, java过滤器中修改一个http请求的返回内容???]
16-05-23 09:48:44,785 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=21
16-05-23 09:48:45,029 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=22
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=18
title:	[用SwaggerUI的跨域问题, 兼容模式下IE10获取出来的版本是IE7,怎么获取真实的版本?, 关于调用银联在线支付的代付接口中customerInfo参数无效的问题?, SpringMVC在继承SimpleFormController访问不到后台方法, JAVA连接SQL SERVER 2008 数据库的问题?, html5和后台交互 传值跳转, 111, 111, 关于点击查看按钮 能够查看该行的全部信息的代码, 在XSLT中使用XPath获得当前节点的下一个节点, jsp和html已经写好,代码正确,运行总是提示 not available., 百度地图js版上放一张图片 然后再图片上增加一个gif,如何实现, Struts2+extjs 传输1g大文件时,页面鼠标一直转圈,页面很卡!, ajaxSubmit上传multipleFile出错, 求助,关于wsdl、SOAP接口总是Connection timed out的问题, 我直接访问jsp页面报404 求解, 如何在前台页面上选择文件,获取文件的绝对路径, springmvc+mybatis初始化数据问题, 有电商接口开发的小伙伴吗? 请问在使用京东接口开发是的操作指南, java web, 开源多人聊天室,基于websocket实现, java第四大框架是什么?, 求java大神解答, Jsp include 的一个问题。,  No qualifying bean of type [com.dao.UserMapper] found for dependency:, 求rxtxcomm在一个web页面循环读取多个串口数据的方法, JSTL中,关于<c:import>标签的varReader属性怎么用?, [求助] java开发一段程序,模拟登录新浪微博, 用idea导入的maven项目,找不到maven的jar, 请教一个关于用户注册同步的问题, memcache使用一段时间之后变慢有哪些可能原因, SSH 框架下 HQL语句事务不回滚的问题, 关于系统登陆统计功能的问题, idea求教,创建web项目自动生成web.xml文件后要自己部署吗, 开发安卓服务端要怎么进行?(或者说第一步该做什么), 1.萌新求解, 求助大神,有关于XML文档后台传前台乱码的问题, java 新手排序问题, java视频上传和播放求源码, hibernate与mssql 不能查询中文, 关于百度BAE-部署Java/Tomcat web项目-MySQL连接不成功,如何解决?求教。, CKfinder文件管理器报错, 求大神指点, 求大神告知,使用Jsoup获取URL上面的所有链接后,如何显示所有链接的所有HTML内容?, spring+mybatis+axis2整合的问题,请大神帮忙, js调用浏览器证书, 易信修改服务器配置后验证token失败, hibernate 用sequence设置主键生成策略时,得到的id值与得到的序列不一样, FlexPaper在线浏览swf文件,页面上提示错误(测试的是官网例子), Optional int parameter 'id' is present but cannot be translated into a null valu]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=20
title:	[<return_msg><![CDATA[请参考http://kf.qq.com/faq/140225MveaUz150123neQF7F.html对商户号升级, intellij 错误提示那个小红灯打开的快捷键在哪里可以设置, java excel文件转PDF文件 求助!!!急急急, 一个本地能执行,linux服务器上执行不了的错, CXF WebService问题, EXTJS的问题,请大神指教一下。, Junit测试spring中配置问题,这种问题难道没人遇到?, java web 如何实现QQ第三方登录,  mybati可以写一个判断mysql,sqlserver使用like的拦截器吗, javaweb怎么实现别人的申请可以到老板的列表里, jsp String name=request.getParameter("username")为null, nginx 的设置问题 谢谢了, 一个服务器运行有两个tomcat,IP地址一样,端口号不同,我在tomcatA上的项目要获取tomcatB的webapps里图片文件夹中文件, 大家帮忙看一下这是什么问题springmvc+mybatis, Unexpected character 'S' (code 83) in prolog;, json+spring, copy的项目根路径为空, jenkis+git+maven构建工程失败,大神求帮助, ssh 同一个Action里为什么有些方法执行会报错, 咱们论坛发帖时,下面的标签选项在jsp里怎么实现, Session is closed报错了,高手们快来帮帮忙,快疯了。, 求助,shiro报错org.apache.shiro.UnavailableSecurityManagerException,帮忙看一下, 用pd4ml 转html为PDF,本地web中调试抛出异常,但是单独执行pd4ml的java文件是可以生成PDF的, 为什么不能转换成JSONArray, jsp框架跳转问题。, spring中同时注解responseBody和自定义aop,但是aop不起不作用, dhtmlxscheduler 修改 增加日程管理的框并修改其默认内容。求大神拿分, 短信验证框架,引擎, 关于CAS 通过Restlet调用密码输入错误是后台报错问题, SSH整合查询列表出现空指针,找了很久找不到哪里出问题,求大神, 正则表达式, JBoss发布CXF生成的WebService的时候报错!Failed to define class org.apache.cxf.wsn.jms.JmsPu, 在java timer定时器中调用dao层会报错"No Session found for current thread", JSP页面怎么获得指定文件的路径, kindeditor上传图片弹出undefined, 用maven创建liferay项目时缺少Liferay Portlet Resource, 从一个页面跳转到另一个页面框架内的jsp页面, mybatis查询语句中使用selectOne方法返回报错, java关于获取访问者外网IP的方式, mybatis怎么连表查询?新手!!, java 开发 eclipse mysql数据库 使用springmvc模式, jsp编译错误,紧急,求帮助,在线等。, echarts动态获取数据的问题。。, 新人,求帮助,主要是电影院排座的相关问题, mac系统怎么搭建eclipse搭环境, 如何去除x轴和y轴上的坐标点?, [我是新手]递归删除树, 使用struts2和json时,jsp页面的json返回数据为空, 微信公众号开发——提现怎么实现,有没有demo指导下, 基于springmvc+mybatis+maven+bootstarp+websocket+jqueryUI搭建的网赚论坛源码下载]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=19
title:	[启动tomcat时异常, java中怎么将输入的字符存放在数组中, Jenkins 邮件服务器 配置一直不成功,大虾帮忙看看哦, 请教:jsp连接MySQL数据库出错, 求助求助!!!tomcat占用80端口出错误信息, 求助!!模拟登陆如何利用cookie判断登陆是否成功(ps:set-cookie显示的是jsessionid), java post请求出现乱码, 关于IOS上传二进制流到后台JAVA保存图片, java开发短信平台,实现群发,遇到一些问题,如下:, springmvc 运行起来一段时间报异常com.mchange.v2.async.ThreadPoolAsynchronousRunner$Pool, kindeditor 图片上传成功后,返回上传错误提示, XFIRE CLIENT 如何获取发出及反馈的SOAP报文, 请教个问题:分布式系统,怎么保持两个系统之间数据的一致性? , Spring 事务的失败, jdbc连接MySQL数据库, appfuse用maven编译报running on a JRE rather than a JDK, javaweb为每一个请求的url增加一个参数字符串返回,用一个过滤器能实现吗, LTD文件不能添加<dynamic-attributes>标签, jsp页面不跳转问题, web部署完后启动tomcat出现java.lang.IllegalStateException异常,求解啊,我是新手, 用Dreamweaver cs6 怎么连接数据库, 请教 jstl 动态变量问题。, 求教S2SH中,JSP页面跳转出错, spring cache 如何实现字典表的缓存, 提示Parameter 'orderId' not found. Available parameters are [list], 为什么项目没办法被Tomcat识别., tomcat9.0错误特定错误:1, mybatis 莫名的错误:Error querying database. Executor was closed. 求大神帮忙, 关于权限精准控制的问题, eclipse项目导入myeclipse中无法启动, 关于java socket客户端连接池的问题, pring boot + gradle 启动报错, SSH框架,Websocket连接失败,求大神指导, 求教:每次修改前端JS代码,都要重新部署特别久是什么问题, Exception in thread "main" org.hibernate.InvalidMappingException: Could not pars, dos 启动服务命名, if 分支嵌套太多 求大神指点一下, 新人求解,如何用java生成word文档中的水印。, 如何通过js 在正文中添加相关链接呢,或者是广告, ajaxUpload中文乱码, 关于有状态更新时,将此条信息放在页面最前面显示, 为什么js报错 Uncaught TypeError: undefined is not a function, JSP引用javaBean提示“The value for the useBean class attribute xxx is invalid.”, 关于tomcat虚拟主机的问题, 通过vpn调用webservice接口时得不到返回值, spring配置头文件 报错, 怎么把我从后台获取到的数据发送到前端的jsp页面啊,求帮忙, jsp页面显示doc或pdf文件内容, ajax和json, jsp提交表单时servlet找不到]
16-05-23 09:48:46,176 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=23
16-05-23 09:48:46,302 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=24
16-05-23 09:48:46,329 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=25
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=21
title:	[description The server encountered an internal error () that prevented it from f, 关于linux系统上装win server 2008, JSP大神帮帮忙啊。, 哪位大神有论坛网站的html 静态demo 包含css 的, Spring MVC 4.x 一些代码配置的问题, 苦逼小虫等待回复, Solaris装Windchill9.1,总是出错在安装jdk时, 紧急求助,关于jsp实现用户分布骤注册表单, action1 重定向到 action2 action2 转发到jsp 页面, 样式都没有了, visio 2010 画ER图时,当关系连接线放在实体上时不自动显示红色边框, jq 将内容输出到div, Java使用xml+freemarker实现了导出数据到word,现在需要将word中数据修改后再次导入数据库中,覆盖原有数据,请问各路大神如何解决, C#中的GzipStream类方法无法解析我JAVA中GZIP压缩数据,我应该如何修改压缩方法, 搭建最简单的jetty 报错, ssh请求域,在jsp中获取的是地址名,怎么显示中文?, 求助 HTTP Status 405 - HTTP method GET is not supported by this URL, 请教一下关于Httpresponse和Httprequest的问题, 小白求问,dreamweaver 8登录页面不加数据库就可以浏览,加入数据库后(插入记录)就出现HTTP Status 500 - Unable to comp, maven tomcat插件启动项目问题, 求大神??, 递归事务报Can't call commit when autocommit=true异常问题, java运行JSP文件时出现了问题, 使用SSH框架,启动时报错,提示: Error creating bean with name 'sessionFactory'..., jsp同一页面根据参数不同显示内容不同问题??在线等。。。。, Java Mail 发布到服务器550 Sender Reject错误, 基于java 的网站设计和开发要用到哪些技术, mybatis一个很奇葩的问题,mapper.xml有问题,也能正常去启动服务,不报错, jdbc连不上SQL Server 2014, 为什么resultSet next()取不到第一条数据, jsp页面无法显示后台传达的数据?, 高级查询从页面到后台怎样传参?, 求J2EE的退出登录实现代码, 数据库查询出来的表怎么导出打印EXL, mybatis报错Parameter'params' not fund., springmvc整合ueditor出现的问题, 插入数据问题, 用mybatis在创建SqlSessionFactory时报错。, 怎么样让JSP保持一个session?有什么好的方案?, 萌新求助~领导给了个web框架。。发布的时候出问题了, spring中业务逻辑层的接口和实现类的在Action中的注入问题, 请教一个mybatis关联查询的问题, 关于redis集群的求助, 在jsp页面查询多对一中的一方时是对象?, 求下载京东推送sdk, 求解决技术或者方案, 系统偶尔出现column XX does not exist异常,需重启应用才能恢复, springmvc传值 html如何取值, ajax多次使用查询数据库,有的时候等查出结果,有的时候没有返回值, 关于JAVAWEB的一些问题, 关于java web开发完成后如何发布的问题]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=22
title:	[struts2问题..求帮忙, 下载文件拦截器如何实现, grails2.0.4和jdk1.8不兼容, 求高手指点迷津(关于企业站内信后台回复数据不插入数据表的问题), FusionCharts制作柱状图、饼状图、曲线图,从数据库获取数据,显示在图上。, 关于request.getParameter()取值为null的问题, 利用JDBC链接数据库的时候,出现问题==, 怎么抓取网页异步加载的代码和静态文件?, java项目在本地顺利,部署linux系统报错,请大神帮忙?, 业务层的逻辑操作写在了控制层怎么进行事务回滚?, 我在将一个项目的web service迁移至另一个项目中,启动后不报错但是wsdl服务访问不了,找不到原因,请教可能是哪里的问题,或是有什么排查的方法没有?, JfreeChart画股票分时线, 怎么样将文本编辑器中的图片保存到数据库, SSM框架,从SVN导出的maven项目,结果JSP页面中的Java代码不编译,没有报任何错误,一直找不到原因,各位帮帮忙, struts 2.3.24 部署到服务器 dispatcher初始化失败, 通过c3p0向数据库插入数据的问题, 数据库驱动总是加载不了 各位能帮我看一下吗, 求一个jsp+myaql的音乐网站系统 越简单越好 越小越好~, MyEclipse中的web工程需要设置管理员不能删除自己, JAVA链接数据库问题The server encountered an internal error that prevented it from fulfi, Android端的WebSocket连接不上, hibernate多数据源如何配置, cxf restful框架定义services接口的时候,如何屏蔽调用或重定向?, 配置jcs 分布式, nginx反向代理成功,可是css和js样式加载不出来。。, @Controller注解失效, springboot 打包 jar 无法访问 webapp下的资源?, 求教一下微信支付相关问题, 求助 关于JDK版本为1.6.29、45、43报错为:There must a method name element.的原因, Jsp中分页功能的实现, spring properties配置文件, 如何禁止烦人的“等待http://java.com/en/download”, 关于电影票选座选座时传值给js处理的问题, 求助!druid+Atomikos+mysql+tomcat启动无响应也不报错, SpringMVC+mybatis框架controller和service无法注入, java根据数据库中数据的时间,即时提醒, 页面切换时 页面会刷新 切换过去看到最后一次对页面的处理 , 关于jsoup获取response code的问题, 获得的对象是null 也不知道是哪儿错了, 数据库Decimal类型,和Double类型数字比较大小?, java多线程 返回list 怎么遍历list, maven项目包冲突, 关于接口的调用问题,访问struts的action,action得不到入参,求解答, 谷歌和opera浏览器是否会自动过滤list中相同数据?, ssh2的整合 求帮助, 找了一个springmvc的方面问题, 【求助】highcharts 怎样通过自己搭建图片导出服务器,而不用官网进行导出?, 加载spring mvc 项目 报错。。 Context initialization failed, 关于dwr几个疑惑, 在ssh框架里搭了一个websocket连接,连接不上]
16-05-23 09:48:47,603 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=26
16-05-23 09:48:48,088 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=27
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=25
title:	[eclipse下使用meavn搭建SSM框架,使用junit4测试出现无法获取jdbc驱动类的异常。弄了好久,真心求助,谢谢。, spring startQuertz不执行, 测试tomcat出问题,求指教, HTTP Status 404 - /erp0309/login.action, 在jsp页面查询数据并显示到此页面报空指针的问题, java axis2 调用webservice异常求解, 我在SQl Server写了个查询语句,是可以运行得到结果,但是放到程序中却报错了, SSH的整合,双向关联,如果配置了一对多就报异常,多对一就不会,但是找了1天还是解决不了。我把项目放上去....希望能大神帮我解决问题。, 求助大虾,极光推送,本地服务器向手机发送推送对象报错, 请教这种混沌后的js文件还能解得开吗?, 关于java中平均分配的问题, js跳转不到servlet , jsp:useBean 的class一直显示undefined type, 使用ajaxupload插件上传为什么不能上传第二次, http传输时控制台报错tls ssl不可用,求助, 江湖救急!!!求教大神, 远程下载附件,附件打开报错, 手机点击分享出来的链接,java服务端怎么获取该手机的imie码?, Mapped Statements collection already contains value, tomcat配置memcached集群后出现了小问题,求大家帮忙~, Quartz集群后,动态添加的相同任务会在不同的节点上同时执行, C3P0数据源导致oracle-12516错误,求大拿帮看看.非常感谢~, hprose怎么和spring集成,有没有实例?, 在线等着急a, java接口 出参和入参对象是否需要说明哪些属性需要值, Ajax post 报400 bad request错误, RocketMQ3.2之后不能安装在Windows上?, 奇怪的问题, spring webflow 表单问题, 请大神教教我, 请问如何在jsp页面中显示自动增长序列??, tomcat测试时ClassNotFoundException: org.apache.jsp.index_jsp, tomcat启动速度跟什么有关?, spring 后台如何获取$.ajaxFileUpload 方式上传的file数据, 为什么我的QueryRunner执行query时提示不能创建UserBean?和教程是一样的啊,教程可以创建, 求各路民间大神帮忙看一下weblogic启动不了,报错!!!, tomcat 配置虚拟目录访问Servlet 404, 将base64编码转成图片存到本地为什么都是损坏的?, 视频播放求助, ftl+springmvc整合中项目路径的问题, axis2 json webservice问题 , Struts2调试问题,刚学Struts2没多久, 刚接手一个项目,有个搜索框输入一个条件就会自动搜索,但是我想要点击搜索按钮后才进行搜索,该在哪里改呢, 怎么调用别人的Webservice的接口, javaweb程序放在resin上运行报错,具体错误如下,, 关于json统计子节点的一个问题, 一个关于自定义标签的很诡异的问题, 求代金券的最大化抵扣算法, java.lang.NullPointerException at java.util.Calendar.setTime(Calendar.java:1106, 求问jsp页面打不开??怎么解决??]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=24
title:	[做商城项目收货地址点击默认添加为默认地址 求大神指教!, jsp页面中点击提交按钮后台怎么获得form表单中富文本框里的内容, mongodb 查询, 项目启动的时候总是报这些错误,但是不影响使用, Mybatis typeAlias不支持内部类, 求助大侠Hibernate报错问题, java 图片 处理成圆形,周围要透明,不是android,是普通的java, JSP怎样遍历获取hashmap的值?, jenkins下设置邮件出现535错误, Java调用Matlab神经网络函数的问题, javaWeb中session生命周期的问题, ckeditor 有没有设置文档背景色的插件, java 用openoffice转pdf 转换多个文件出现问题, 手机访问怎么跳转到手机网站, JAVA如何运用openoffice同时多个文件转PDF, 多台服务器上部署lucene的问题, 怎么给page框架做按最大值排序, tomcat8服务启动后停止,打开configure tomcat启动到一半就退出, 求问网页整合 支付宝的 即时到账 服务 , JAVA如何查看HttpRequest和HttpResponse占用的内存大小?, 利用反向工程生成的DAO中的findbyname方法查找的数据库数据出现乱码, ActionContext.getContext().getSession().put进去的session获取不了数据,空指针?怎么解决?, java调用webservice的问题, 基于openfire的converse.js聊天开发, javax.servlet.ServletException: java.lang.LinkageError, 我的Ideal怎么新增不了maven项目, 开源项目, logback不生成新的日志文件,后一天的打到前一天的日志文件中, AJAX传值给servlet为什么我的dataType值能是script才会进入success呢, 现在有一个需求,shiro整合spring要求前台的注册用户与后台的管理员分开2个登陆界面,这个要求怎么实现?, FTPClient通过HTTP代理服务器连接FTP服务器, 支付宝接口开发问题, JSP根据指定链接获取源HTML(不是想象那么简单哦~), freemaker怎么截取富文本编辑器的内容???????, 求一个eclipse开发的jsp+oracle论坛源码, 有谁知道用于工作流的表单设计器, 关于restful 同一资源 不同操作的问题,页面显示的问题。, 新浪抓取港股历史数据, 关于restful 同一资源 不同操作的问题,页面显示的问题。, aixs-1.4 调第三方接口数据多了会报HttpErrorCode:400是什么情况, 通过JDeveloper部署ADF应用到Weblogic服务器上,如何打包,部署?常用的部署方式有哪几种?, tomcat发布网站indexaction出错, jsp百度编辑器 后端配置项没有正常加载,上传插件不能正常使用!, 求助 service注入action报空指针, 求大神帮我看看怎么搜索框把输入条件自动搜索 改成点击搜索按钮才查找, springmvc实现json数据交互问题, java服务器推送问题(多线程问题), 有没有javaweb的个性博客系统啊?, 求助:webservice+SSH+CXF 遇到异常, java httpclient 模拟登录出现未知错误]
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=23
title:	[jquery选择器的问题,请教下大家., java.lang.reflect.InvocationTargetException, 问一个关于反编译网站的事, 求大神帮助, Hibernate面试题,如果每个数据库表中都有相同的字段,怎么映射?, 有关微信支付回调notify_url的问题, [急急急]webservice认证问题, json格式的接口问题,fashjson解析问题, 为什么我的response.sendRedirect不会跳转,无解呀, ajax跨域访问jsonp,返回jquery.... is not defined, jquery easyui-combobox弹出下拉菜单位置的问题, 积分系统数据库表该什么设计, eclipse开发servlet使用不了@WebServlet注解怎么办, IntelliJ IDEA中的jsp编辑有没有可视化的方法, 求教,第一次使用hibernate,报错Unable to create requested service , weblogic自带jdk与运行环境, 关于beancreateexception怎么解决,跑tomcat直接报错, Class File Editor /Source not found异常, 关于JSP标题带乱码的问题, 在打开页面时就查询数据库并显示, 用java导出word后,文件打不开,报错, 用TomCat运行一个Struts的例子总是报空指针故障,我把语句贴出来, jsp自定义标签如何取得父标签, 用maven创建的web项目如何查看页面的访问路径, 关于后台菜单问题, jsp中调用JavaBean, spring在service层管理实务,我想提早commit事物,这个可以吗?, hibernate的映射关系如何配置, Struts2 初学遇到:The requested resource is not available., 关于页面的细粒度权限控制, 关于网站老是挂掉的问题, 现在世界上究竟有没有Spring 3.x的中文API, spring事务管理防止同时更新的问题, org.springframework.web.util.NestedServletException: Handler processing failed问题, SSH框架下在action中调用servlet,求大神赐教, junit测试中用到springmvc事务回滚配置不能实现回滚, json+ajax+jqery+java+oracle数据库,发我个这些都有的案列,对数据的处理,验证,异步, java调用wcf出错,求大神解救啊, List对象中属性的传值问题, 通过web页面实现对服务器端应用程序启动、监控、停止的问题, spring注解问题, 一个关于FileOutputStream不能创建文件的问题,求大神,  js 将My97DatePicker默认时间设置为空怎么设置, springMVC的controller中如何获取spring applicationContext配置文件中读取的属性值, 在mybatis中,sqlmapconfig.xml中mapper只能逐个添加,不能扫描,什么原因?, Jboss无法启动,run闪退,standalone一直卡在一个地方, Filter常见错误 ,询问,请大神看看,应该 是个常见问题, JS前端加密JAVA后台解密?, 求指导,不知道为什么出错 Not an managed type: class org.xxxxx.server.beans.User, 为什么我把struts.xml复制到src下就报错]
16-05-23 09:48:49,134 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=28
16-05-23 09:48:49,341 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=29
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=26
title:	[GET POST请求问题, 直接执行sql语句查询很快,在程序中报sql超时。, java编写http post请求,服务端无法获取post的请求参数(在线等,急), hibernate报错org.hibernate.MappingException: Unknown entity, 关于spring Ioc注入的问题, Maven项目启动一半就停了,不报错, 问个关于svn的问题---, webService客户端的问题, playframework 1.2.7报错duplicateMemberException:duplicate method:count in models, JAVA或者js可以更改PHP文件里的内容吗?, web系统A访问系统B的显示问题, excel下载为空, web中配置ContextLoaderListener和contextConfigLocation区别, easyUI 表格宽度如何内容自适应, 修改代码后 如何部署到正式环境啊 新手, 请教一个二级域名的问题。,  HessianProxy cannot connect, ftpsclient 文件上传, 今天遇到个问题,spring注解do请求调用jsp页面是报url目标路径无效异常, Java Web工程里集成哪种报表工具比较好?(一定要免费的), eclipse中怎么构建Maven工程??, [求助]求各位大神帮助,SSH无法调用定义的sequence, ssh Action无法实例化 报500错误, 拍照或从手机相册中选图接口, spring mail 老是报错 javax.mail.AuthenticationFailedException, 我的路径为什么需要多加一个view, Servlet入门例子!一直报500错误!, 看教程做的,死活都不行,求救。。。大神们看过来。。。, 关于SpringMVC文件上传下载问题, java 微信现金红包证书出错 能解决高分啊, MyEclipse中导入一个JSP项目后出现的问题, 来 大大 帮吗解决下这个 js 问题, 关于使用apache shiro框架的问题, Hibernate中的<property name="hbm2ddl.auto">update</property>无法自动创建数据表格, intellij和myeclipse的问题, 求助!Spring下使用JNDI数据源时JDBCTemplate数据库连接关闭的问题!, Java如何利用jacob在word文档的页眉中插入图片, 关于udp端口绑定的问题, 在jsp被翻译成Servlet中,为什么父类HttpJSPBase可以调用子类(被翻译的Servlet)的方法, 求帮:JPA外键关联,进行修改外键时出错identifier of an instance of …… was altered from, Hibernate Client.java中session.getTransaction().commit(); 报错原因?, 在Hibernate中配置Hilo进行数据绑定测试时出错:org.hibernate.MappingException: Could not instantia, 大用户数据的实时排行榜怎样实现?, Java 生成Word并引入Excel表, 请教servlet中使用struts遇到的Could not find action or result错误, 求助:tomcat5.5服务器每20天左右必须重启一下,否则下面都连接不上, 各位大神,帮我看看这个怎么封装一下好啊, confluence API接口, 关于JAVA网络编程-web缓存的一个例子不能理解, ssh注解配置的视频或者图解--请帮忙给一份]
16-05-23 09:48:49,595 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=30
get page: http://bbs.csdn.net/forums/Java_WebDevelop?page=27
title:	[为什么我ckeditor导入项目报错?, MyEclipse 10 如何安装插件, 关于在网站发现的分页查询中的问题,希望大神赐教, 生产环境里上传文件失败, freemarker遍历map为什么会按照key排序?, java日期格式转换问题, 有没有朋友接触过hr open standards ,创建JAX­WS Java Project with HR­XML相关问题,求指教~_~, 谁做过毕设:(javaweb)题库管理与试卷生成系统啊???求大神指点, ie浏览器下 出现的排列问题, js操作Excel,生成图片到excel指定位置,是指定位置、不是整个table的全部内容, springMVC+Spring Security+OAuth2.0如何自定义获取token, MyEclipse设置条件断点,出现错误提示, 关于ubuntu上面配置启动jetty求大神, Spring注入失败求解答, 网易内推还有内退码,有需要的可以联系我, 【求解】java web多个项目如何共享配置文件, log4j无法分文件异常, 怎么才能实现点击select时才开始加载数据,没点击时不加载数据, 百度地图添加大量marker问题, 一个java项目出现了css js被篡改的问题 求高手, Mybatis驼峰式命名自动映射, intellij idea的spring mvc建立的默认工程,运行报错,请大侠帮忙。, 如何阻止主函数,又不太耗费CPU?, uc浏览器发送两次请求, 求JAVA用LDAP修改域用户密码不用证书,有管理员账户, 系统使用的省市区有点老,去哪找最新的省市区数据库, action 进service 报空指针, jibx 的bindgen问题, rpc/encoded wsdls are not supported in JAXWS 2.0. , Hebernate的unKnown entity问题, delUseFlag()方法和delete()方法有何区别, 求教一个关于数据解析的问题, jsp页面播放mp3音频,有什么办法可以实现音频读到某一句话时触发js事件吗, Mybatis 连接mysql 查询tinyint型 返回值是boolean 型 问题, ue传图片到七牛 不能显示图片, WebService数字证书安全验证方式找不到类, java There is no Action mapped for namespace求解决, POI 3.13版本,pptx转换为图片时,ppt中内容出现丢失,求大神指点!急急急!, Maven Spring Boot搭建项目时报错, The constructor ComboPooledDataSource(String) is undefined, 关于jsp转义input中输入的html符号的问题, quartz2.2.1 任务持久化问题, 修改浏览器Cookies来实现系统自动登录, 类似12306过期付款的功能,求思路, 如何同时执行一个action中的所有方法, 有关日期转换的问题,折腾了一天, spring mvc 整合jbpm 怎么配置 整了两天有点头绪没有, Path must include project and resource name: /struts-default.xml, WebLogic11g-单双向SSL配置, 关于zDialog.js的使用问题,如何加载相对路径下的图片资源?]
16-05-23 09:48:50,505 INFO  us.codecraft.webmagic.downloader.HttpClientDownloader(HttpClientDownloader.java:87) ## downloading page http://bbs.csdn.net/forums/Java_WebDevelop?page=31

Process finished with exit code -1

如果想采集更多的东西,可以将循环体放入main中。然后link的地方使用选择器匹配,进入每一页进行详细信息采集。

时间: 2024-10-23 02:59:47

webmagic采集CSDN的Java_WebDevelop页面的相关文章

PHP采集CSDN博客边栏的阅读排行

项目中要用到采集的数据,所以就先拿CSDN博客来试了试.这里使用Simple HTML DOM(官网)这个库,它能够方便的遍历HTML文档. <?php include_once('simple_html_dom.php'); header('Content-Type:text/html;charset=utf-8'); $html = file_get_html('http://blog.csdn.net/szy361'); $res = $html->find('#hotarticls u

02_使用WebMagic获取CSDN推荐专家的个人博客信息

[首先,查看一下CSDN的推荐专家的页面] [然后再查看一下主页面] 准备用爬虫获取一下几个变量 1.姓名 2.访问量 3.积分 4.等级 5.排名 6.原创 7.转载 8.译文 9.评论 10.链接 11.照片 [工程截图]因为主要用到WebMagic,所有的jar包在WebMagic的git地址,自行下载. [User.java]便于展示,或者后期存入数据库用 package com.cnblogs.test; public class User { private String name;

前嗅ForeSpider教程:采集CSDN

以CSDN(https://blog.csdn.net/nav/career)为例,采集当前列表页博文的正文数据:第一步:新建任务①点击左上角"加号"新建任务,如图1:[图1]②在弹窗里填写采集地址,任务名称,如图2:[图2]③点击下一步,选择进行数据抽取还是链接抽取,本次采集当前列表页博文的正文数据,正文数据是通过点击列表链接进入的,所以本次需要抽取列表链接,所以点击抽取链接,如图3:[图3]第二步:通过定位过滤,得到所需链接①按住Ctrl+鼠标左键,进行区域选择,按住Shift+鼠

c#如何采集需要登录的页面

首先说明:代码片段是从网络获取,然后自己修改.我想好的东西应该拿来分享. 先说下原理:当我们采集页面的时候,如果被采集的网站需要登录才能采集.不管是基于Cookie还是基于Session,我们都会首先发送一个Http请求头,这个Http请求头里面就包含了网站需要的Cookie信息.当网站接收到发送过来的Http请求头时,会从Http请求头获取相关的Cookie或者Session信息,然后由程序来处理,决定你是否有权限访问当前页面. 好了,原理搞清楚了,就好办了.我们所要做的仅仅是在采集的时候(或

WEB页面采集器编写经验之一:静态页面采集器

严格意义来说,采集器和爬虫不是一回事:采集器是对特定结构的数据来源进行解析.结构化,将所需的数据从中提取出来:而爬虫的主要目标更多的是页面里的链接和页面的TITLE. 采集器也写过不少了,随便写一点经验吧,算是给自己的一个备忘. 首先是最简单的:静态页面采集器.即所采集的数据来源页面是静态的,至少采集器所关心的那部分数据是静态的,可以通过直接访问页面URL的方式获取到包含目标数据的全部页面代码.这种采集器是最为常用,也是最为基础的.目前已经有很多成熟的商业化的采集器产品,不过对我来说感觉用着有些

用WebBrowser采集渲染后的HTML页面

主要用于微信的文章采集,如果用单纯的HttpClient采集,会出现页面无法渲染的情况: 经过研究发觉公众文章html页面是经过渲染之后显示的,那么思路来了,如果在dotnet的环境下,用WebBrowser控件能采集到渲染后的HTML. 那么可以通过dotnet下用WebBrowser实现文章采集: 预留位置

QueryList 来做采集

示例代码 先来感受一下使用 QueryList 来做采集是什么样子. 1 采集百度搜索结果列表的标题和链接.大理石平台价格 采集代码: $data = QueryList::get('https://www.baidu.com/s?wd=QueryList') // 设置采集规则 ->rules([ 'title'=>array('h3','text'), 'link'=>array('h3>a','href') ]) ->queryData(); print_r($data

关于Csdn水区被占领一事 (2015-08-01)

如下图所示 水区被占领 ,如果发贴机不只在水区发贴,也在其它版块也发贴,将不堪设想啊各位. 现在很多网站也经历过被 注册机,发贴机,乱炸,是很可恨的事.但是您想想,为什么注册机,发贴机会这么轻易就可以注册和发贴呢?这是为什么,其实很简单,注册中的验证码 过于简单,等因素. 请看 http://passport.csdn.net/ajax/verifyhandler.ashx 这就是注册的验证码,能不能加点难度呢? 请你们看看这个验证码 (注:这是一个某程序网站 是哪个就不多说了) 如果将这个用在

学习使用Et采集的过程和分析

ET采集主要逻辑是做好这三个步骤,然后开始工作 采集配置 基本设置一般不用修改 列表设置:列表网址,可能有些人不知道什么是列表网址,就是你所要采集网址放在一个页面就是列表网址,比如我们常说的栏目,一个论坛的版块: 列表页肯定不是一页,一般是有规律的,就需要设置成自动列表,具体规则参考ET 列表区域选择:一个网页大的去了,为了快速找到你想要采集的页面,需要制定区域, 一定要找唯一属性的,一般是找id 之类的,中间是你区域内容 列表分析规则:对列表进行分析,用标记替换找到我们需要的文章标题,文章网址