应用介绍
爬虫管理系统
###爬虫管理系统说明
将平时所作爬虫做以归纳管理
提供方便与用户配置的接口
引用微博API使用Oauth协议进行登陆操作
前端供用户操作，提交的配置将存入数据库
服务端将定期进行数据库扫描，读取用户对应应用的配置文件
按照配置规则进行数据抓取，抓取结束后通过邮件服务告知用户数据下载链接
©版权声明：本文内容由互联网用户自发贡献，版权归原创作者所有，本站不拥有所有权，也不承担相关法律责任。如果您发现本站中有涉嫌抄袭的内容，欢迎发送邮件至： www_apollocode_net@163.com 进行举报，并提供相关证据，一经查实，本站将立刻删除涉嫌侵权内容。
转载请注明出处： apollocode » 爬虫管理系统
文件列表(部分)
| 名称 | 大小 | 修改日期 |
|---|---|---|
| .name | 0.01 KB | 2014-12-20 |
| SpiderClient_war.xml | 0.18 KB | 2014-12-20 |
| SpiderClient_war_exploded.xml | 0.45 KB | 2014-12-20 |
| compiler.xml | 0.47 KB | 2014-12-20 |
| profiles_settings.xml | 0.07 KB | 2014-12-20 |
| encodings.xml | 0.15 KB | 2014-12-20 |
| Maven__commons_codec_commons_codec_1_2.xml | 0.20 KB | 2014-12-20 |
| Maven__commons_httpclient_commons_httpclient_3_1.xml | 0.21 KB | 2014-12-20 |
| Maven__commons_io_commons_io_2_4.xml | 0.20 KB | 2014-12-20 |
| Maven__commons_logging_commons_logging_1_0_4.xml | 0.21 KB | 2014-12-20 |
| Maven__dom4j_dom4j_1_6_1.xml | 0.20 KB | 2014-12-20 |
| Maven__javax_activation_activation_1_1.xml | 0.20 KB | 2014-12-20 |
| Maven__javax_mail_mail_1_4_4.xml | 0.20 KB | 2014-12-20 |
| Maven__javax_servlet_javax_servlet_api_3_1_0.xml | 0.21 KB | 2014-12-20 |
| Maven__junit_junit_3_8_1.xml | 0.20 KB | 2014-12-20 |
| Maven__log4j_log4j_1_2_16.xml | 0.20 KB | 2014-12-20 |
| Maven__mysql_mysql_connector_java_5_1_32.xml | 0.21 KB | 2014-12-20 |
| Maven__org_json_json_20090211.xml | 0.20 KB | 2014-12-20 |
| Maven__org_mybatis_mybatis_3_1_1.xml | 0.20 KB | 2014-12-20 |
| Maven__xml_apis_xml_apis_1_0_b2.xml | 0.20 KB | 2014-12-20 |
| misc.xml | 0.41 KB | 2014-12-20 |
| modules.xml | 0.21 KB | 2014-12-20 |
| scope_settings.xml | 0.12 KB | 2014-12-20 |
| uiDesigner.xml | 0.87 KB | 2014-12-20 |
| vcs.xml | 0.14 KB | 2014-12-20 |
| workspace.xml | 7.11 KB | 2014-12-20 |
| SpiderServer | 0.00 KB | 2014-12-20 |
| pom.xml | 0.57 KB | 2014-12-20 |
| README.md | 1.02 KB | 2014-12-20 |
| SpiderClient.iml | 0.68 KB | 2014-12-20 |
发表评论 取消回复