代码语言
.
CSharp
.
JS
Java
Asp.Net
C
MSSQL
PHP
Css
PLSQL
Python
Shell
EBS
ASP
Perl
ObjC
VB.Net
VBS
MYSQL
GO
Delphi
AS
DB2
Domino
Rails
ActionScript
Scala
代码分类
文件
系统
字符串
数据库
网络相关
图形/GUI
多媒体
算法
游戏
Jquery
Extjs
Android
HTML5
菜单
网页交互
WinForm
控件
企业应用
安全与加密
脚本/批处理
开放平台
其它
【
Java
】
批量查找未注册的域名
作者:
zjq2008wd
/ 发布于
2014/4/11
/
575
批量查找未注册的域名
package com.blog.collection; import java.util.ArrayList; import java.util.List; import java.util.regex.Matcher; import java.util.regex.Pattern; import com.blog.model.Blog; public class CollectionHandler { private Progress progress; public void setProgress(Progress progress) { this.progress = progress; } public Progress getProgress() { return progress; } public void go(String user){ HttpRequest request=new HttpRequest(); System.out.println("加载中..."); String content=request.sendGet("http://blog.csdn.net/"+user+"/article/list/1", ""); //获取页码-摘要视图 String count=matcher(content, "(?<=<div[\\s\\S]{0,10}id=\"papelist\"[\\s\\S]{0,10}class=\"pagelist\">[\\s\\S]{1,100}共)\\d+(?=页</span>)"); Integer code=count.equals("")?0:Integer.parseInt(count); List<String> urls=new ArrayList<String>(); getUrls(content, urls, null); for(int i=2;i<=code;i++){ getUrls(null,urls, "http://blog.csdn.net/"+user+"/article/list/"+i); } System.out.println("数量:"+urls.size()); for (String string : urls) { System.out.println(string); handler(string); } System.out.println("处理完成"); } public void getUrls(String text,List<String> urls,String url){ HttpRequest request=new HttpRequest(); String content=null; if(text==null){ content=request.sendGet(url, ""); }else{ content=text; } String regex="(?<=<span[\\s\\S]{0,10}class=\"link_title\"><a[\\s\\S]{0,10}\")[\\s\\S]*?(?=\">)"; Pattern pattern = Pattern.compile(regex); Matcher matcher = pattern.matcher(content); while(matcher.find()){ urls.add("http://blog.csdn.net"+matcher.group()); } } /** * 处理博文 * @param url */ public void handler(String url){ Blog blog=new Blog(); HttpRequest request=new HttpRequest(); String content=request.sendGet(url, ""); //System.out.println(content); String regex = "(?<=<span class=\"link_title\"><a[\\s\\S]{0,1000}?>)[\\s\\S]*?(?=</a></span>)"; //标题 String title=matcher(content, regex).replaceAll("\n", "").replaceAll(" ", ""); System.out.println("标题"); System.out.println(title); blog.setTitle(title); //文章内容 regex="(?<=<div[\\s\\S]{0,100}id=\"article_content\"[\\s\\S]{0,100}class=\"article_content\">)[\\s\\S]*?(?=</div>[\\s\\S]{0,100}<!--)"; System.out.println("博文"); String text=matcher(content, regex); blog.setContent(text); //分类 regex="(?<=<span[\\s\\S]{0,100}class=\"link_categories\">[\\s\\S]{0,1000}<a[\\s\\S]{0,200}?>)[\\s\\S]*?(?=</a>)"; System.out.println("分类"); String type=matcher(content, regex); blog.setTags(type); System.out.println(type); if(this.progress!=null){ progress.handler(blog, type); } } public String matcher(String content,String regex){ Pattern pattern = Pattern.compile(regex); Matcher matcher = pattern.matcher(content); if (matcher.find()) { String group = matcher.group(0); return group; } return ""; } }
试试其它关键字
未注册的域名
同语言下
.
List 切割成几份 工具类
.
一行一行读取txt的内容
.
Java PDF转换成图片并输出给前台展示
.
java 多线程框架
.
double类型如果小数点后为零则显示整数否则保留两位小
.
将图片转换为Base64字符串公共类抽取
.
sqlParser 处理SQL(增删改查) 替换schema 用于多租户
.
JAVA 月份中的第几周处理 1-7属于第一周 依次类推 29-
.
java计算两个经纬度之间的距离
.
输入时间参数计算年龄
可能有用的
.
C#实现的html内容截取
.
List 切割成几份 工具类
.
SQL查询 多列合并成一行用逗号隔开
.
一行一行读取txt的内容
.
C#动态修改文件夹名称(FSO实现,不移动文件)
.
c# 移动文件或文件夹
.
c#图片添加水印
.
Java PDF转换成图片并输出给前台展示
.
网站后台修改图片尺寸代码
.
处理大图片在缩略图时的展示
zjq2008wd
贡献的其它代码
(
4
)
.
通过AMO获取SQL Server SSAS信息
.
批量查找未注册的域名
.
Win32 例程(关机,重启,注销)
.
循环队列
Copyright © 2004 - 2024 dezai.cn. All Rights Reserved
站长博客
粤ICP备13059550号-3