Java实现的爬虫抓取图片并保存操作示例

网友投稿 167 2023-07-21

Java实现的爬虫抓取图片并保存操作示例

本文实例讲述了java实现的爬虫抓取图片并保存操作。分享给大家供大家参考,具体如下:

这是我参考了网上一些资料写的第一个java爬虫程序

本来是想获取煎蛋网无聊图的图片,但是网络返回码一直是503,所以换了网站

import java.io.BufferedReader;

import java.io.FileOutputStream;

import java.io.IOException;

import java.io.InputStream;

import java.io.InputStreamReader;

import java.io.OutputStream;

import java.net.MalformedURLException;

import java.net.URL;

import java.net.URLConnection;

import java.util.ArrayList;

import java.util.List;

import java.util.regex.Matcher;

import java.util.regex.Pattern;

/*

* 网络爬虫取数据

*

* */

public class JianDan {

public static String GetUrl(String inUrl){

StringBuilder sb = new StringBuilder();

try {

URL url =new URL(inUrl);

BufferedReader reader =new BufferedReader(new InputStreamReader(url.openStream()));

String temp="";

while((temp=reader.readLine())!=null){

//System.out.println(temp);

sb.append(temp);

}

} catch (MalformedURLException e) {

// TODO 自动生成的 catch 块

e.printStackTrahttp://ce();

} catch (IOException e) {

// TOhttp://DO 自动生成的 catch 块

e.printStackTrace();

}

return sb.toString();

}

public static List GetMatcher(String str,String url){

List result = new ArrayList();

Pattern p =Pattern.compile(url);//获取网页地址

Matcher m =p.matcher(str);

while(m.find()){

//System.out.println(m.group(1));

result.add(m.group(1));

}

return result;

}

public static void main(String args[]){

String str=GetUrl("http://163.com");

List ouput =GetMatcher(str,"src=\"([\\w\\s./:]+?)\"");

for(String temp:ouput){

//System.out.println(ouput.get(0));

System.out.println(temp);

}

String aurl=ouput.get(0);

// 构造URL

URL url;

try {

url = new URL(aurl);

// 打开URL连接

URLConnection con = (URLConnection)url.openConnection();

// 得到URL的输入流http://

InputStream input = con.getInputStream();

// 设置数据缓冲

byte[] bs = new byte[1024 * 2];

// 读取到的数据长度

int len;

// 输出的文件流保存图片至本地

OutputStream os = new FileOutputStream("a.png");

while ((len = input.read(bs)) != -1) {

os.write(bs, 0, len);

}

os.close();

input.close();

} catch (MalformedURLException e) {

// TODO 自动生成的 catch 块

e.printStackTrace();

} catch (IOException e) {

// TODO 自动生成的 catch 块

e.printStackTrace();

}

}

}

运行输出:

更多关于java相关内容感兴趣的读者可查看本站专题:《Java网络编程技巧总结》、《Java Socket编程技巧总结》、《Java文件与目录操作技巧汇总》、《Java数据结构与算法教程》、《Java操作DOM节点技巧总结》和《Java缓存操作技巧汇总》

希望本文所述对大家java程序设计有所帮助。

版权声明:本文内容由网络用户投稿,版权归原作者所有,本站不拥有其著作权,亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容,请联系我们jiasou666@gmail.com 处理,核实后本网站将在24小时内删除侵权内容。

上一篇:Java实现的简单字符串反转操作示例
下一篇:虚拟机linux中jdk安装配置方法
相关文章

 发表评论

暂时没有评论,来抢沙发吧~