文档章节

URL读取网页-简单就好

M
 Miracle_lucy
发布于 2014/06/10 08:34
字数 177
阅读 21
收藏 0
内容提示: 呢。交给Apache吧。 Apahce:commons-io-2.4.jar 只要一句:IOUtils.toString(new URL(url));,简单方便。 public static void main(String[] args) throws MalformedURLException, IOException { String url = "http://www.baidu.com"; //配制代理 Properties prop = System.getProperties(); prop.put("http.proxyHost", "172...


有的时候可能需要用URL访问一个Http网页,但是又不想写一大堆代码,怎么办呢。交给Apache吧。 

Apahce:commons-io-2.4.jar 

只要一句:IOUtils.toString(new URL(url));,简单方便。 

1
2
3
4
5
6
7
8
9
10
11
12
publicstaticvoidmain(String[] args)throwsMalformedURLException, IOException {
        String url =" http://www.baidu.com";
 
               //配制代理
        Properties prop = System.getProperties();
        prop.put("http.proxyHost","172.16.1.35");
        prop.put("http.proxyPort","80");
 
 
        String html=IOUtils.toString(newURL(url));
        System.out.println(html);
    }

原标题:URL读取网页-简单就好

本文地址:http://www.rrzhai.com/p/25500(转载请注明出处)

本文转载自:http://www.rrzhai.com/p/25500

共有 人打赏支持
M
粉丝 0
博文 5
码字总数 0
作品 0
桂林
Python爬虫入门?看完之后怕是要直接上路了

刚开始卖个关子,首先大概了解下所需要的一丢丢理论框架。 基本的爬虫工作原理 基本的http抓取工具,scrapy Bloom Filter: Bloom Filters by Example 如果需要大规模网页抓取,你需要学习分布...

诸葛玥
2017/12/28
0
0
Python网页静态爬虫

本文基于慕课网的视频教程,抓取百度百科中1000条词条页面信息。 编程环境:Python3.5 抓取网页信息包括以下几个部分:url管理器,下载器,解析器,输出器: (1) 读取要爬取的网页URL,可命...

Flying_sfeng
2017/03/13
0
0
JAVA Websocket实现扫码二维码登录---GoEasy

最近在做一个扫码登录功能,为此我还在网上搜了一下关于微信的扫描登录的实现方式。当这个功能完成了后,我决定将整个实现思路整理出来,方便自己以后查看也方便其他有类似需求的程序猿些。 ...

miaomiaogong1
2016/12/05
52
0
客户端扫码登录功能的实现思路

最近在做一个扫码登录功能,为此我还在网上搜了一下关于微信的扫描登录的实现方式。当这个功能完成了后,我决定将整个实现思路整理出来,方便自己以后查看也方便其他有类似需求的程序猿些。 ...

Xiqincai
2016/10/14
49
0
C# websocket 实现扫码二维码登录----GoEasy

要实现扫码登陆我们需要解决两个问题: 在没有输入用户名及密码的情况下,如何解决权限安全问题?换句话讲,如何让服务器知道扫码二维码的客户端是一个合法的用户? 2. 服务器根据用户在客户端...

miaomiaogong1
2016/11/30
40
0

没有更多内容

加载失败,请刷新页面

加载更多

中文地址

火力全開
16分钟前
0
0
71:循环之for、while、break、continue、exit

1、for循环语法: for 变量名 in 条件;do......;done 1:案例1:求1加到100的和: [root@localhost_02 for]# vim for1.sh #!/bin/bashsum=0for i in `seq 1 100`do sum=$[$sum...

芬野de博客
19分钟前
0
0
Log4j2 Analysis

Log4j2 improvement compare with Log4j : AsyncLogger : Implemented by LMAX Disruptor technology (a lock-free inter-thread communication library, instead of queues, resulting in h......

Yixin_Nemo
29分钟前
0
0
玩转js之——new方法的模拟实现

已知new的作用 1.实例可以访问到构造函数的属性和方法 2.实例可以访问到构造函数原型中的属性和方法 //demo:function Person(name, age) { this.name = name this.age = age}Person...

lsner
29分钟前
0
0
SQL--索引使用(1)

以下是优化真实环境sql。 一、原始sql查询时长如下 二、EXPLAIN分析如下,说明 关于explain的讲解详见我另一篇文章 三、结合sql语句分析出 3.1 可以单独给business_id加索引,会优化一部分效...

求是科技
31分钟前
0
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部