文档章节

Java读取文件 利用MappedByteBuffer进行缓冲

不正经啊不正经
 不正经啊不正经
发布于 2015/02/28 10:25
字数 264
阅读 1788
收藏 5
点赞 0
评论 0

Java读取文件 利用MappedByteBuffer进行缓冲,这样可以保证边读取大文件,边进行处理


package sean;

import java.io.ByteArrayInputStream;
import java.io.File;
import java.io.RandomAccessFile;
import java.nio.MappedByteBuffer;
import java.nio.channels.FileChannel;
import java.util.Scanner;

public class Snippet {
	public void readResource() {
		long fileLength = 0;
		final int BUFFER_SIZE = 0x300000;// 3M的缓冲

		//for (String fileDirectory : this.readResourceDirectory())// 得到文件存放路径,我这里使用了一个方法从XML文件中读出文件的
		// 存放路径,当然也可以用绝对路径来代替这里的fileDriectory
		//{
			File file = new File("D:\\MyData.txt");
			fileLength = file.length();
			try {
				MappedByteBuffer inputBuffer = new RandomAccessFile(file, "r")
						.getChannel().map(FileChannel.MapMode.READ_ONLY, 0,
								fileLength);// 读取大文件

				byte[] dst = new byte[BUFFER_SIZE];// 每次读出3M的内容

				for (int offset = 0; offset < fileLength; offset += BUFFER_SIZE) {
					if (fileLength - offset >= BUFFER_SIZE) {
						for (int i = 0; i < BUFFER_SIZE; i++)
							dst[i] = inputBuffer.get(offset + i);
					} else {
						for (int i = 0; i < fileLength - offset; i++)
							dst[i] = inputBuffer.get(offset + i);
					}
					// 将得到的3M内容给Scanner,这里的XXX是指Scanner解析的分隔符
					Scanner scan = new Scanner(new ByteArrayInputStream(dst))
							.useDelimiter(" ");
					while (scan.hasNext()) {
						// 这里为对读取文本解析的方法
						System.out.print(scan.next() + " ");
					}
					scan.close();
				}
			} catch (Exception e) {
				e.printStackTrace();
			}
		//}
	}
	public static void main(String[] args)
	{
		Snippet sp = new Snippet();
		sp.readResource();
	}
}



本文转载自:http://blog.csdn.net/ozwarld/article/details/8064211

共有 人打赏支持
不正经啊不正经
粉丝 54
博文 175
码字总数 133499
作品 0
宁波
Java NIO基础知识整理(一)

NIO特性 1、为原始类提供缓存支持; 2、字符集编码解码解决方案; 3、Channel :一个新的原始 I/O 抽象; 4、支持锁和内存映射文件的文件访问接口; 5、提供多路非阻塞式(non-bloking)的高...

阿_涵___
2011/12/12
0
0
hibernate 和JDBC的比较(转)

刚开始学习JAVA时,认为Hibernate是一个很神圣的东西,好像是会了SSH,就能走遍全世界一样。记得曾经在枫叶面试的时候,我们几个同学出还说这个公司怎么这么的落后,还有JDBC,没有一点上进心...

qq22734179
2014/04/26
0
0
关于 Java IO(一):装饰模式

Java 的 IO 系统采用了装饰器设计模式。其 IO 分为面向字节和面向字符两种,面向字节以字节为输入输出单位,面向字符以字符为输入输出单位。此外,在每部分中,又分为输入和输出两部分,相互...

Happioo
04/09
0
0
Java RandomAccessFile用法

RandomAccessFile RandomAccessFile是用来访问那些保存数据记录的文件的,你就可以用seek( )方法来访问记录,并进行读写了。这些记录的大小不必相同;但是其大小和位置必须是可知的。但是该类...

candies
2014/03/03
0
0
JAVA NIO之浅谈内存映射文件原理与DirectMemory

JAVA类库中的NIO包相对于IO 包来说有一个新功能是内存映射文件,日常编程中并不是经常用到,但是在处理大文件时是比较理想的提高效率的手段。本文我主要想结合操作系统中(OS)相关方面的知识...

pczhangtl
2013/11/19
0
0
Java NIO 系列教程 -- delete

(一) Java NIO 概述 Java NIO 由以下几个核心部分组成: Channels Buffers Selectors 虽然Java NIO 中除此之外还有很多类和组件,但在我看来,Channel,Buffer 和 Selector 构成了核心的A...

数据之美
2013/06/09
0
4
深入理解 Java中的 流 (Stream)

最近在看《Hadoop:The Definitive Guide》,对其分布式文件系统HDFS的Streaming data access不能理解。基于流的数据读写,太抽象了,什么叫基于流,什么是流?Hadoop是Java语言写的,所以想理...

SeanCai
2012/12/19
0
6
编程思想 之「Java I/O 系统」

温馨提示:本系列博文(含示例代码)已经同步到 GitHub,地址为「java-skills」,欢迎感兴趣的童鞋、,纠错。 对程序语言的设计者来说,创建一个好的输入/输出(I/O)系统是一项艰难的任务。...

qq_35246620
05/06
0
0
java编程学习:文件流操作!

Java是一种可以撰写跨平台应用软件的面向对象的程序设计语言。Java 技术具有卓越的通用性、高效性、平台移植性和安全性,广泛应用于PC、数据中心、游戏控制台、科学超级计算机、移动电话和互...

Java小辰
06/04
0
0
Java NIO系列教程(十二) Java NIO与IO

原文地址:http://tutorials.jenkov.com/java-nio/nio-vs-io.html 作者:Jakob Jenkov 当学习了Java NIO和IO的API后,一个问题马上涌入脑海: 我应该何时使用IO,何时使用NIO呢?在本文中,我...

_夏天的风_
2013/07/11
0
0

没有更多内容

加载失败,请刷新页面

加载更多

下一页

20位活跃在Github上的国内技术大牛 leij 何小鹏 亚信

本文列举了20位在Github上非常活跃的国内大牛,看看其中是不是很多熟悉的面孔? 1. lifesinger(玉伯) Github主页: https://github.com/lifesinger 微博:@ 玉伯也叫射雕 玉伯(王保平),...

海博1600
9分钟前
0
0
高性能服务器本质论

一 服务器分类 从软件性能角度,高性能服务器分:cpu密集型服务器/IO密集型服务器 (1)CPU密集型:该类服务器没有对io的访问/没有同步点,性能瓶颈在于对cpu的充分利用。 典型的如转发服务器/...

码代码的小司机
11分钟前
0
0
Mybatis收集配置

一、Mybatis取Clob数据 1、Mapper.xml配置 <resultMap type="com.test.User" id="user"> <result column="id" property="id"/> <result column="json_data" property="jsonData" ......

星痕2018
36分钟前
0
0
centos7设置以多用户模式启动

1、旧版本linux系统修改inittab文件,在新版本执行vi /etc/inittab 会有以下提示 # inittab is no longer used when using systemd. # # ADDING CONFIGURATION HERE WILL HAVE NO EFFECT ON......

haha360
今天
0
0
OSChina 周日乱弹 —— 局长:怕你不爱我

Osc乱弹歌单(2018)请戳(这里) 【今日歌曲】 @ andonny :分享周二珂的单曲《孤独她呀》 《孤独她呀》- 周二珂 手机党少年们想听歌,请使劲儿戳(这里) @孤星闵月 :没事干,看一遍红楼梦...

小小编辑
今天
181
9
Java架构师知识体认识

源码分析 常用设计模式 Proxy代理模式 Factory工厂模式 Singleton单例模式 Delegate委派模式 Strategy策略模式 Prototype原型模式 Template模板模式 Spring5 beans 接口实例化 代理Bean操作 ...

小致dad
今天
0
0
SpringBoot | 第十章:Swagger2的集成和使用

前言 前一章节介绍了mybatisPlus的集成和简单使用,本章节开始接着上一章节的用户表,进行Swagger2的集成。现在都奉行前后端分离开发和微服务大行其道,分微服务及前后端分离后,前后端开发的...

oKong
今天
11
0
Python 最小二乘法 拟合 二次曲线

Python 二次拟合 随机生成数据,并且加上噪声干扰 构造需要拟合的函数形式,使用最小二乘法进行拟合 输出拟合后的参数 将拟合后的函数与原始数据绘图后进行对比 import numpy as npimport...

阿豪boy
今天
17
0
云拿 无人便利店

附近(上海市-航南路)开了家无人便利店.特意进去体验了一下.下面把自己看到的跟大家分享下. 经得现场工作人员同意后拍了几张照片.从外面看是这样.店门口的指导里强调:不要一次扫码多个人进入....

周翔
昨天
1
0
Java设计模式学习之工厂模式

在Java(或者叫做面向对象语言)的世界中,工厂模式被广泛应用于项目中,也许你并没有听说过,不过也许你已经在使用了。 简单来说,工厂模式的出现源于增加程序序的可扩展性,降低耦合度。之...

路小磊
昨天
251
1

没有更多内容

加载失败,请刷新页面

加载更多

下一页

返回顶部
顶部