解析Txt文件的过程

解析Txt文件的过程

项目需要解析用逗号(,)分隔的文本文件,然后将其中的数据转换成xml文件进行导入到财务系统中....

考虑到以后可能文件格式会变化,因此使用了动态的创建方法,即通过格式文件来动态解析txt文件..本程序使用了apache的Digester来动态生成格式文件,使用CGLib动态生成目标类.步骤如下:

1、定义文件和字段的元数据格式,如果出现其他的文件格式只需要实现元数据接口即可..接口代码:

java 代码

public

interface
FileMeta {

public
String getName();

public

List<fieldmeta></fieldmeta> getFieldMeta();

}

public

interface
FieldMeta {

public
String getName();

public
String getType();

public

int
getLength();

public

int
getScale();

public
String getComment();

public

boolean
isAllowNull();

}

通过两个接口描述文件的属性已经字段格式..

本例使用的是逗号分隔,如果出现其他分隔符怎么办?为此,定义了一个分隔符接口:LineSpliter

java 代码

public

interface
LineSpliter {

public
String
getSpliterRegx();

public
String[]
split(String lineData);

}

getSpliterRegx()同于返回当前的分隔符,split()用户处理各行文本数据.

此处缺省实现了此接口,用于逗号分隔DefaultLineSpliter,定义如下:

java 代码

public

class
DefaultLineSpliter
implements
{

public
String
defaultSpliterRegx =
","
;

public
String
getSpliterRegx() {

return
defaultSpliterRegx ;

}

public
String[] split(String
lineData) {

return

StringUtils.splitPreserveAllTokens(lineData,defaultSpliterRegx );

}

}

这里使用apache的Lang包进行处理,没有使用JDK的String的split方法,因为jdk的实现会将末尾空的字段过滤掉,造成数据减少...

比如:如果行数据为aaa,bbb,,,,,
通过jdk的实现会返回aaa和bbb,而通过Lang包处理会返回包括后面空的字段.

2、接下来使用DigesterDigester包根据xml规则生成对象..

首先需要了解digester包的使用方法,这里简单的说一下:disgeter可以根据一定的规则将xml文件解析成一组对象...具体这里,我先定义

一个规则文件,

xml 代码

<
digester-rules
>

<
pattern

value
=
'XXXFileMeta'
>

<
object-create-rule

classname
=
"com.xxx.file.DefaultFileMeta"
/>

<
set-properties-rule
/>

<
pattern

value
=
"field"
>

<
object-create-rule

classname
=
"com.xxx.file.DefaultFieldMeta"
/>

<
set-properties-rule
/>

<
bean-property-setter-rule

pattern
=
"beanname1"
/>

<
bean-property-setter-rule

pattern
=
"beanname2"
/>

<
bean-property-setter-rule

pattern
=
"beanname3"
/>

<
bean-property-setter-rule

pattern
=
"beanname4"
/>

pattern
>

digester-rules
>

这就是一个简单的规则定义,具体含义这里不详细讲了,想了解的可以给我回帖...

接着定义缺省的文件元数据文件,格式如下:

xml 代码

<
DefaultFileMeta

name
=
"com.xxx.file.DefaultFileMeta"
>

<
field
>

<
beanname1
>
Code
beanname1
>

<
beanname2
>
Name
beanname2
>

<
beanname3
>
Date
beanname3
>

<
beanname4
>
Remake
beanname4
>

field
>

DefaultFileMeta
>

最后实例化digester对象,加载规则文件,解析文件元数据文件,则会动态生成根据元数据文件解析的格式定义.

代码如下:GeneratorObject.createObject(){}

初始化CGLib

java 代码

@SuppressWarnings
(
"unchecked"
)

private

void
init(Class target, FileMeta fileMeta) {

List<fieldmeta></fieldmeta> fields =
fileMeta.getFieldMeta();

String[] getters = new

String[fields.size()];

String[] setters = new

String[fields.size()];

Class[] types = new

Class[fields.size()];

try
{

for
(
int
i=
0
; i
< fields.size(); i++) {

FieldMeta fieldMeta = fields.get(i);

getters[i] = "get"
+
ConverterUtils.upperCaseFirstChar(fieldMeta.getName());

setters[i] = "set"
+
ConverterUtils.upperCaseFirstChar(fieldMeta.getName());

types[i] = Class.forName(fieldMeta.getType());

}

} catch
(ClassNotFoundException e) {

logger.error("类没有找到.."
+
e.getMessage());

}

this
.bulkBean =
BulkBean.create(target, getters, setters, types);

}

根据指定的目标类动态生成对象

java 代码

@SuppressWarnings
(
"unchecked"
)

private
Object
createObject(Class target, FileMeta fileMeta, Object[] values) {

Object targetObject = null
;

try
{

targetObject = target.newInstance();

} catch
(Exception e){

logger.error("创建对象出错,目标类-->"
+ target.getName(), e);

}

bulkBean.setPropertyValues(targetObject, values);

return
targetObject;

}

解析文本文件

java 代码

@SuppressWarnings
(
"unchecked"
)

public
List createObjects()
{

//初始化BulkBean

init(targetClass, fileMeta);

List result = new

ArrayList();

LineIterator iterator = null
;

try
{

iterator = FileUtils.lineIterator(this
.dataFile, DEF_ENCODING);

while
(iterator.hasNext()) {

String line = iterator.nextLine();

//过滤掉数据文件中的空行

if

(StringUtils.isBlank(line)) {

continue
;

}

Object[] values = this
.parseLine(line, fileMeta);

Object object = createObject(this
.targetClass, fileMeta, values);

result.add(object);

}

} catch
(IOException e) {

logger.error("读取文件名出错!-->"

+
this
.dataFile.getName(), e);

} finally
{

LineIterator.closeQuietly(iterator);

}

return
result;

}

最终返回解析好的文本文件对象列表..

本例综合使用了apache的代码包,灵活实现了文本文件的解析...