[stl] string tokenizer

stringTokenizer.cpp

#include "stdafx.h"

#include "StringTokenizer.h"

stringTokenizer::stringTokenizer(const string& inputstring, const string& seperator): _input(inputstring), _delimiter(seperator){ split();}
size_t stringTokenizer::countTokens(){ return token.size();}
bool stringTokenizer::hasMoreTokens(){ return index!=token.end();}
string stringTokenizer::nextToken(){ if(index!= token.end()) return *(index++); else return "";}
void stringTokenizer::split(){ string::size_type lastPos = _input.find_first_not_of(_delimiter, 0); //구분자가 나타나지 않는 위치 string::size_type Pos = _input.find_first_of(_delimiter, lastPos); //구분자가 나타나는 위치
while(string::npos!=Pos || string::npos!=lastPos) { token.push_back(_input.substr(lastPos, Pos-lastPos)); lastPos = _input.find_first_not_of(_delimiter, Pos); //구분자가 나타나지 않는 위치 Pos = _input.find_first_of(_delimiter, lastPos); //구분자가 나타나는 위치 }
index = token.begin();}
stringTokenizer.h
#ifndef stringTokenize_h#define stringTokenize_h#pragma once
#include #include
using namespace std;
class stringTokenizer{public: stringTokenizer(const string& inputstring, const string& seperator); virtual ~stringTokenizer() {};
private: string _input; string _delimiter; vector token; vector::iterator index;
public: size_t countTokens(); //token 갯수 bool hasMoreTokens(); //token 존재 확인 string nextToken(); //다음 token void split(); //string을 seperator로 나눠서 vector에 저장};
#endif
example 파일내 문자열을 분리시켜 그 데이터를 메모리에 가지고 있도록 하기위한 예제코드

mapReader.h
#pragma once
#include #include using namespace std;
class mapReader{public: mapReader(const char* filepath); virtual ~mapReader(void);
public: void readFile(const char* filepath);
public: vector> mapData;};
mapReader.cpp
#include "StdAfx.h"#include "mapReader.h"#include "StringTokenizer.h"
#include
mapReader::mapReader(const char* filepath){ readFile(filepath);}
mapReader::~mapReader(void){}
#define MAX_STRING_LEN 1024void mapReader::readFile(const char* filepath){ ifstream file; char tmpstring[MAX_STRING_LEN]; vector data; file.open(filepath); if(file.is_open()) { while(file.getline(tmpstring, MAX_STRING_LEN)) { stringTokenizer *pstringTokenizer = new stringTokenizer(tmpstring, " \t\n"); memset(tmpstring, 0, sizeof(tmpstring)); data.clear();
while(pstringTokenizer->hasMoreTokens()) { data.push_back(pstringTokenizer->nextToken()); } if(data.size()!=0) mapData.push_back(data); delete pstringTokenizer; } }
return;}
sample.txt
1 안녕하세요.2 반갑습니다.3 안녕히가세요위 sample.txt파일을 파싱하여 그 정보를 mapData라는 곳에 저장하려면,mapReader *pReader = new mapReader("sample.txt");이런식으로 파일위치만 생성인자로 넘겨주면 그 정보를 mapReader의 클래스의 mapData가 파싱된 정보를 가지고 있는것이다