半角空白で区切られた単語を単語ごとに分割して配列に格納する方法。(再帰版)

output.log

This
is
a
pen

split.cpp

#include<vector>
#include<string>

using namespace std;
void split(std::vector<string>& v, string s,const string::value_type code)
{
	auto pos = s.find(code);
	if (pos == string::npos) {
		// last word
		if (!s.empty()) {
			v.push_back(s);
		}
		return;
	}

	string ns(s.begin(), s.begin() + pos);
	v.push_back(ns);

	if (s.begin() + pos + 1 == s.end())
		return;

	string next(s.begin() + pos + 1, s.end());

	split(v, next, code);
}

#include<iostream>
int _tmain(int argc, _TCHAR* argv[])
{
	vector<string> v;
	string statement = "This is a pen";
	split(v, statement, ' ');

	for (auto s : v) {
		std::cout << s << std::endl;
	}
	
	return 0;
}

英文を抽出する場合は、
英単語、数字、',' (comma)、'.' (period) をそれぞれ識別する必要がある。