web-dev-qa-db-ja.com

文字列区切り文字を使用してC++で文字列を解析(分割)します(標準C++)。

私は次のようにC++で文字列を解析しています。

string parsed,input="text to be parsed";
stringstream input_stringstream(input);

if(getline(input_stringstream,parsed,' '))
{
     // do some processing.
}

単一のchar区切り文字で解析するのは問題ありません。しかし、文字列を区切り文字として使用したい場合はどうなりますか。

例:分割したい:

scott>=tiger

> =を区切り文字として使用して、scottとtigerを取得できるようにします。

250

std::string::find() 関数を使用して文字列区切り文字の位置を見つけ、次に std::string::substr() を使用してトークンを取得できます。

例:

std::string s = "scott>=tiger";
std::string delimiter = ">=";
std::string token = s.substr(0, s.find(delimiter)); // token is "scott"
  • find(const string& str, size_t pos = 0)関数は、文字列内で最初に出現したstrの位置を返します。文字列が見つからない場合は npos を返します。

  • substr(size_t pos = 0, size_t n = npos)関数は、位置posから長さnposまでのオブジェクトの部分文字列を返します。


複数の区切り文字がある場合は、1つのトークンを抽出した後でそれを削除して(区切り文字を含める)、その後の抽出を続行できます(元の文字列を保持する場合はs = s.substr(pos + delimiter.length());を使用します)

s.erase(0, s.find(delimiter) + delimiter.length());

これにより、各トークンを取得するために簡単にループできます。

完全な例

std::string s = "scott>=tiger>=mushroom";
std::string delimiter = ">=";

size_t pos = 0;
std::string token;
while ((pos = s.find(delimiter)) != std::string::npos) {
    token = s.substr(0, pos);
    std::cout << token << std::endl;
    s.erase(0, pos + delimiter.length());
}
std::cout << s << std::endl;

出力:

scott
tiger
mushroom
437
Vincenzo Pii

このメソッドは、前のサブストリングトークンの先頭と末尾を記憶することによって元のストリングを変更せずにstd::string::findを使用します。

#include <iostream>
#include <string>

int main()
{
    std::string s = "scott>=tiger";
    std::string delim = ">=";

    auto start = 0U;
    auto end = s.find(delim);
    while (end != std::string::npos)
    {
        std::cout << s.substr(start, end - start) << std::endl;
        start = end + delim.length();
        end = s.find(delim, start);
    }

    std::cout << s.substr(start, end);
}
43
moswald

次の関数を使って文字列を分割することができます。

vector<string> split(const string& str, const string& delim)
{
    vector<string> tokens;
    size_t prev = 0, pos = 0;
    do
    {
        pos = str.find(delim, prev);
        if (pos == string::npos) pos = str.length();
        string token = str.substr(prev, pos-prev);
        if (!token.empty()) tokens.Push_back(token);
        prev = pos + delim.length();
    }
    while (pos < str.length() && prev < str.length());
    return tokens;
}
28
Sviatoslav

strtok を使用すると、区切り文字として複数の文字を渡すことができます。あなたが "> ="を渡した場合、あなたの例の文字列は正しく分割されるでしょう(>と=が個々のデリミタとして数えられていても)。

c_str()を使用して文字列からchar *に変換したくない場合は、 substr および find_first_of を使用してトークン化できます。

string token, mystring("scott>=tiger");
while(token != mystring){
  token = mystring.substr(0,mystring.find_first_of(">="));
  mystring = mystring.substr(mystring.find_first_of(">=") + 1);
  printf("%s ",token.c_str());
}
13
ryanbwork

文字列区切り文字の場合

ストリング区切り文字 に基づいてストリングを分割します。文字列の区切り文字"adsf-+qwret-+nvfkbdsj-+orthdfjgh-+dfjrleih"に基づいて文字列"-+"を分割するなど、出力は{"adsf", "qwret", "nvfkbdsj", "orthdfjgh", "dfjrleih"}になります

#include <iostream>
#include <sstream>
#include <vector>

using namespace std;

// for string delimiter
vector<string> split (string s, string delimiter) {
    size_t pos_start = 0, pos_end, delim_len = delimiter.length();
    string token;
    vector<string> res;

    while ((pos_end = s.find (delimiter, pos_start)) != string::npos) {
        token = s.substr (pos_start, pos_end - pos_start);
        pos_start = pos_end + delim_len;
        res.Push_back (token);
    }

    res.Push_back (s.substr (pos_start));
    return res;
}

int main() {
    string str = "adsf-+qwret-+nvfkbdsj-+orthdfjgh-+dfjrleih";
    string delimiter = "-+";
    vector<string> v = split (str, delimiter);

    for (auto i : v) cout << i << endl;

    return 0;
}


出力

 adsf 
 qwret 
 nvfkbdsj 
 orthdfjgh 
 dfjrleih 




単一文字区切り文字の場合

文字区切り文字に基づいて文字列を分割します。文字列"adsf+qwer+poui+fdgh"を区切り文字"+"で分割すると、{"adsf", "qwer", "poui", "fdg"h}が出力されます。

#include <iostream>
#include <sstream>
#include <vector>

using namespace std;

vector<string> split (const string &s, char delim) {
    vector<string> result;
    stringstream ss (s);
    string item;

    while (getline (ss, item, delim)) {
        result.Push_back (item);
    }

    return result;
}

int main() {
    string str = "adsf+qwer+poui+fdgh";
    vector<string> v = split (str, '+');

    for (auto i : v) cout << i << endl;

    return 0;
}


出力

 adsf 
 qwer 
 poui 
 fdgh 
12
Arafat Hasan

このコードはテキストから行を分割し、全員をベクトルに追加します。

vector<string> split(char *phrase, string delimiter){
    vector<string> list;
    string s = string(phrase);
    size_t pos = 0;
    string token;
    while ((pos = s.find(delimiter)) != string::npos) {
        token = s.substr(0, pos);
        list.Push_back(token);
        s.erase(0, pos + delimiter.length());
    }
    list.Push_back(s);
    return list;
}

と呼ばれる:

vector<string> listFilesMax = split(buffer, "\n");
10
William Cuervo

私はboost::tokenizerを使うでしょう。適切なトークナイザー関数を作成する方法を説明する文書は次のとおりです。 http://www.boost.org/doc/libs/1_52_0/libs/tokenizer/tokenizerfunction.htm

これはあなたの場合に有効なものです。

struct my_tokenizer_func
{
    template<typename It>
    bool operator()(It& next, It end, std::string & tok)
    {
        if (next == end)
            return false;
        char const * del = ">=";
        auto pos = std::search(next, end, del, del + 2);
        tok.assign(next, pos);
        next = pos;
        if (next != end)
            std::advance(next, 2);
        return true;
    }

    void reset() {}
};

int main()
{
    std::string to_be_parsed = "1) one>=2) two>=3) three>=4) four";
    for (auto i : boost::tokenizer<my_tokenizer_func>(to_be_parsed))
        std::cout << i << '\n';
}
4

これが私の考えです。 Edgeケースを処理し、結果から空のエントリを削除するためのオプションのパラメータを取ります。

bool endsWith(const std::string& s, const std::string& suffix)
{
    return s.size() >= suffix.size() &&
           s.substr(s.size() - suffix.size()) == suffix;
}

std::vector<std::string> split(const std::string& s, const std::string& delimiter, const bool& removeEmptyEntries = false)
{
    std::vector<std::string> tokens;

    for (size_t start = 0, end; start < s.length(); start = end + delimiter.length())
    {
         size_t position = s.find(delimiter, start);
         end = position != string::npos ? position : s.length();

         std::string token = s.substr(start, end - start);
         if (!removeEmptyEntries || !token.empty())
         {
             tokens.Push_back(token);
         }
    }

    if (!removeEmptyEntries &&
        (s.empty() || endsWith(s, delimiter)))
    {
        tokens.Push_back("");
    }

    return tokens;
}

split("a-b-c", "-"); // [3]("a","b","c")

split("a--c", "-"); // [3]("a","","c")

split("-b-", "-"); // [3]("","b","")

split("--c--", "-"); // [5]("","","c","","")

split("--c--", "-", true); // [1]("c")

split("a", "-"); // [1]("a")

split("", "-"); // [1]("")

split("", "-", true); // [0]()
3

これは、区切り文字で文字列を分割し、切り刻まれた文字列のベクトルを返す完全なメソッドです。

これはryanbworkからの回答からの適応です。ただし、彼のチェック:if(token != mystring)は、文字列に繰り返し要素がある場合、間違った結果になります。これがその問題に対する私の解決策です。

vector<string> Split(string mystring, string delimiter)
{
    vector<string> subStringList;
    string token;
    while (true)
    {
        size_t findfirst = mystring.find_first_of(delimiter);
        if (findfirst == string::npos) //find_first_of returns npos if it couldn't find the delimiter anymore
        {
            subStringList.Push_back(mystring); //Push back the final piece of mystring
            return subStringList;
        }
        token = mystring.substr(0, mystring.find_first_of(delimiter));
        mystring = mystring.substr(mystring.find_first_of(delimiter) + 1);
        subStringList.Push_back(token);
    }
    return subStringList;
}
2
Amber Elferink

(Vincenzo Piiの答えのように)文字列を変更したくない場合は最後のトークンも出力したい場合は、次のようにします。

inline std::vector<std::string> splitString( const std::string &s, const std::string &delimiter ){
    std::vector<std::string> ret;
    size_t start = 0;
    size_t end = 0;
    size_t len = 0;
    std::string token;
    do{ end = s.find(delimiter,start); 
        len = end - start;
        token = s.substr(start, len);
        ret.emplace_back( token );
        start += len + delimiter.length();
        std::cout << token << std::endl;
    }while ( end != std::string::npos );
    return ret;
}
1
user2366975
#include<iostream>
#include<algorithm>
using namespace std;

int split_count(string str,char delimit){
return count(str.begin(),str.end(),delimit);
}

void split(string str,char delimit,string res[]){
int a=0,i=0;
while(a<str.size()){
res[i]=str.substr(a,str.find(delimit));
a+=res[i].size()+1;
i++;
}
}

int main(){

string a="abc.xyz.mno.def";
int x=split_count(a,'.')+1;
string res[x];
split(a,'.',res);

for(int i=0;i<x;i++)
cout<<res[i]<<endl;
  return 0;
}

P.S:分割後の文字列の長さが等しい場合にのみ機能します。

0
Sudhakar R

回答はすでに存在しますが、選択された回答は非常に高価な消去機能を使用します。非常に大きな文字列(MB単位)を考えてください。したがって、以下の機能を使用します。

vector<string> split(const string& i_str, const string& i_delim)
{
    vector<string> result;

    size_t found = i_str.find(i_delim);
    size_t startIndex = 0;

    while(found != string::npos)
    {
        string temp(i_str.begin()+startIndex, i_str.begin()+found);
        result.Push_back(temp);
        startIndex = found + i_delim.size();
        found = i_str.find(i_delim, startIndex);
    }
    if(startIndex != i_str.size())
        result.Push_back(string(i_str.begin()+startIndex, i_str.end()));
    return result;      
}
0
Shubham Agrawal