C＃ - 关键字的字符串

Question

将字符串转换为C＃中的单词列表的最有效方法是什么？

例如：

Hello... world 1, this is amazing3,really , amazing! *bla* 

应该变成串名单如下：

["Hello", "world", "1", "this", "is", "amazing3", "really", "amazing", "bla"] 

注意，它应该支持英语以外的其他语言。

我需要这个，因为我想收集特定文本中的关键字列表。

谢谢。

Answer 1

如何使用正则表达式？你可以使表达任意复杂，但我在这里应该适用于大多数输入。

new RegEx(@"\b(\w)+\b").Matches(text); 

Answer 2

您需要一个lexer。

Answer 3

char[] separators = new char[]{' ', ',', '!', '*', '.'}; // add more if needed 

string str = "Hello... world 1, this is amazing3,really , amazing! *bla*"; 
string[] words= str.Split(separators, StringSplitOptions.RemoveEmptyEntries);