public void ParseTokens()
{
IEnumerable<SyntaxToken> tokens = Syntax.ParseTokens("class C { // trivia");
IEnumerable<string> fullTexts = tokens.Select(token => token.ToFullString());
Assert.IsTrue(fullTexts.SequenceEqual(new[]
{
"class ",
"C ",
"{ // trivia",
"" // EOF
}));
}