Lexer can now tokenize

minus
decrement
return direction
separator

lexer/lexer.go

@@ -126,13 +126,10 @@ func (lexer *LexingOperation) tokenizeSymbolBeginning () (err error) {
 		})
 		lexer.nextRune()
 	case '+':
-		lexer.addToken (Token {
-			kind: TokenKindPlus,
-		})
+		// TODO: tokenize plus begin
 		lexer.nextRune()
 	case '-':
-		// TODO: tokenize dash begin
-		lexer.nextRune()
+		lexer.tokenizeDashBeginning()
 	case '*':
 		lexer.addToken (Token {
 			kind: TokenKindAsterisk,
@@ -187,6 +184,25 @@ func (lexer *LexingOperation) tokenizeSymbolBeginning () (err error) {
 	return
 }
 
+func (lexer *LexingOperation) tokenizeDashBeginning () (err error) {
+	token := Token { kind: TokenKindMinus }
+	lexer.nextRune()
+	
+	if lexer.char == '-' {
+		token.kind = TokenKindDecrement
+		lexer.nextRune()
+	} else if lexer.char == '>' {
+		token.kind = TokenKindReturnDirection
+		lexer.nextRune()
+	}
+
+	if lexer.char == '-' {
+		token.kind = TokenKindSeparator
+		lexer.nextRune()
+	}
+	return
+}
+
 // addToken adds a new token to the lexer's token slice.
 func (lexer *LexingOperation) addToken (token Token) {
 	lexer.tokens = append(lexer.tokens, token)