Вправа: Переписування с Result
Нижче реалізовано дуже простий синтаксичний аналізатор для мови виразів. Однак, він обробляє помилки панічно. Перепишіть його так, щоб він використовував ідіоматичну обробку помилок і поширював помилки на повернення з main
. Сміливо використовуйте thiserror
і anyhow
.
Підказка: почніть з виправлення обробки помилок у функції
parse
. Після того, як вона буде працювати коректно, оновітьTokenizer
для реалізаціїIterator<Item=Result<Token, TokenizerError>>
і обробіть це у парсері.
use std::iter::Peekable; use std::str::Chars; /// Арифметичний оператор. #[derive(Debug, PartialEq, Clone, Copy)] enum Op { Add, Sub, } /// Токен у мові виразів. #[derive(Debug, PartialEq)] enum Token { Number(String), Identifier(String), Operator(Op), } /// Вираз у мові виразів. #[derive(Debug, PartialEq)] enum Expression { /// Посилання на змінну. Var(String), /// Буквальне число. Number(u32), /// Бінарна операція. Operation(Box<Expression>, Op, Box<Expression>), } fn tokenize(input: &str) -> Tokenizer { return Tokenizer(input.chars().peekable()); } struct Tokenizer<'a>(Peekable<Chars<'a>>); impl<'a> Tokenizer<'a> { fn collect_number(&mut self, first_char: char) -> Token { let mut num = String::from(first_char); while let Some(&c @ '0'..='9') = self.0.peek() { num.push(c); self.0.next(); } Token::Number(num) } fn collect_identifier(&mut self, first_char: char) -> Token { let mut ident = String::from(first_char); while let Some(&c @ ('a'..='z' | '_' | '0'..='9')) = self.0.peek() { ident.push(c); self.0.next(); } Token::Identifier(ident) } } impl<'a> Iterator for Tokenizer<'a> { type Item = Token; fn next(&mut self) -> Option<Token> { let c = self.0.next()?; match c { '0'..='9' => Some(self.collect_number(c)), 'a'..='z' => Some(self.collect_identifier(c)), '+' => Some(Token::Operator(Op::Add)), '-' => Some(Token::Operator(Op::Sub)), _ => panic!("Неочікуваний символ {c}"), } } } fn parse(input: &str) -> Expression { let mut tokens = tokenize(input); fn parse_expr<'a>(tokens: &mut Tokenizer<'a>) -> Expression { let Some(tok) = tokens.next() else { panic!("Неочікуваний кінець вводу"); }; let expr = match tok { Token::Number(num) => { let v = num.parse().expect("Неправильне 32-бітне ціле число"); Expression::Number(v) } Token::Identifier(ident) => Expression::Var(ident), Token::Operator(_) => panic!("Неочікуваний токен {tok:?}"), }; // Заглянути наперед, щоб розібрати бінарну операцію, якщо вона присутня. match tokens.next() { None => expr, Some(Token::Operator(op)) => Expression::Operation( Box::new(expr), op, Box::new(parse_expr(tokens)), ), Some(tok) => panic!("Неочікуваний токен {tok:?}"), } } parse_expr(&mut tokens) } fn main() { let expr = parse("10+foo+20-30"); println!("{expr:?}"); }