پردازش متن با ماشین‌های حالت متناهی ۲۰۲۲
Finite-State Text Processing 2022

مبدل‌های حالت-متناهی وزن‌دار (WFSTها) ابزاری رایج در میان مهندسان و زبان‌شناسان محاسباتی برای پردازش و تولید گفتار و متن هستند. این کتاب ابتدا مقدمه‌ای مفصل بر این فرمالیسم ارائه می‌دهد. سپس به معرفی Pynini، یک کتابخانه پایتون برای تدوین گرامرهای حالت-متناهی و ترکیب، بهینه‌سازی، اعمال و جستجوی مبدل‌های حالت-متناهی می‌پردازد. این کتاب، قراردادها و کاربردهای این کتابخانه را با مجموعه‌ای از مطالعات موردی نشان می‌دهد. این موارد شامل تدوین و اعمال قوانین بازنویسی وابسته به متن، ساخت تحلیل‌گرها و تولیدکننده‌های مورفولوژیکی، و کاربردهای تولید و پردازش متن است.

Weighted finite-state transducers (WFSTs) are commonly used by engineers and computational linguists for processing and generating speech and text. This book first provides a detailed introduction to this formalism. It then introduces Pynini, a Python library for compiling finite-state grammars and for combining, optimizing, applying, and searching finite-state transducers. This book illustrates this library’s conventions and use with a series of case studies. These include the compilation and application of context-dependent rewrite rules, the construction of morphological analyzers and generators, and text generation and processing applications.