如何使用 OpenFST python 扩展从 fst 模型中获取输入符号？答案

【问题标题】：How to get input symbols from a fst model using the OpenFST python extension?如何使用 OpenFST python 扩展从 fst 模型中获取输入符号？
【发布时间】：2016-03-08 14:04:22
【问题描述】：

OpenFST 提供了一个python extension。是否可以使用该 API 从已编译的 FST 模型中读取输入符号（isyms）？

我找不到合适的属性或方法来做到这一点：

>>> import fst
>>> f = fst.Fst('/home/jan/Downloads/en_us_nostress/model.fst')
>>> dir(f)
['__class__', '__delattr__', '__doc__', '__format__',
'__getattribute__', '__hash__', '__init__', '__new__', '__reduce__',
'__reduce_ex__', '__repr__', '__setattr__', '__sizeof__', '__str__',
'__subclasshook__', '_arc_type', '_check_mutating_imethod',
'_fst_type', '_weight_type', 'arcsort', 'closure', 'concat',
'connect', 'decode', 'encode', 'invert', 'minimize', 'project',
'properties', 'prune', 'push', 'relabel', 'reweight', 'rmepsilon',
'topsort', 'union', 'verify', 'write']
>>> dir(fst)
['ACCEPTOR','ACCESSIBLE', 'ACYCLIC', 'ADD_ARC_PROPERTIES',
'ADD_STATE_PROPERTIES', 'ADD_SUPERFINAL_PROPERTIES', 
'ARC_SORT_PROPERTIES', 'BINARY_PROPERTIES', 'COACCESSIBLE',
'COPY_PROPERTIES', 'CYCLIC', 'DELETE_ARC_PROPERTIES', 
'DELETE_STATE_PROPERTIES', 'EPSILONS', 'ERROR', 'EXPANDED', 
'EXTRINSIC_PROPERTIES', 'FST_PROPERTIES', 'Fst',
'FstError', 'FstWarning', 'INITIAL_ACYCLIC', 'INITIAL_CYCLIC',
'INTRINSIC_PROPERTIES', 'I_DETERMINISTIC', 'I_EPSILONS',
'I_LABEL_INVARIANT_PROPERTIES', 'I_LABEL_SORTED', 'MUTABLE',
'NEG_TRINARY_PROPERTIES', 'NON_I_DETERMINISTIC',
'NON_O_DETERMINISTIC', 'NOT_ACCEPTOR', 'NOT_ACCESSIBLE',
'NOT_COACCESSIBLE', 'NOT_I_LABEL_SORTED', 'NOT_O_LABEL_SORTED',
'NOT_STRING', 'NOT_TOP_SORTED', 'NO_EPSILONS', 'NO_I_EPSILONS',
'NO_O_EPSILSONS', 'NULL_PROPERTIES', 'O_DETERMINISTIC', 'O_EPSILONS',
'O_LABEL_INVARIANT_PROPERTIES', 'O_LABEL_SORTED',
'POS_TRINARY_PROPERTIES', 'RM_SUPERFINAL_PROPERTIES',
'SET_ARC_PROPERTIES', 'SET_FINAL_PROPERTIES', 'SET_START_PROPERTIES',
'STATE_SORT_PROPERTIES', 'STRING', 'TOP_SORTED',
'TRINARY_PROPERTIES', 'UNWEIGHTED', 'WEIGHTED',
'WEIGHT_INVARIANT_PROPERTIES', 'Weight', '_Fst', '_MutableFst',
'__builtins__', '__doc__', '__file__', '__name__', '__package__',
'__pyx_capi__', '__test__', '_fst_error_fatal_old',
'_get_compose_filter', '_get_queue_type', '_get_rand_arc_selection',
'_get_replace_label_type', 'arcmap', 'compose', 'convert',
'determinize', 'difference', 'disambiguate', 'epsnormalize',
'equal', 'equivalent', 'intersect', 'isomorphic', 'prune', 'push', 'randequivalent', 'randgen', 'replace', 'reverse', 'rmepsilon',
'shortestdistance', 'shortestpath', 'synchronize']

【问题讨论】：

标签： python symbols openfst fst

【解决方案1】：

在 OpenFST 1.7.6 中，可以提取输入和输出符号表作为 FSTPRINT 的一个选项。这是该命令的帮助选项的编辑版本。 FST 文件将打印到屏幕上，但您会在指定的文件中找到符号表。

更新：为避免冗长的屏幕打印，只需将 FSTPRINT 的输出发送到临时文件，例如“junk.txt”，您可以在保存符号表文件时删除该文件。请参阅代码部分末尾添加的示例。

fstprint --help
Prints out binary FSTs in simple text format.

  Usage: c:\OpenFST\fstprint.exe [binary.fst [text.fst]]

  Flags Description:
    .
    .
    .
    .
    --save_isymbols: type = string, default = ""
      Save input symbol table to file
    --save_osymbols: type = string, default = ""
      Save output symbol table to file
   .
   .
   .

在 Windows 10 中的 Powershell 命令提示符下的使用示例：

 fstprint --save_osymbols=HCLout.sym HCL.fst junk.txt

HCLout.sym 将是 HCL.fst 的输出符号表，而 junk.txt 将是简单文本格式的二进制 fst 的内容，您可以将其删除。

【讨论】：

【解决方案2】：

我怀疑您使用的是 OpenFST 1.5.0 版，其中该功能不可用。我相信这是在 1.5.1 版左右添加的。 http://www.openfst.org/twiki/bin/view/News/FstNews

我使用的是 1.5.3，并且能够使用 input_symbols 和 output_symbols 访问符号表。

>>> dir(fst._Fst)
    ['__class__', '__delattr__', '__doc__', '__format__',
    '__getattribute__', '__hash__', '__init__', '__new__',
    '__pyx_vtable__', '__reduce__', '__reduce_ex__', '__repr__',
    '__setattr__', '__sizeof__', '__str__', '__subclasshook__',
    '_repr_svg_', 'arc_type', 'arcs', 'copy', 'draw', 'final',
    'fst_type', 'input_symbols', 'num_arcs', 'num_input_epsilons',
    'num_output_epsilons', 'output_symbols', 'properties', 'start',
    'states', 'text', 'verify', 'weight_type', 'write']

在“FST 对象属性和属性”下http://www.openfst.org/twiki/bin/view/FST/PythonExtension 有更多信息

【讨论】：