Function create_if_not_exist

tools/utils.py:22–24

(path)

    truncated_text = tokenizer.decode(tokens)
    return truncated_text
def create_if_not_exist(path):
    if not os.path.exists(path):  # 如果目录不存在，递归创建该目录
        os.makedirs(path, exist_ok=True)

def dicts_almost_equal(dict1, dict2, tolerance=1e-6):
    # 比较字典时允许浮动误差