| 1017 | // |
| 1018 | |
| 1019 | std::vector<llama_token> llama_tokenize( |
| 1020 | const struct llama_context * ctx, |
| 1021 | const std::string & text, |
| 1022 | bool add_bos, |
| 1023 | bool special) { |
| 1024 | return llama_tokenize(llama_get_model(ctx), text, add_bos, special); |
| 1025 | } |
| 1026 | |
| 1027 | std::vector<llama_token> llama_tokenize( |
| 1028 | const struct llama_model * model, |
no test coverage detected