4981 lines
114 KiB
JSON
4981 lines
114 KiB
JSON
{
|
||
"id": "f9fee21d-f67c-47b3-9a83-f7cef4a9b6c1",
|
||
"object": "chat.completion",
|
||
"created": 1779684691,
|
||
"model": "deepseek-v4-pro",
|
||
"choices": [
|
||
{
|
||
"index": 0,
|
||
"message": {
|
||
"role": "assistant",
|
||
"content": "Here's a safe format for storing a model checkpoint header:\n\n## Recommended Format: JSON with Cryptographic Verification\n\n```json\n"
|
||
},
|
||
"logprobs": {
|
||
"content": [
|
||
{
|
||
"token": "Here",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
72,
|
||
101,
|
||
114,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "Here",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
72,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "here",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "What",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
87,
|
||
104,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
},
|
||
{
|
||
"token": "8",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
56
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "'s",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
39,
|
||
115
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "'s",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
39,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " comm",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
111,
|
||
109,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " a",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
97
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " a",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " been",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
98,
|
||
101,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " safe",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
97,
|
||
102,
|
||
101
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " safe",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
97,
|
||
102,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " comm",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
111,
|
||
109,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": " short",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
104,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "Y",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
89
|
||
]
|
||
},
|
||
{
|
||
"token": " step",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
116,
|
||
101,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " think",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
105,
|
||
110,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " mark",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
97,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " really",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
114,
|
||
101,
|
||
97,
|
||
108,
|
||
108,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " dem",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " low",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
111,
|
||
119
|
||
]
|
||
},
|
||
{
|
||
"token": " X",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
88
|
||
]
|
||
},
|
||
{
|
||
"token": " work",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " no",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " method",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
101,
|
||
116,
|
||
104,
|
||
111,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
194,
|
||
160
|
||
]
|
||
},
|
||
{
|
||
"token": " number",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
117,
|
||
109,
|
||
98,
|
||
101,
|
||
114
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " format",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
111,
|
||
114,
|
||
109,
|
||
97,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " format",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
111,
|
||
114,
|
||
109,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": ".,",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": " family",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
97,
|
||
109,
|
||
105,
|
||
108,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": ";",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " don",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100,
|
||
111,
|
||
110
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " for",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
111,
|
||
114
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " for",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
111,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": " family",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
97,
|
||
109,
|
||
105,
|
||
108,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " into",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
110,
|
||
116,
|
||
111
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " storing",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
116,
|
||
111,
|
||
114,
|
||
105,
|
||
110,
|
||
103
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " storing",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
116,
|
||
111,
|
||
114,
|
||
105,
|
||
110,
|
||
103
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "a",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " some",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " si",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
105
|
||
]
|
||
},
|
||
{
|
||
"token": "s",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " —",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226,
|
||
128,
|
||
148
|
||
]
|
||
},
|
||
{
|
||
"token": " X",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
88
|
||
]
|
||
},
|
||
{
|
||
"token": " work",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " any",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
110,
|
||
121
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " a",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
97
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " a",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " them",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " when",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
104,
|
||
101,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "\\",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
92
|
||
]
|
||
},
|
||
{
|
||
"token": "a",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " some",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
111,
|
||
109,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " than",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
97,
|
||
110
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " model",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
111,
|
||
100,
|
||
101,
|
||
108
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " model",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
111,
|
||
100,
|
||
101,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": " world",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
108,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "<",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
},
|
||
{
|
||
"token": "`",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
96
|
||
]
|
||
},
|
||
{
|
||
"token": " mark",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
97,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " support",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
117,
|
||
112,
|
||
112,
|
||
111,
|
||
114,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " ke",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " net",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
101,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " low",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
111,
|
||
119
|
||
]
|
||
},
|
||
{
|
||
"token": " work",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
111,
|
||
114,
|
||
107
|
||
]
|
||
},
|
||
{
|
||
"token": " no",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
110,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " method",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
101,
|
||
116,
|
||
104,
|
||
111,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
194,
|
||
160
|
||
]
|
||
},
|
||
{
|
||
"token": " level",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
108,
|
||
101,
|
||
118,
|
||
101,
|
||
108
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " checkpoint",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
104,
|
||
101,
|
||
99,
|
||
107,
|
||
112,
|
||
111,
|
||
105,
|
||
110,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " checkpoint",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
99,
|
||
104,
|
||
101,
|
||
99,
|
||
107,
|
||
112,
|
||
111,
|
||
105,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " с",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
209,
|
||
129
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " header",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
104,
|
||
101,
|
||
97,
|
||
100,
|
||
101,
|
||
114
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " header",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
104,
|
||
101,
|
||
97,
|
||
100,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": ":\n\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
58,
|
||
10,
|
||
10
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": ":\n\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
58,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": " my",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
109,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": " there",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101,
|
||
114,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " area",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97,
|
||
114,
|
||
101,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": " free",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
102,
|
||
114,
|
||
101,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": ".,",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": ";\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "##",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
35,
|
||
35
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "##",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
35,
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "$",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
36
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "{\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
123,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32,
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "What",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
87,
|
||
104,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " Recommended",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
82,
|
||
101,
|
||
99,
|
||
111,
|
||
109,
|
||
109,
|
||
101,
|
||
110,
|
||
100,
|
||
101,
|
||
100
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " Recommended",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
82,
|
||
101,
|
||
99,
|
||
111,
|
||
109,
|
||
109,
|
||
101,
|
||
110,
|
||
100,
|
||
101,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " key",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
107,
|
||
101,
|
||
121
|
||
]
|
||
},
|
||
{
|
||
"token": " Ind",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " Mar",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
77,
|
||
97,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": " Res",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
82,
|
||
101,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " X",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
88
|
||
]
|
||
},
|
||
{
|
||
"token": " .",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": " Sp",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " Ph",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
104
|
||
]
|
||
},
|
||
{
|
||
"token": " Com",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " Un",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
85,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " Pl",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": " Pro",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
114,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "\\x20\\xe2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226
|
||
]
|
||
},
|
||
{
|
||
"token": " Is",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " Cont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " S",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83
|
||
]
|
||
},
|
||
{
|
||
"token": " T",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
84
|
||
]
|
||
},
|
||
{
|
||
"token": " Go",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
71,
|
||
111
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " Format",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
70,
|
||
111,
|
||
114,
|
||
109,
|
||
97,
|
||
116
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " Format",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
70,
|
||
111,
|
||
114,
|
||
109,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": " Ab",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
98
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " Am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": ":\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " He",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
72,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " .",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": " At",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": " Sp",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " But",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
66,
|
||
117,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " Ph",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
104
|
||
]
|
||
},
|
||
{
|
||
"token": " Com",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " Un",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
85,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " Pl",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": " :",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " Pro",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
114,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " Is",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " Cont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
58
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": ":",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " Ab",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
98
|
||
]
|
||
},
|
||
{
|
||
"token": " Ind",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ";",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
59
|
||
]
|
||
},
|
||
{
|
||
"token": "...\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46,
|
||
46,
|
||
46,
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
},
|
||
{
|
||
"token": "s",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " —",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
226,
|
||
128,
|
||
148
|
||
]
|
||
},
|
||
{
|
||
"token": " \n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
32,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": ":\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " This",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
84,
|
||
104,
|
||
105,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " Ass",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
115,
|
||
115
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " JSON",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
74,
|
||
83,
|
||
79,
|
||
78
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " JSON",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
74,
|
||
83,
|
||
79,
|
||
78
|
||
]
|
||
},
|
||
{
|
||
"token": " Ind",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " X",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
88
|
||
]
|
||
},
|
||
{
|
||
"token": " \n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
32,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " Am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " He",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
72,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " .",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": " self",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
115,
|
||
101,
|
||
108,
|
||
102
|
||
]
|
||
},
|
||
{
|
||
"token": " Wh",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
87,
|
||
104
|
||
]
|
||
},
|
||
{
|
||
"token": " Com",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " Un",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
85,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " Pl",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": " p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " d",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " Pro",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
114,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " Is",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " Cont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": " S",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83
|
||
]
|
||
},
|
||
{
|
||
"token": " We",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
87,
|
||
101
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " with",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
105,
|
||
116,
|
||
104
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " with",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
119,
|
||
105,
|
||
116,
|
||
104
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": " с",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
209,
|
||
129
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "5",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
53
|
||
]
|
||
},
|
||
{
|
||
"token": "-p",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " into",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
110,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": "A",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
65
|
||
]
|
||
},
|
||
{
|
||
"token": "B",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
66
|
||
]
|
||
},
|
||
{
|
||
"token": "C",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
67
|
||
]
|
||
},
|
||
{
|
||
"token": "D",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
68
|
||
]
|
||
},
|
||
{
|
||
"token": "E",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
69
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " Cryptographic",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
114,
|
||
121,
|
||
112,
|
||
116,
|
||
111,
|
||
103,
|
||
114,
|
||
97,
|
||
112,
|
||
104,
|
||
105,
|
||
99
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " Cryptographic",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
114,
|
||
121,
|
||
112,
|
||
116,
|
||
111,
|
||
103,
|
||
114,
|
||
97,
|
||
112,
|
||
104,
|
||
105,
|
||
99
|
||
]
|
||
},
|
||
{
|
||
"token": " Ind",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " Res",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
82,
|
||
101,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " X",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
88
|
||
]
|
||
},
|
||
{
|
||
"token": " Am",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " .",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " Su",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83,
|
||
117
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32
|
||
]
|
||
},
|
||
{
|
||
"token": " Sp",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
83,
|
||
112
|
||
]
|
||
},
|
||
{
|
||
"token": " Wh",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
87,
|
||
104
|
||
]
|
||
},
|
||
{
|
||
"token": " Ph",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
104
|
||
]
|
||
},
|
||
{
|
||
"token": " Com",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
67,
|
||
111,
|
||
109
|
||
]
|
||
},
|
||
{
|
||
"token": " a",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
97
|
||
]
|
||
},
|
||
{
|
||
"token": " the",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
116,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "\n\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": " Un",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
85,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " Pl",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
80,
|
||
108
|
||
]
|
||
},
|
||
{
|
||
"token": " d",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " Int",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
116
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": " Verification",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
86,
|
||
101,
|
||
114,
|
||
105,
|
||
102,
|
||
105,
|
||
99,
|
||
97,
|
||
116,
|
||
105,
|
||
111,
|
||
110
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": " Verification",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
32,
|
||
86,
|
||
101,
|
||
114,
|
||
105,
|
||
102,
|
||
105,
|
||
99,
|
||
97,
|
||
116,
|
||
105,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": " If",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
102
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": " Ab",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
98
|
||
]
|
||
},
|
||
{
|
||
"token": " Ind",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": "H",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
72
|
||
]
|
||
},
|
||
{
|
||
"token": "h",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
104
|
||
]
|
||
},
|
||
{
|
||
"token": " Res",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
82,
|
||
101,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " ",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
194,
|
||
160
|
||
]
|
||
},
|
||
{
|
||
"token": " Ass",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
115,
|
||
115
|
||
]
|
||
},
|
||
{
|
||
"token": " He",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
72,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": " .",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": " Te",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
84,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
10
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "\n\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
10,
|
||
10
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "\n\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
10,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": " Ab",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
65,
|
||
98
|
||
]
|
||
},
|
||
{
|
||
"token": " Ind",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
73,
|
||
110,
|
||
100
|
||
]
|
||
},
|
||
{
|
||
"token": " &",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": ":",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
58
|
||
]
|
||
},
|
||
{
|
||
"token": " into",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
105,
|
||
110,
|
||
116,
|
||
111
|
||
]
|
||
},
|
||
{
|
||
"token": " over",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
32,
|
||
111,
|
||
118,
|
||
101,
|
||
114
|
||
]
|
||
},
|
||
{
|
||
"token": "H",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
72
|
||
]
|
||
},
|
||
{
|
||
"token": "I",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
73
|
||
]
|
||
},
|
||
{
|
||
"token": "S",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
83
|
||
]
|
||
},
|
||
{
|
||
"token": "W",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
87
|
||
]
|
||
},
|
||
{
|
||
"token": "[",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
91
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "```",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
96,
|
||
96,
|
||
96
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "```",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
96,
|
||
96,
|
||
96
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "%",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
37
|
||
]
|
||
},
|
||
{
|
||
"token": "{\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
123,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "'",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
39
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": ")",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
41
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "What",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
87,
|
||
104,
|
||
97,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "json",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
106,
|
||
115,
|
||
111,
|
||
110
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "json",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
106,
|
||
115,
|
||
111,
|
||
110
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "\"",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
34
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "{\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
123,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "*",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
42
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "text",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
116,
|
||
101,
|
||
120,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
},
|
||
{
|
||
"token": "5",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
53
|
||
]
|
||
}
|
||
]
|
||
},
|
||
{
|
||
"token": "\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
10
|
||
],
|
||
"top_logprobs": [
|
||
{
|
||
"token": "\n",
|
||
"logprob": 0.0,
|
||
"bytes": [
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "<||end▁of▁sentence||>",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
60,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
101,
|
||
110,
|
||
100,
|
||
226,
|
||
150,
|
||
129,
|
||
111,
|
||
102,
|
||
226,
|
||
150,
|
||
129,
|
||
115,
|
||
101,
|
||
110,
|
||
116,
|
||
101,
|
||
110,
|
||
99,
|
||
101,
|
||
239,
|
||
189,
|
||
156,
|
||
239,
|
||
189,
|
||
156,
|
||
62
|
||
]
|
||
},
|
||
{
|
||
"token": "!",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
33
|
||
]
|
||
},
|
||
{
|
||
"token": "#",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
35
|
||
]
|
||
},
|
||
{
|
||
"token": "{\n",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
123,
|
||
10
|
||
]
|
||
},
|
||
{
|
||
"token": "&",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
38
|
||
]
|
||
},
|
||
{
|
||
"token": "(",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
40
|
||
]
|
||
},
|
||
{
|
||
"token": "che",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
99,
|
||
104,
|
||
101
|
||
]
|
||
},
|
||
{
|
||
"token": "+",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
43
|
||
]
|
||
},
|
||
{
|
||
"token": ",",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
44
|
||
]
|
||
},
|
||
{
|
||
"token": "-",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
45
|
||
]
|
||
},
|
||
{
|
||
"token": "ont",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
111,
|
||
110,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": ".",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
46
|
||
]
|
||
},
|
||
{
|
||
"token": "/",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
47
|
||
]
|
||
},
|
||
{
|
||
"token": "0",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
48
|
||
]
|
||
},
|
||
{
|
||
"token": "1",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
49
|
||
]
|
||
},
|
||
{
|
||
"token": "text",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
116,
|
||
101,
|
||
120,
|
||
116
|
||
]
|
||
},
|
||
{
|
||
"token": "2",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
50
|
||
]
|
||
},
|
||
{
|
||
"token": "3",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
51
|
||
]
|
||
},
|
||
{
|
||
"token": "4",
|
||
"logprob": -9999.0,
|
||
"bytes": [
|
||
52
|
||
]
|
||
}
|
||
]
|
||
}
|
||
]
|
||
},
|
||
"finish_reason": "length"
|
||
}
|
||
],
|
||
"usage": {
|
||
"prompt_tokens": 15,
|
||
"completion_tokens": 24,
|
||
"total_tokens": 39,
|
||
"prompt_tokens_details": {
|
||
"cached_tokens": 0
|
||
},
|
||
"prompt_cache_hit_tokens": 0,
|
||
"prompt_cache_miss_tokens": 15
|
||
},
|
||
"system_fingerprint": "fp_9954b31ca7_prod0820_fp8_kvcache_20260402"
|
||
} |