 Ning
|
31f2419086
Fix unity.cpp ctx management (#177)
|
hai 1 ano |
 Guillaume Wenzek
|
a768cdf55f
Unity inc (#159)
|
hai 1 ano |
|
Guillaume Wenzek
|
d5b035f230
fix PositionalEmbedding with cache
|
hai 1 ano |
|
Guillaume Wenzek
|
8c074387a9
s2tt generate the sample if needed
|
hai 1 ano |
|
Guillaume Wenzek
|
ac4a2eada9
job.num_threads
|
hai 1 ano |
|
Guillaume Wenzek
|
f6d810543d
fix incremental decoding !
|
hai 1 ano |
|
Guillaume Wenzek
|
522b97234e
WIP: simple failing test case
|
hai 1 ano |
|
Guillaume Wenzek
|
2c543185e2
add kv_cache to fairseq2_model
|
hai 1 ano |
|
Guillaume Wenzek
|
44a4ca129a
read model config from "layer_config"
|
hai 1 ano |
|
Guillaume Wenzek
|
eb7810b81f
force little-endian
|
hai 1 ano |
|
Guillaume Wenzek
|
c31926c1a8
working out new way of saving hparams
|
hai 1 ano |
|
Ning
|
1589c529bf
unity.cpp speech_encoder_frontend+speech_encoder+adaptor (#81)
|
hai 1 ano |
|
Guillaume Wenzek
|
e38442d1f0
rename mask to attn_mask in MultiheadAttention_forward
|
hai 1 ano |
|
Guillaume Wenzek
|
6fbb465f2b
generate_sequence return full results
|
hai 1 ano |
|
Guillaume Wenzek
|
1756897d23
simplify _finalize_hypothesis
|
hai 1 ano |
|
Guillaume Wenzek
|
f49763de86
fix beam size and scores
|
hai 1 ano |
|
Guillaume Wenzek
|
c28db8c8ac
wip beam-size=2
|
hai 1 ano |
|
Guillaume Wenzek
|
b24dbe3030
batching -> TransformerEmbeddingFrontend_forward
|
hai 1 ano |
|
Guillaume Wenzek
|
86993cbd00
fix StandardTransformerEncoder
|
hai 1 ano |
|
Guillaume Wenzek
|
28ed039370
fix MultiheadAttention_forward
|
hai 1 ano |
|
Guillaume Wenzek
|
81cdf80eb9
WIP: MultiheadAttention_forward
|
hai 1 ano |
|
Guillaume Wenzek
|
eb80195345
use ggml_diag_mask_inf
|
hai 1 ano |
|
Guillaume Wenzek
|
88b0690a72
split tests files
|
hai 1 ano |
|
Guillaume Wenzek
|
bfbafd9603
fix generation with beam_size=1
|
hai 1 ano |
|
Guillaume Wenzek
|
45f986055a
add naive tweaking of lprobs
|
hai 1 ano |
|
Guillaume Wenzek
|
7c9b2a1b95
pass correct prefix sequence in test
|
hai 1 ano |
|
Guillaume Wenzek
|
c7b89f32f4
disable flash attn because of cross attention
|
hai 1 ano |
|
Guillaume Wenzek
|
dcb9535666
wip: generate_sequence
|
hai 1 ano |
|
Guillaume Wenzek
|
78e7c9a311
fix TransformerEmbeddingFrontend
|
hai 1 ano |
|
Guillaume Wenzek
|
2238cea072
SinusoidalPositionEncoder + WIP: TransformerEmbeddingFrontend
|
hai 1 ano |
