 Guillaume Wenzek
|
78e7c9a311
fix TransformerEmbeddingFrontend
|
hai 1 ano |
|
Guillaume Wenzek
|
2238cea072
SinusoidalPositionEncoder + WIP: TransformerEmbeddingFrontend
|
hai 1 ano |
|
Guillaume Wenzek
|
2fb09f34fb
generate fairseq2.cpp
|
hai 1 ano |
|
Guillaume Wenzek
|
f1f33dbec1
has_layer + transformer decoder
|
hai 1 ano |
|
Guillaume Wenzek
|
e1faba0c5d
text encoder
|
hai 1 ano |
|
Guillaume Wenzek
|
b81061704c
StandardTransformerEncoderLayer_forward
|
hai 1 ano |
|
Guillaume Wenzek
|
e7c3b7a4ba
allow flash attn
|
hai 1 ano |
|
Guillaume Wenzek
|
b07a08102a
MultiheadAttention_forward
|
hai 1 ano |
|
Guillaume Wenzek
|
be236b8584
remove size/init functions
|
hai 1 ano |
|
Guillaume Wenzek
|
fa85f05545
test flash_attn
|
hai 1 ano |
|
Guillaume Wenzek
|
06d4ed1475
ggml.ne != np.shape
|
hai 1 ano |
|
Guillaume Wenzek
|
c2e6384e29
nb
|
hai 1 ano |
|
Guillaume Wenzek
|
3f5912b973
forward
|
hai 1 ano |
|
Guillaume Wenzek
|
772f90dfdc
load_fairseq2_ggml_file
|
hai 1 ano |
|
Guillaume Wenzek
|
506dee42d8
move layers to fairseq2.cpp
|
hai 1 ano |
