david/flash-attention

espejo de https://github.com/Dao-AILab/flash-attention

Autor	SHA1 Mensaje	Fecha
Tri Dao	94657af3e8 Add option for not doing intra-WG overlapping of gemm and softmax	hace 1 mes
Tri Dao	fe412d6b36 Redo rotary when contiguous	hace 1 mes
Tri Dao	b2d3fe92ff Move rotary to a separate file	hace 1 mes
Tri Dao	4d00645c76 Implement appending new KV to KV cache	hace 1 mes
Tri Dao	d00b88ee05 Move PagedKV to a separate file	hace 1 mes