#include "libavutil/arm/asm.S"
#include "neon.S"
function ff_hevc_sao_band_filter_neon_8, export=1
push {r4-r10}
ldr r5, [sp, #28]
ldr r4, [sp, #32]
ldr r8, [sp, #36]
vpush {d8-d15}
mov r12, r4
mov r6, r0
mov r7, r1
vldm r8, {q0-q3}
vmov.u16 q15, #1
vmov.u8 q14, #32
0: pld [r1]
cmp r5, #4
beq 4f
8: subs r4, #1
vld1.8 {d16}, [r1], r3
vshr.u8 d17, d16, #3
vshll.u8 q9, d17, #1
vadd.u16 q11, q9, q15
vshl.u16 q10, q11, #8
vadd.u16 q10, q9
vtbx.8 d24, {q0-q1}, d20
vtbx.8 d25, {q0-q1}, d21
vsub.u8 q10, q14
vtbx.8 d24, {q2-q3}, d20
vtbx.8 d25, {q2-q3}, d21
vaddw.u8 q13, q12, d16
vqmovun.s16 d8, q13
vst1.8 d8, [r0], r2
bne 8b
subs r5, #8
beq 99f
mov r4, r12
add r6, #8
mov r0, r6
add r7, #8
mov r1, r7
b 0b
4: subs r4, #1
vld1.32 {d16[0]}, [r1], r3
vshr.u8 d17, d16, #3
vshll.u8 q9, d17, #1
vadd.u16 q11, q9, q15
vshl.u16 q10, q11, #8
vadd.u16 q10, q9
vtbx.8 d24, {q0-q1}, d20
vtbx.8 d25, {q0-q1}, d21
vsub.u8 q10, q14
vtbx.8 d24, {q2-q3}, d20
vtbx.8 d25, {q2-q3}, d21
vaddw.u8 q13, q12, d16
vqmovun.s16 d14, q13
vst1.32 d14[0], [r0], r2
bne 4b
b 99f
99:
vpop {d8-d15}
pop {r4-r10}
bx lr
endfunc
function ff_hevc_sao_edge_filter_neon_8, export=1
push {r4-r11}
ldr r5, [sp, #32]
ldr r4, [sp, #36]
ldr r8, [sp, #40]
ldr r9, [sp, #44]
ldr r10, [sp, #48]
ldr r11, [sp, #52]
vpush {d8-d15}
mov r12, r4
mov r6, r0
mov r7, r1
vld1.8 {d0}, [r11]
vld1.16 {q1}, [r10]
vmov.u8 d1, #2
vmov.u16 q2, #1
0: mov r10, r1
add r10, r8
mov r11, r1
add r11, r9
pld [r1]
cmp r5, #4
beq 4f
8: subs r4, #1
vld1.8 {d16}, [r1], r3
vld1.8 {d17}, [r10], r3
vld1.8 {d18}, [r11], r3
vcgt.u8 d8, d16, d17
vshr.u8 d9, d8, #7
vclt.u8 d8, d16, d17
vadd.u8 d8, d9
vcgt.u8 d10, d16, d18
vshr.u8 d11, d10, #7
vclt.u8 d10, d16, d18
vadd.u8 d10, d11
vadd.s8 d8, d10
vadd.s8 d8, d1
vtbx.8 d9, {d0}, d8
vshll.u8 q6, d9, #1
vadd.u16 q7, q6, q2
vshl.u16 q10, q7, #8
vadd.u16 q10, q6
vtbx.8 d22, {q1}, d20
vtbx.8 d23, {q1}, d21
vaddw.u8 q12, q11, d16
vqmovun.s16 d26, q12
vst1.8 d26, [r0], r2
bne 8b
subs r5, #8
beq 99f
mov r4, r12
add r6, #8
mov r0, r6
add r7, #8
mov r1, r7
b 0b
4: subs r4, #1
vld1.32 {d16[0]}, [r1], r3
vld1.32 {d17[0]}, [r10], r3
vld1.32 {d18[0]}, [r11], r3
vcgt.u8 d8, d16, d17
vshr.u8 d9, d8, #7
vclt.u8 d8, d16, d17
vadd.u8 d8, d9
vcgt.u8 d10, d16, d18
vshr.u8 d11, d10, #7
vclt.u8 d10, d16, d18
vadd.u8 d10, d11
vadd.s8 d8, d10
vadd.s8 d8, d1
vtbx.8 d9, {d0}, d8
vshll.u8 q6, d9, #1
vadd.u16 q7, q6, q2
vshl.u16 q10, q7, #8
vadd.u16 q10, q6
vtbx.8 d22, {q1}, d20
vtbx.8 d23, {q1}, d21
vaddw.u8 q12, q11, d16
vqmovun.s16 d26, q12
vst1.32 d26[0], [r0], r2
bne 4b
b 99f
99:
vpop {d8-d15}
pop {r4-r11}
bx lr
endfunc