]> oss.titaniummirror.com Git - msp430-gcc.git/blobdiff - gmp/mpn/x86/k7/mode1o.asm
Imported gcc-4.4.3
[msp430-gcc.git] / gmp / mpn / x86 / k7 / mode1o.asm
diff --git a/gmp/mpn/x86/k7/mode1o.asm b/gmp/mpn/x86/k7/mode1o.asm
new file mode 100644 (file)
index 0000000..ef85804
--- /dev/null
@@ -0,0 +1,169 @@
+dnl  AMD K7 mpn_modexact_1_odd -- exact division style remainder.
+
+dnl  Copyright 2000, 2001, 2002, 2004, 2007 Free Software Foundation, Inc.
+dnl
+dnl  This file is part of the GNU MP Library.
+dnl
+dnl  The GNU MP Library is free software; you can redistribute it and/or
+dnl  modify it under the terms of the GNU Lesser General Public License as
+dnl  published by the Free Software Foundation; either version 3 of the
+dnl  License, or (at your option) any later version.
+dnl
+dnl  The GNU MP Library is distributed in the hope that it will be useful,
+dnl  but WITHOUT ANY WARRANTY; without even the implied warranty of
+dnl  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
+dnl  Lesser General Public License for more details.
+dnl
+dnl  You should have received a copy of the GNU Lesser General Public License
+dnl  along with the GNU MP Library.  If not, see http://www.gnu.org/licenses/.
+
+include(`../config.m4')
+
+
+C          cycles/limb
+C Athlon:     11.0
+C Hammer:      7.0
+
+
+C mp_limb_t mpn_modexact_1_odd (mp_srcptr src, mp_size_t size,
+C                               mp_limb_t divisor);
+C mp_limb_t mpn_modexact_1c_odd (mp_srcptr src, mp_size_t size,
+C                                mp_limb_t divisor, mp_limb_t carry);
+C
+C With the loop running at just 11 cycles it doesn't seem worth bothering to
+C check for high<divisor to save one step.
+C
+C Using a divl for size==1 measures slower than the modexact method, which
+C is not too surprising since for the latter it's only about 24 cycles to
+C calculate the modular inverse.
+
+defframe(PARAM_CARRY,  16)
+defframe(PARAM_DIVISOR,12)
+defframe(PARAM_SIZE,   8)
+defframe(PARAM_SRC,    4)
+
+defframe(SAVE_EBX,     -4)
+defframe(SAVE_ESI,     -8)
+defframe(SAVE_EDI,    -12)
+defframe(SAVE_EBP,    -16)
+
+deflit(STACK_SPACE, 16)
+
+       TEXT
+
+       ALIGN(16)
+PROLOGUE(mpn_modexact_1c_odd)
+deflit(`FRAME',0)
+
+       movl    PARAM_CARRY, %ecx
+       jmp     L(start_1c)
+
+EPILOGUE()
+
+
+       ALIGN(16)
+PROLOGUE(mpn_modexact_1_odd)
+deflit(`FRAME',0)
+
+       xorl    %ecx, %ecx
+L(start_1c):
+       movl    PARAM_DIVISOR, %eax
+       subl    $STACK_SPACE, %esp      FRAME_subl_esp(STACK_SPACE)
+
+       movl    %esi, SAVE_ESI
+       movl    PARAM_DIVISOR, %esi
+
+       movl    %edi, SAVE_EDI
+
+       shrl    %eax                    C d/2
+
+       andl    $127, %eax
+
+ifdef(`PIC',`
+       LEA(    binvert_limb_table, %edi)
+       movzbl  (%eax,%edi), %edi               C inv 8 bits
+',`
+       movzbl  binvert_limb_table(%eax), %edi  C inv 8 bits
+')
+
+       xorl    %edx, %edx              C initial extra carry
+       leal    (%edi,%edi), %eax       C 2*inv
+
+       imull   %edi, %edi              C inv*inv
+
+       movl    %ebp, SAVE_EBP
+       movl    PARAM_SIZE, %ebp
+
+       movl    %ebx, SAVE_EBX
+       movl    PARAM_SRC, %ebx
+
+       imull   %esi, %edi              C inv*inv*d
+
+       subl    %edi, %eax              C inv = 2*inv - inv*inv*d
+       leal    (%eax,%eax), %edi       C 2*inv
+
+       imull   %eax, %eax              C inv*inv
+
+       imull   %esi, %eax              C inv*inv*d
+
+       leal    (%ebx,%ebp,4), %ebx     C src end
+       negl    %ebp                    C -size
+
+       subl    %eax, %edi              C inv = 2*inv - inv*inv*d
+
+       ASSERT(e,`      C d*inv == 1 mod 2^BITS_PER_MP_LIMB
+       movl    %esi, %eax
+       imull   %edi, %eax
+       cmpl    $1, %eax')
+
+
+C The dependent chain here is
+C
+C                            cycles
+C      subl    %edx, %eax      1
+C      imull   %edi, %eax      4
+C      mull    %esi            6  (high limb)
+C                            ----
+C       total                 11
+C
+C Out of order execution hides the load latency for the source data, so no
+C special scheduling is required.
+
+L(top):
+       C eax   src limb
+       C ebx   src end ptr
+       C ecx   next carry bit, 0 or 1 (or initial carry param)
+       C edx   carry limb, high of last product
+       C esi   divisor
+       C edi   inverse
+       C ebp   counter, limbs, negative
+
+       movl    (%ebx,%ebp,4), %eax
+
+       subl    %ecx, %eax              C apply carry bit
+       movl    $0, %ecx
+
+       setc    %cl                     C new carry bit
+
+       subl    %edx, %eax              C apply carry limb
+       adcl    $0, %ecx
+
+       imull   %edi, %eax
+
+       mull    %esi
+
+       incl    %ebp
+       jnz     L(top)
+
+
+       movl    SAVE_ESI, %esi
+       movl    SAVE_EDI, %edi
+       leal    (%ecx,%edx), %eax
+
+       movl    SAVE_EBX, %ebx
+       movl    SAVE_EBP, %ebp
+       addl    $STACK_SPACE, %esp
+
+       ret
+
+EPILOGUE()