Update Changelog with new Xscale platforms and vmsvga.
[qemu] / target-i386 / exec.h
1 /*
2  *  i386 execution defines
3  *
4  *  Copyright (c) 2003 Fabrice Bellard
5  *
6  * This library is free software; you can redistribute it and/or
7  * modify it under the terms of the GNU Lesser General Public
8  * License as published by the Free Software Foundation; either
9  * version 2 of the License, or (at your option) any later version.
10  *
11  * This library is distributed in the hope that it will be useful,
12  * but WITHOUT ANY WARRANTY; without even the implied warranty of
13  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14  * Lesser General Public License for more details.
15  *
16  * You should have received a copy of the GNU Lesser General Public
17  * License along with this library; if not, write to the Free Software
18  * Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307  USA
19  */
20 #include "config.h"
21 #include "dyngen-exec.h"
22
23 /* XXX: factorize this mess */
24 #ifdef TARGET_X86_64
25 #define TARGET_LONG_BITS 64
26 #else
27 #define TARGET_LONG_BITS 32
28 #endif
29
30 #include "cpu-defs.h"
31
32 /* at least 4 register variables are defined */
33 register struct CPUX86State *env asm(AREG0);
34
35 #if TARGET_LONG_BITS > HOST_LONG_BITS
36
37 /* no registers can be used */
38 #define T0 (env->t0)
39 #define T1 (env->t1)
40 #define T2 (env->t2)
41
42 #else
43
44 /* XXX: use unsigned long instead of target_ulong - better code will
45    be generated for 64 bit CPUs */
46 register target_ulong T0 asm(AREG1);
47 register target_ulong T1 asm(AREG2);
48 register target_ulong T2 asm(AREG3);
49
50 /* if more registers are available, we define some registers too */
51 #ifdef AREG4
52 register target_ulong EAX asm(AREG4);
53 #define reg_EAX
54 #endif
55
56 #ifdef AREG5
57 register target_ulong ESP asm(AREG5);
58 #define reg_ESP
59 #endif
60
61 #ifdef AREG6
62 register target_ulong EBP asm(AREG6);
63 #define reg_EBP
64 #endif
65
66 #ifdef AREG7
67 register target_ulong ECX asm(AREG7);
68 #define reg_ECX
69 #endif
70
71 #ifdef AREG8
72 register target_ulong EDX asm(AREG8);
73 #define reg_EDX
74 #endif
75
76 #ifdef AREG9
77 register target_ulong EBX asm(AREG9);
78 #define reg_EBX
79 #endif
80
81 #ifdef AREG10
82 register target_ulong ESI asm(AREG10);
83 #define reg_ESI
84 #endif
85
86 #ifdef AREG11
87 register target_ulong EDI asm(AREG11);
88 #define reg_EDI
89 #endif
90
91 #endif /* ! (TARGET_LONG_BITS > HOST_LONG_BITS) */
92
93 #define A0 T2
94
95 extern FILE *logfile;
96 extern int loglevel;
97
98 #ifndef reg_EAX
99 #define EAX (env->regs[R_EAX])
100 #endif
101 #ifndef reg_ECX
102 #define ECX (env->regs[R_ECX])
103 #endif
104 #ifndef reg_EDX
105 #define EDX (env->regs[R_EDX])
106 #endif
107 #ifndef reg_EBX
108 #define EBX (env->regs[R_EBX])
109 #endif
110 #ifndef reg_ESP
111 #define ESP (env->regs[R_ESP])
112 #endif
113 #ifndef reg_EBP
114 #define EBP (env->regs[R_EBP])
115 #endif
116 #ifndef reg_ESI
117 #define ESI (env->regs[R_ESI])
118 #endif
119 #ifndef reg_EDI
120 #define EDI (env->regs[R_EDI])
121 #endif
122 #define EIP  (env->eip)
123 #define DF  (env->df)
124
125 #define CC_SRC (env->cc_src)
126 #define CC_DST (env->cc_dst)
127 #define CC_OP  (env->cc_op)
128
129 /* float macros */
130 #define FT0    (env->ft0)
131 #define ST0    (env->fpregs[env->fpstt].d)
132 #define ST(n)  (env->fpregs[(env->fpstt + (n)) & 7].d)
133 #define ST1    ST(1)
134
135 #ifdef USE_FP_CONVERT
136 #define FP_CONVERT  (env->fp_convert)
137 #endif
138
139 #include "cpu.h"
140 #include "exec-all.h"
141
142 typedef struct CCTable {
143     int (*compute_all)(void); /* return all the flags */
144     int (*compute_c)(void);  /* return the C flag */
145 } CCTable;
146
147 extern CCTable cc_table[];
148
149 void load_seg(int seg_reg, int selector);
150 void helper_ljmp_protected_T0_T1(int next_eip);
151 void helper_lcall_real_T0_T1(int shift, int next_eip);
152 void helper_lcall_protected_T0_T1(int shift, int next_eip);
153 void helper_iret_real(int shift);
154 void helper_iret_protected(int shift, int next_eip);
155 void helper_lret_protected(int shift, int addend);
156 void helper_lldt_T0(void);
157 void helper_ltr_T0(void);
158 void helper_movl_crN_T0(int reg);
159 void helper_movl_drN_T0(int reg);
160 void helper_invlpg(target_ulong addr);
161 void cpu_x86_update_cr0(CPUX86State *env, uint32_t new_cr0);
162 void cpu_x86_update_cr3(CPUX86State *env, target_ulong new_cr3);
163 void cpu_x86_update_cr4(CPUX86State *env, uint32_t new_cr4);
164 void cpu_x86_flush_tlb(CPUX86State *env, target_ulong addr);
165 int cpu_x86_handle_mmu_fault(CPUX86State *env, target_ulong addr,
166                              int is_write, int mmu_idx, int is_softmmu);
167 void tlb_fill(target_ulong addr, int is_write, int mmu_idx,
168               void *retaddr);
169 void __hidden cpu_lock(void);
170 void __hidden cpu_unlock(void);
171 void do_interrupt(int intno, int is_int, int error_code,
172                   target_ulong next_eip, int is_hw);
173 void do_interrupt_user(int intno, int is_int, int error_code,
174                        target_ulong next_eip);
175 void raise_interrupt(int intno, int is_int, int error_code,
176                      int next_eip_addend);
177 void raise_exception_err(int exception_index, int error_code);
178 void raise_exception(int exception_index);
179 void do_smm_enter(void);
180 void __hidden cpu_loop_exit(void);
181
182 void OPPROTO op_movl_eflags_T0(void);
183 void OPPROTO op_movl_T0_eflags(void);
184 void helper_divl_EAX_T0(void);
185 void helper_idivl_EAX_T0(void);
186 void helper_mulq_EAX_T0(void);
187 void helper_imulq_EAX_T0(void);
188 void helper_imulq_T0_T1(void);
189 void helper_divq_EAX_T0(void);
190 void helper_idivq_EAX_T0(void);
191 void helper_bswapq_T0(void);
192 void helper_cmpxchg8b(void);
193 void helper_single_step(void);
194 void helper_cpuid(void);
195 void helper_enter_level(int level, int data32);
196 void helper_enter64_level(int level, int data64);
197 void helper_sysenter(void);
198 void helper_sysexit(void);
199 void helper_syscall(int next_eip_addend);
200 void helper_sysret(int dflag);
201 void helper_rdtsc(void);
202 void helper_rdpmc(void);
203 void helper_rdmsr(void);
204 void helper_wrmsr(void);
205 void helper_lsl(void);
206 void helper_lar(void);
207 void helper_verr(void);
208 void helper_verw(void);
209 void helper_rsm(void);
210
211 void check_iob_T0(void);
212 void check_iow_T0(void);
213 void check_iol_T0(void);
214 void check_iob_DX(void);
215 void check_iow_DX(void);
216 void check_iol_DX(void);
217
218 #if !defined(CONFIG_USER_ONLY)
219
220 #include "softmmu_exec.h"
221
222 static inline double ldfq(target_ulong ptr)
223 {
224     union {
225         double d;
226         uint64_t i;
227     } u;
228     u.i = ldq(ptr);
229     return u.d;
230 }
231
232 static inline void stfq(target_ulong ptr, double v)
233 {
234     union {
235         double d;
236         uint64_t i;
237     } u;
238     u.d = v;
239     stq(ptr, u.i);
240 }
241
242 static inline float ldfl(target_ulong ptr)
243 {
244     union {
245         float f;
246         uint32_t i;
247     } u;
248     u.i = ldl(ptr);
249     return u.f;
250 }
251
252 static inline void stfl(target_ulong ptr, float v)
253 {
254     union {
255         float f;
256         uint32_t i;
257     } u;
258     u.f = v;
259     stl(ptr, u.i);
260 }
261
262 #endif /* !defined(CONFIG_USER_ONLY) */
263
264 #ifdef USE_X86LDOUBLE
265 /* use long double functions */
266 #define floatx_to_int32 floatx80_to_int32
267 #define floatx_to_int64 floatx80_to_int64
268 #define floatx_to_int32_round_to_zero floatx80_to_int32_round_to_zero
269 #define floatx_to_int64_round_to_zero floatx80_to_int64_round_to_zero
270 #define floatx_abs floatx80_abs
271 #define floatx_chs floatx80_chs
272 #define floatx_round_to_int floatx80_round_to_int
273 #define floatx_compare floatx80_compare
274 #define floatx_compare_quiet floatx80_compare_quiet
275 #define sin sinl
276 #define cos cosl
277 #define sqrt sqrtl
278 #define pow powl
279 #define log logl
280 #define tan tanl
281 #define atan2 atan2l
282 #define floor floorl
283 #define ceil ceill
284 #define ldexp ldexpl
285 #else
286 #define floatx_to_int32 float64_to_int32
287 #define floatx_to_int64 float64_to_int64
288 #define floatx_to_int32_round_to_zero float64_to_int32_round_to_zero
289 #define floatx_to_int64_round_to_zero float64_to_int64_round_to_zero
290 #define floatx_abs float64_abs
291 #define floatx_chs float64_chs
292 #define floatx_round_to_int float64_round_to_int
293 #define floatx_compare float64_compare
294 #define floatx_compare_quiet float64_compare_quiet
295 #endif
296
297 extern CPU86_LDouble sin(CPU86_LDouble x);
298 extern CPU86_LDouble cos(CPU86_LDouble x);
299 extern CPU86_LDouble sqrt(CPU86_LDouble x);
300 extern CPU86_LDouble pow(CPU86_LDouble, CPU86_LDouble);
301 extern CPU86_LDouble log(CPU86_LDouble x);
302 extern CPU86_LDouble tan(CPU86_LDouble x);
303 extern CPU86_LDouble atan2(CPU86_LDouble, CPU86_LDouble);
304 extern CPU86_LDouble floor(CPU86_LDouble x);
305 extern CPU86_LDouble ceil(CPU86_LDouble x);
306
307 #define RC_MASK         0xc00
308 #define RC_NEAR         0x000
309 #define RC_DOWN         0x400
310 #define RC_UP           0x800
311 #define RC_CHOP         0xc00
312
313 #define MAXTAN 9223372036854775808.0
314
315 #ifdef USE_X86LDOUBLE
316
317 /* only for x86 */
318 typedef union {
319     long double d;
320     struct {
321         unsigned long long lower;
322         unsigned short upper;
323     } l;
324 } CPU86_LDoubleU;
325
326 /* the following deal with x86 long double-precision numbers */
327 #define MAXEXPD 0x7fff
328 #define EXPBIAS 16383
329 #define EXPD(fp)        (fp.l.upper & 0x7fff)
330 #define SIGND(fp)       ((fp.l.upper) & 0x8000)
331 #define MANTD(fp)       (fp.l.lower)
332 #define BIASEXPONENT(fp) fp.l.upper = (fp.l.upper & ~(0x7fff)) | EXPBIAS
333
334 #else
335
336 /* NOTE: arm is horrible as double 32 bit words are stored in big endian ! */
337 typedef union {
338     double d;
339 #if !defined(WORDS_BIGENDIAN) && !defined(__arm__)
340     struct {
341         uint32_t lower;
342         int32_t upper;
343     } l;
344 #else
345     struct {
346         int32_t upper;
347         uint32_t lower;
348     } l;
349 #endif
350 #ifndef __arm__
351     int64_t ll;
352 #endif
353 } CPU86_LDoubleU;
354
355 /* the following deal with IEEE double-precision numbers */
356 #define MAXEXPD 0x7ff
357 #define EXPBIAS 1023
358 #define EXPD(fp)        (((fp.l.upper) >> 20) & 0x7FF)
359 #define SIGND(fp)       ((fp.l.upper) & 0x80000000)
360 #ifdef __arm__
361 #define MANTD(fp)       (fp.l.lower | ((uint64_t)(fp.l.upper & ((1 << 20) - 1)) << 32))
362 #else
363 #define MANTD(fp)       (fp.ll & ((1LL << 52) - 1))
364 #endif
365 #define BIASEXPONENT(fp) fp.l.upper = (fp.l.upper & ~(0x7ff << 20)) | (EXPBIAS << 20)
366 #endif
367
368 static inline void fpush(void)
369 {
370     env->fpstt = (env->fpstt - 1) & 7;
371     env->fptags[env->fpstt] = 0; /* validate stack entry */
372 }
373
374 static inline void fpop(void)
375 {
376     env->fptags[env->fpstt] = 1; /* invvalidate stack entry */
377     env->fpstt = (env->fpstt + 1) & 7;
378 }
379
380 #ifndef USE_X86LDOUBLE
381 static inline CPU86_LDouble helper_fldt(target_ulong ptr)
382 {
383     CPU86_LDoubleU temp;
384     int upper, e;
385     uint64_t ll;
386
387     /* mantissa */
388     upper = lduw(ptr + 8);
389     /* XXX: handle overflow ? */
390     e = (upper & 0x7fff) - 16383 + EXPBIAS; /* exponent */
391     e |= (upper >> 4) & 0x800; /* sign */
392     ll = (ldq(ptr) >> 11) & ((1LL << 52) - 1);
393 #ifdef __arm__
394     temp.l.upper = (e << 20) | (ll >> 32);
395     temp.l.lower = ll;
396 #else
397     temp.ll = ll | ((uint64_t)e << 52);
398 #endif
399     return temp.d;
400 }
401
402 static inline void helper_fstt(CPU86_LDouble f, target_ulong ptr)
403 {
404     CPU86_LDoubleU temp;
405     int e;
406
407     temp.d = f;
408     /* mantissa */
409     stq(ptr, (MANTD(temp) << 11) | (1LL << 63));
410     /* exponent + sign */
411     e = EXPD(temp) - EXPBIAS + 16383;
412     e |= SIGND(temp) >> 16;
413     stw(ptr + 8, e);
414 }
415 #else
416
417 /* XXX: same endianness assumed */
418
419 #ifdef CONFIG_USER_ONLY
420
421 static inline CPU86_LDouble helper_fldt(target_ulong ptr)
422 {
423     return *(CPU86_LDouble *)(unsigned long)ptr;
424 }
425
426 static inline void helper_fstt(CPU86_LDouble f, target_ulong ptr)
427 {
428     *(CPU86_LDouble *)(unsigned long)ptr = f;
429 }
430
431 #else
432
433 /* we use memory access macros */
434
435 static inline CPU86_LDouble helper_fldt(target_ulong ptr)
436 {
437     CPU86_LDoubleU temp;
438
439     temp.l.lower = ldq(ptr);
440     temp.l.upper = lduw(ptr + 8);
441     return temp.d;
442 }
443
444 static inline void helper_fstt(CPU86_LDouble f, target_ulong ptr)
445 {
446     CPU86_LDoubleU temp;
447
448     temp.d = f;
449     stq(ptr, temp.l.lower);
450     stw(ptr + 8, temp.l.upper);
451 }
452
453 #endif /* !CONFIG_USER_ONLY */
454
455 #endif /* USE_X86LDOUBLE */
456
457 #define FPUS_IE (1 << 0)
458 #define FPUS_DE (1 << 1)
459 #define FPUS_ZE (1 << 2)
460 #define FPUS_OE (1 << 3)
461 #define FPUS_UE (1 << 4)
462 #define FPUS_PE (1 << 5)
463 #define FPUS_SF (1 << 6)
464 #define FPUS_SE (1 << 7)
465 #define FPUS_B  (1 << 15)
466
467 #define FPUC_EM 0x3f
468
469 extern const CPU86_LDouble f15rk[7];
470
471 void helper_fldt_ST0_A0(void);
472 void helper_fstt_ST0_A0(void);
473 void fpu_raise_exception(void);
474 CPU86_LDouble helper_fdiv(CPU86_LDouble a, CPU86_LDouble b);
475 void helper_fbld_ST0_A0(void);
476 void helper_fbst_ST0_A0(void);
477 void helper_f2xm1(void);
478 void helper_fyl2x(void);
479 void helper_fptan(void);
480 void helper_fpatan(void);
481 void helper_fxtract(void);
482 void helper_fprem1(void);
483 void helper_fprem(void);
484 void helper_fyl2xp1(void);
485 void helper_fsqrt(void);
486 void helper_fsincos(void);
487 void helper_frndint(void);
488 void helper_fscale(void);
489 void helper_fsin(void);
490 void helper_fcos(void);
491 void helper_fxam_ST0(void);
492 void helper_fstenv(target_ulong ptr, int data32);
493 void helper_fldenv(target_ulong ptr, int data32);
494 void helper_fsave(target_ulong ptr, int data32);
495 void helper_frstor(target_ulong ptr, int data32);
496 void helper_fxsave(target_ulong ptr, int data64);
497 void helper_fxrstor(target_ulong ptr, int data64);
498 void restore_native_fp_state(CPUState *env);
499 void save_native_fp_state(CPUState *env);
500 float approx_rsqrt(float a);
501 float approx_rcp(float a);
502 void update_fp_status(void);
503 void helper_hlt(void);
504 void helper_monitor(void);
505 void helper_mwait(void);
506 void helper_vmrun(target_ulong addr);
507 void helper_vmmcall(void);
508 void helper_vmload(target_ulong addr);
509 void helper_vmsave(target_ulong addr);
510 void helper_stgi(void);
511 void helper_clgi(void);
512 void helper_skinit(void);
513 void helper_invlpga(void);
514 void vmexit(uint64_t exit_code, uint64_t exit_info_1);
515
516 extern const uint8_t parity_table[256];
517 extern const uint8_t rclw_table[32];
518 extern const uint8_t rclb_table[32];
519
520 static inline uint32_t compute_eflags(void)
521 {
522     return env->eflags | cc_table[CC_OP].compute_all() | (DF & DF_MASK);
523 }
524
525 /* NOTE: CC_OP must be modified manually to CC_OP_EFLAGS */
526 static inline void load_eflags(int eflags, int update_mask)
527 {
528     CC_SRC = eflags & (CC_O | CC_S | CC_Z | CC_A | CC_P | CC_C);
529     DF = 1 - (2 * ((eflags >> 10) & 1));
530     env->eflags = (env->eflags & ~update_mask) |
531         (eflags & update_mask);
532 }
533
534 static inline void env_to_regs(void)
535 {
536 #ifdef reg_EAX
537     EAX = env->regs[R_EAX];
538 #endif
539 #ifdef reg_ECX
540     ECX = env->regs[R_ECX];
541 #endif
542 #ifdef reg_EDX
543     EDX = env->regs[R_EDX];
544 #endif
545 #ifdef reg_EBX
546     EBX = env->regs[R_EBX];
547 #endif
548 #ifdef reg_ESP
549     ESP = env->regs[R_ESP];
550 #endif
551 #ifdef reg_EBP
552     EBP = env->regs[R_EBP];
553 #endif
554 #ifdef reg_ESI
555     ESI = env->regs[R_ESI];
556 #endif
557 #ifdef reg_EDI
558     EDI = env->regs[R_EDI];
559 #endif
560 }
561
562 static inline void regs_to_env(void)
563 {
564 #ifdef reg_EAX
565     env->regs[R_EAX] = EAX;
566 #endif
567 #ifdef reg_ECX
568     env->regs[R_ECX] = ECX;
569 #endif
570 #ifdef reg_EDX
571     env->regs[R_EDX] = EDX;
572 #endif
573 #ifdef reg_EBX
574     env->regs[R_EBX] = EBX;
575 #endif
576 #ifdef reg_ESP
577     env->regs[R_ESP] = ESP;
578 #endif
579 #ifdef reg_EBP
580     env->regs[R_EBP] = EBP;
581 #endif
582 #ifdef reg_ESI
583     env->regs[R_ESI] = ESI;
584 #endif
585 #ifdef reg_EDI
586     env->regs[R_EDI] = EDI;
587 #endif
588 }
589
590 static inline int cpu_halted(CPUState *env) {
591     /* handle exit of HALTED state */
592     if (!(env->hflags & HF_HALTED_MASK))
593         return 0;
594     /* disable halt condition */
595     if ((env->interrupt_request & CPU_INTERRUPT_HARD) &&
596         (env->eflags & IF_MASK)) {
597         env->hflags &= ~HF_HALTED_MASK;
598         return 0;
599     }
600     return EXCP_HALTED;
601 }
602