mono/mini/mini.h

   1 /*
   2  * Copyright 2002-2003 Ximian Inc
   3  * Copyright 2003-2011 Novell Inc
   4  * Copyright 2011 Xamarin Inc
   5  * Licensed under the MIT license. See LICENSE file in the project root for full license information.
   6  */
   7 #ifndef __MONO_MINI_H__
   8 #define __MONO_MINI_H__
   9
  10 #include "config.h"
  11 #include <glib.h>
  12 #ifdef HAVE_SIGNAL_H
  13 #include <signal.h>
  14 #endif
  15 #ifdef HAVE_SYS_TYPES_H
  16 #include <sys/types.h>
  17 #endif
  18 #include <mono/metadata/loader.h>
  19 #include <mono/metadata/mempool.h>
  20 #include <mono/utils/monobitset.h>
  21 #include <mono/metadata/class.h>
  22 #include <mono/metadata/object.h>
  23 #include <mono/metadata/opcodes.h>
  24 #include <mono/metadata/tabledefs.h>
  25 #include <mono/metadata/domain-internals.h>
  26 #include "mono/metadata/class-internals.h"
  27 #include "mono/metadata/object-internals.h"
  28 #include <mono/metadata/profiler-private.h>
  29 #include <mono/metadata/debug-helpers.h>
  30 #include <mono/utils/mono-compiler.h>
  31 #include <mono/utils/mono-machine.h>
  32 #include <mono/utils/mono-stack-unwinding.h>
  33 #include <mono/utils/mono-threads.h>
  34 #include <mono/utils/mono-tls.h>
  35 #include <mono/utils/atomic.h>
  36 #include <mono/utils/mono-conc-hashtable.h>
  37 #include <mono/utils/mono-signal-handler.h>
  38
  39 #include "mini-arch.h"
  40 #include "regalloc.h"
  41 #include "mini-unwind.h"
  42 #include "jit.h"
  43 #include "cfgdump.h"
  44
  45 #include "mono/metadata/class-internals.h"
  46 #include "mono/metadata/domain-internals.h"
  47 #include "mono/metadata/object.h"
  48 #include "mono/metadata/tabledefs.h"
  49 #include "mono/metadata/marshal.h"
  50 #include "mono/metadata/security-manager.h"
  51 #include "mono/metadata/exception.h"
  52 #include "mono/utils/mono-compiler.h"
  53
  54 #ifdef __native_client_codegen__
  55 #include <nacl/nacl_dyncode.h>
  56 #endif
  57
  58
  59 /*
  60  * The mini code should not have any compile time dependencies on the GC being used, so the same object file from mini/
  61  * can be linked into both mono and mono-sgen.
  62  */
  63 #if defined(HAVE_BOEHM_GC) || defined(HAVE_SGEN_GC)
  64 #error "The code in mini/ should not depend on these defines."
  65 #endif
  66
  67 #ifndef __GNUC__
  68 /*#define __alignof__(a) sizeof(a)*/
  69 #define __alignof__(type) G_STRUCT_OFFSET(struct { char c; type x; }, x)
  70 #endif
  71
  72 #if DISABLE_LOGGING
  73 #define MINI_DEBUG(level,limit,code)
  74 #else
  75 #define MINI_DEBUG(level,limit,code) do {if (G_UNLIKELY ((level) >= (limit))) code} while (0)
  76 #endif
  77
  78 #if !defined(DISABLE_TASKLETS) && defined(MONO_ARCH_SUPPORT_TASKLETS) && defined(__GNUC__)
  79 #define MONO_SUPPORT_TASKLETS 1
  80 #endif
  81
  82 #if ENABLE_LLVM
  83 #define COMPILE_LLVM(cfg) ((cfg)->compile_llvm)
  84 #define LLVM_ENABLED TRUE
  85 #else
  86 #define COMPILE_LLVM(cfg) (0)
  87 #define LLVM_ENABLED FALSE
  88 #endif
  89
  90 #ifdef MONO_ARCH_SOFT_FLOAT_FALLBACK
  91 #define COMPILE_SOFT_FLOAT(cfg) (!COMPILE_LLVM ((cfg)) && mono_arch_is_soft_float ())
  92 #else
  93 #define COMPILE_SOFT_FLOAT(cfg) (0)
  94 #endif
  95
  96 #define NOT_IMPLEMENTED do { g_assert_not_reached (); } while (0)
  97
  98 /* for 32 bit systems */
  99 #if G_BYTE_ORDER == G_LITTLE_ENDIAN
 100 #define MINI_LS_WORD_IDX 0
 101 #define MINI_MS_WORD_IDX 1
 102 #else
 103 #define MINI_LS_WORD_IDX 1
 104 #define MINI_MS_WORD_IDX 0
 105 #endif
 106 #define MINI_LS_WORD_OFFSET (MINI_LS_WORD_IDX * 4)
 107 #define MINI_MS_WORD_OFFSET (MINI_MS_WORD_IDX * 4)
 108 #define inst_ls_word data.op[MINI_LS_WORD_IDX].const_val
 109 #define inst_ms_word data.op[MINI_MS_WORD_IDX].const_val
 110
 111 #define MONO_LVREG_LS(lvreg)    ((lvreg) + 1)
 112 #define MONO_LVREG_MS(lvreg)    ((lvreg) + 2)
 113
 114 #ifndef DISABLE_AOT
 115 #define MONO_USE_AOT_COMPILER
 116 #endif
 117
 118 /* Version number of the AOT file format */
 119 #define MONO_AOT_FILE_VERSION 133
 120
 121 //TODO: This is x86/amd64 specific.
 122 #define mono_simd_shuffle_mask(a,b,c,d) ((a) | ((b) << 2) | ((c) << 4) | ((d) << 6))
 123
 124 /* Remap printf to g_print (we use a mix of these in the mini code) */
 125 #ifdef PLATFORM_ANDROID
 126 #define printf g_print
 127 #endif
 128
 129 #define MONO_TYPE_IS_PRIMITIVE(t) ((!(t)->byref && ((((t)->type >= MONO_TYPE_BOOLEAN && (t)->type <= MONO_TYPE_R8) || ((t)->type >= MONO_TYPE_I && (t)->type <= MONO_TYPE_U)))))
 130
 131 #define MONO_AOT_TRAMP_PAGE_SIZE 16384
 132
 133 /* Constants used to encode different types of methods in AOT */
 134 enum {
 135         MONO_AOT_METHODREF_MIN = 240,
 136         /* Image index bigger than METHODREF_MIN */
 137         MONO_AOT_METHODREF_LARGE_IMAGE_INDEX = 249,
 138         /* Runtime provided methods on arrays */
 139         MONO_AOT_METHODREF_ARRAY = 250,
 140         MONO_AOT_METHODREF_NO_AOT_TRAMPOLINE = 251,
 141         /* Wrappers */
 142         MONO_AOT_METHODREF_WRAPPER = 252,
 143         /* Methods on generic instances */
 144         MONO_AOT_METHODREF_GINST = 253,
 145         /* Methods resolve using a METHODSPEC token */
 146         MONO_AOT_METHODREF_METHODSPEC = 254,
 147 };
 148
 149 /* Constants used to encode different types of types in AOT */
 150 enum {
 151         /* typedef index */
 152         MONO_AOT_TYPEREF_TYPEDEF_INDEX = 1,
 153         /* typedef index + image index */
 154         MONO_AOT_TYPEREF_TYPEDEF_INDEX_IMAGE = 2,
 155         /* typespec token */
 156         MONO_AOT_TYPEREF_TYPESPEC_TOKEN = 3,
 157         /* generic inst */
 158         MONO_AOT_TYPEREF_GINST = 4,
 159         /* type/method variable */
 160         MONO_AOT_TYPEREF_VAR = 5,
 161         /* array */
 162         MONO_AOT_TYPEREF_ARRAY = 6,
 163         /* blob index of the type encoding */
 164         MONO_AOT_TYPEREF_BLOB_INDEX = 7,
 165         /* ptr */
 166         MONO_AOT_TYPEREF_PTR = 8
 167 };
 168
 169 /* Trampolines which we have a lot of */
 170 typedef enum {
 171         MONO_AOT_TRAMP_SPECIFIC = 0,
 172         MONO_AOT_TRAMP_STATIC_RGCTX = 1,
 173         MONO_AOT_TRAMP_IMT_THUNK = 2,
 174         MONO_AOT_TRAMP_GSHAREDVT_ARG = 3,
 175         MONO_AOT_TRAMP_NUM = 4
 176 } MonoAotTrampoline;
 177
 178 typedef enum {
 179         MONO_AOT_FILE_FLAG_WITH_LLVM = 1,
 180         MONO_AOT_FILE_FLAG_FULL_AOT = 2,
 181         MONO_AOT_FILE_FLAG_DEBUG = 4,
 182         MONO_AOT_FILE_FLAG_LLVM_THUMB = 8,
 183         MONO_AOT_FILE_FLAG_LLVM_ONLY = 16,
 184         MONO_AOT_FILE_FLAG_SAFEPOINTS = 32,
 185         MONO_AOT_FILE_FLAG_SEPARATE_DATA = 64,
 186 } MonoAotFileFlags;
 187
 188 typedef enum {
 189         MONO_AOT_TABLE_BLOB,
 190         MONO_AOT_TABLE_IMAGE_TABLE,
 191         MONO_AOT_TABLE_CLASS_NAME,
 192         MONO_AOT_TABLE_METHOD_INFO_OFFSETS,
 193         MONO_AOT_TABLE_EX_INFO_OFFSETS,
 194         MONO_AOT_TABLE_CLASS_INFO_OFFSETS,
 195         MONO_AOT_TABLE_GOT_INFO_OFFSETS,
 196         MONO_AOT_TABLE_LLVM_GOT_INFO_OFFSETS,
 197         MONO_AOT_TABLE_EXTRA_METHOD_INFO_OFFSETS,
 198         MONO_AOT_TABLE_EXTRA_METHOD_TABLE,
 199         MONO_AOT_TABLE_NUM
 200 } MonoAotFileTable;
 201
 202 /* This structure is stored in the AOT file */
 203 typedef struct MonoAotFileInfo
 204 {
 205         /* The version number of the AOT file format, should match MONO_AOT_FILE_VERSION */
 206         guint32 version;
 207         /* For alignment */
 208         guint32 dummy;
 209
 210         /* All the pointers should be at the start to avoid alignment problems */
 211         /* Symbols */
 212 #define MONO_AOT_FILE_INFO_FIRST_SYMBOL jit_got
 213         /* Global Offset Table for JITted code */
 214         gpointer jit_got;
 215         /* Global Offset Table for LLVM code */
 216         gpointer llvm_got;
 217         /* Mono EH Frame created by llc when using LLVM */
 218         gpointer mono_eh_frame;
 219         /* Points to the get_method () function in the LLVM image or NULL */
 220         gpointer llvm_get_method;
 221         /* Points to the get_unbox_tramp () function in the LLVM image or NULL */
 222         gpointer llvm_get_unbox_tramp;
 223         gpointer jit_code_start;
 224         gpointer jit_code_end;
 225         gpointer method_addresses;
 226         /* Data blob */
 227         gpointer blob;
 228         gpointer class_name_table;
 229         gpointer class_info_offsets;
 230         gpointer method_info_offsets;
 231         gpointer ex_info_offsets;
 232         gpointer extra_method_info_offsets;
 233         gpointer extra_method_table;
 234         gpointer got_info_offsets;
 235         gpointer llvm_got_info_offsets;
 236         gpointer image_table;
 237         gpointer mem_end;
 238         /* The GUID of the assembly which the AOT image was generated from */
 239         gpointer assembly_guid;
 240         /*
 241          * The runtime version string for AOT images generated using 'bind-to-runtime-version',
 242          * NULL otherwise.
 243          */
 244         gpointer runtime_version;
 245         /* Blocks of various kinds of trampolines */
 246         gpointer specific_trampolines;
 247         gpointer static_rgctx_trampolines;
 248         gpointer imt_thunks;
 249         gpointer gsharedvt_arg_trampolines;
 250         /* In static mode, points to a table of global symbols for trampolines etc */
 251         gpointer globals;
 252         /* Points to a string containing the assembly name*/
 253         gpointer assembly_name;
 254         /* Start of Mono's Program Linkage Table */
 255         gpointer plt;
 256         /* End of Mono's Program Linkage Table */
 257         gpointer plt_end;
 258         gpointer unwind_info;
 259         /* Points to a table mapping methods to their unbox trampolines */
 260         gpointer unbox_trampolines;
 261         /* Points to the end of the previous table */
 262         gpointer unbox_trampolines_end;
 263         /* Points to a table of unbox trampoline addresses/offsets */
 264         gpointer unbox_trampoline_addresses;
 265 #define MONO_AOT_FILE_INFO_LAST_SYMBOL unbox_trampoline_addresses
 266
 267         /* Scalars */
 268         /* The index of the first GOT slot used by the PLT */
 269         guint32 plt_got_offset_base;
 270         /* Number of entries in the GOT */
 271         guint32 got_size;
 272         /* Number of entries in the PLT */
 273         guint32 plt_size;
 274         /* Number of methods */
 275         guint32 nmethods;
 276         /* A union of MonoAotFileFlags */
 277         guint32 flags;
 278         /* Optimization flags used to compile the module */
 279         guint32 opts;
 280         /* SIMD flags used to compile the module */
 281         guint32 simd_opts;
 282         /* Index of the blob entry holding the GC used by this module */
 283         gint32 gc_name_index;
 284         guint32 num_rgctx_fetch_trampolines;
 285         /* These are used for sanity checking object layout problems when cross-compiling */
 286         guint32 double_align, long_align, generic_tramp_num;
 287         /* The page size used by trampoline pages */
 288         guint32 tramp_page_size;
 289         /*
 290          * The number of GOT entries which need to be preinitialized when the
 291          * module is loaded.
 292          */
 293         guint32 nshared_got_entries;
 294         /* The size of the data file, if MONO_AOT_FILE_FLAG_SEPARATE_DATA is set */
 295         guint32 datafile_size;
 296
 297         /* Arrays */
 298         /* Offsets for tables inside the data file if MONO_AOT_FILE_FLAG_SEPARATE_DATA is set */
 299         // FIXME: Sync with AOT
 300         guint32 table_offsets [MONO_AOT_TABLE_NUM];
 301         /* Number of trampolines */
 302         guint32 num_trampolines [MONO_AOT_TRAMP_NUM];
 303         /* The indexes of the first GOT slots used by the trampolines */
 304         guint32 trampoline_got_offset_base [MONO_AOT_TRAMP_NUM];
 305         /* The size of one trampoline */
 306         guint32 trampoline_size [MONO_AOT_TRAMP_NUM];
 307         /* The offset where the trampolines begin on a trampoline page */
 308         guint32 tramp_page_code_offsets [MONO_AOT_TRAMP_NUM];
 309 } MonoAotFileInfo;
 310
 311 /* Number of symbols in the MonoAotFileInfo structure */
 312 #define MONO_AOT_FILE_INFO_NUM_SYMBOLS (((G_STRUCT_OFFSET (MonoAotFileInfo, MONO_AOT_FILE_INFO_LAST_SYMBOL) - G_STRUCT_OFFSET (MonoAotFileInfo, MONO_AOT_FILE_INFO_FIRST_SYMBOL)) / sizeof (gpointer)) + 1)
 313
 314 typedef struct
 315 {
 316         MonoClass *klass;
 317         MonoMethod *method;
 318 } MonoClassMethodPair;
 319
 320 typedef struct
 321 {
 322         MonoClass *klass;
 323         MonoMethod *method;
 324         gboolean is_virtual;
 325 } MonoDelegateClassMethodPair;
 326
 327 /* Per-domain information maintained by the JIT */
 328 typedef struct
 329 {
 330         /* Maps MonoMethod's to a GSList of GOT slot addresses pointing to its code */
 331         GHashTable *jump_target_got_slot_hash;
 332         GHashTable *jump_target_hash;
 333         /* Maps methods/klasses to the address of the given type of trampoline */
 334         GHashTable *class_init_trampoline_hash;
 335         GHashTable *jump_trampoline_hash;
 336         GHashTable *jit_trampoline_hash;
 337         GHashTable *delegate_trampoline_hash;
 338         /* Maps ClassMethodPair -> MonoDelegateTrampInfo */
 339         GHashTable *static_rgctx_trampoline_hash;
 340         GHashTable *llvm_vcall_trampoline_hash;
 341         /* maps MonoMethod -> MonoJitDynamicMethodInfo */
 342         GHashTable *dynamic_code_hash;
 343         GHashTable *method_code_hash;
 344         /* Maps methods to a RuntimeInvokeInfo structure, protected by the associated MonoDomain lock */
 345         MonoConcurrentHashTable *runtime_invoke_hash;
 346         /* Maps MonoMethod to a GPtrArray containing sequence point locations */
 347         /* Protected by the domain lock */
 348         GHashTable *seq_points;
 349         /* Debugger agent data */
 350         gpointer agent_info;
 351         /* Maps MonoMethod to an arch-specific structure */
 352         GHashTable *arch_seq_points;
 353         /* Maps a GSharedVtTrampInfo structure to a trampoline address */
 354         GHashTable *gsharedvt_arg_tramp_hash;
 355         /* memcpy/bzero methods specialized for small constant sizes */
 356         gpointer *memcpy_addr [17];
 357         gpointer *bzero_addr [17];
 358         gpointer llvm_module;
 359         /* Maps MonoMethod -> GSlist of addresses */
 360         GHashTable *llvm_jit_callees;
 361 } MonoJitDomainInfo;
 362
 363 typedef struct {
 364         MonoJitInfo *ji;
 365         MonoCodeManager *code_mp;
 366 } MonoJitDynamicMethodInfo;
 367
 368 /* An extension of MonoGenericParamFull used in generic sharing */
 369 typedef struct {
 370         MonoGenericParamFull param;
 371         MonoGenericParam *parent;
 372 } MonoGSharedGenericParam;
 373
 374 #define domain_jit_info(domain) ((MonoJitDomainInfo*)((domain)->runtime_info))
 375
 376 /* Contains a list of ips which needs to be patched when a method is compiled */
 377 typedef struct {
 378         GSList *list;
 379 } MonoJumpList;
 380
 381 /* Arch-specific */
 382 typedef struct {
 383         int dummy;
 384 } MonoDynCallInfo;
 385
 386 /*
 387  * Information about a stack frame.
 388  * FIXME This typedef exists only to avoid tons of code rewriting
 389  */
 390 typedef MonoStackFrameInfo StackFrameInfo;
 391
 392 #if 0
 393 #define mono_bitset_foreach_bit(set,b,n) \
 394         for (b = 0; b < n; b++)\
 395                 if (mono_bitset_test_fast(set,b))
 396 #else
 397 #define mono_bitset_foreach_bit(set,b,n) \
 398         for (b = mono_bitset_find_start (set); b < n && b >= 0; b = mono_bitset_find_first (set, b))
 399 #endif
 400
 401 /*
 402  * Pull the list of opcodes
 403  */
 404 #define OPDEF(a,b,c,d,e,f,g,h,i,j) \
 405         a = i,
 406
 407 enum {
 408 #include "mono/cil/opcode.def"
 409         CEE_LASTOP
 410 };
 411 #undef OPDEF
 412
 413 #define MONO_VARINFO(cfg,varnum) (&(cfg)->vars [varnum])
 414
 415 #define MONO_INST_NULLIFY_SREGS(dest) do {                              \
 416                 (dest)->sreg1 = (dest)->sreg2 = (dest)->sreg3 = -1;     \
 417         } while (0)
 418
 419 #define MONO_INST_NEW(cfg,dest,op) do { \
 420                 (dest) = (MonoInst *)mono_mempool_alloc0 ((cfg)->mempool, sizeof (MonoInst));   \
 421                 (dest)->opcode = (op);  \
 422                 (dest)->dreg = -1;                          \
 423                 MONO_INST_NULLIFY_SREGS ((dest));           \
 424         (dest)->cil_code = (cfg)->ip;  \
 425         } while (0)
 426
 427 #define MONO_INST_NEW_CALL(cfg,dest,op) do {    \
 428                 (dest) = (MonoCallInst *)mono_mempool_alloc0 ((cfg)->mempool, sizeof (MonoCallInst));   \
 429                 (dest)->inst.opcode = (op);     \
 430                 (dest)->inst.dreg = -1;                                 \
 431                 MONO_INST_NULLIFY_SREGS (&(dest)->inst);                \
 432         (dest)->inst.cil_code = (cfg)->ip;  \
 433         } while (0)
 434
 435 #define MONO_ADD_INS(b,inst) do {       \
 436                 if ((b)->last_ins) {    \
 437                         (b)->last_ins->next = (inst);   \
 438             (inst)->prev = (b)->last_ins;   \
 439                         (b)->last_ins = (inst); \
 440                 } else {        \
 441                         (b)->code = (b)->last_ins = (inst);     \
 442                 }       \
 443         } while (0)
 444
 445 #define NULLIFY_INS(ins) do { \
 446         (ins)->opcode = OP_NOP; \
 447         (ins)->dreg = -1;                               \
 448         MONO_INST_NULLIFY_SREGS ((ins));                \
 449     } while (0)
 450
 451 /* Remove INS from BB */
 452 #define MONO_REMOVE_INS(bb,ins) do { \
 453         if ((ins)->prev) \
 454             (ins)->prev->next = (ins)->next; \
 455         if ((ins)->next) \
 456             (ins)->next->prev = (ins)->prev; \
 457         if ((bb)->code == (ins)) \
 458             (bb)->code = (ins)->next; \
 459         if ((bb)->last_ins == (ins)) \
 460             (bb)->last_ins = (ins)->prev; \
 461     } while (0)
 462
 463 /* Remove INS from BB and nullify it */
 464 #define MONO_DELETE_INS(bb,ins) do { \
 465         MONO_REMOVE_INS ((bb), (ins)); \
 466         NULLIFY_INS ((ins)); \
 467     } while (0)
 468
 469 /*
 470  * this is used to determine when some branch optimizations are possible: we exclude FP compares
 471  * because they have weird semantics with NaNs.
 472  */
 473 #define MONO_IS_COND_BRANCH_OP(ins) (((ins)->opcode >= OP_LBEQ && (ins)->opcode <= OP_LBLT_UN) || ((ins)->opcode >= OP_FBEQ && (ins)->opcode <= OP_FBLT_UN) || ((ins)->opcode >= OP_IBEQ && (ins)->opcode <= OP_IBLT_UN))
 474 #define MONO_IS_COND_BRANCH_NOFP(ins) (MONO_IS_COND_BRANCH_OP(ins) && !(((ins)->opcode >= OP_FBEQ) && ((ins)->opcode <= OP_FBLT_UN)) && (!(ins)->inst_left || (ins)->inst_left->inst_left->type != STACK_R8))
 475
 476 #define MONO_IS_BRANCH_OP(ins) (MONO_IS_COND_BRANCH_OP(ins) || ((ins)->opcode == OP_BR) || ((ins)->opcode == OP_BR_REG) || ((ins)->opcode == OP_SWITCH))
 477
 478 #define MONO_IS_COND_EXC(ins) ((((ins)->opcode >= OP_COND_EXC_EQ) && ((ins)->opcode <= OP_COND_EXC_LT_UN)) || (((ins)->opcode >= OP_COND_EXC_IEQ) && ((ins)->opcode <= OP_COND_EXC_ILT_UN)))
 479
 480 #define MONO_IS_SETCC(ins) ((((ins)->opcode >= OP_CEQ) && ((ins)->opcode <= OP_CLT_UN)) || (((ins)->opcode >= OP_ICEQ) && ((ins)->opcode <= OP_ICLT_UN)) || (((ins)->opcode >= OP_LCEQ) && ((ins)->opcode <= OP_LCLT_UN)) || (((ins)->opcode >= OP_FCEQ) && ((ins)->opcode <= OP_FCLT_UN)))
 481
 482
 483 #define MONO_IS_LOAD_MEMBASE(ins) (((ins)->opcode >= OP_LOAD_MEMBASE && (ins)->opcode <= OP_LOADV_MEMBASE) || ((ins)->opcode >= OP_ATOMIC_LOAD_I1 && (ins)->opcode <= OP_ATOMIC_LOAD_R8))
 484 #define MONO_IS_STORE_MEMBASE(ins) (((ins)->opcode >= OP_STORE_MEMBASE_REG && (ins)->opcode <= OP_STOREV_MEMBASE) || ((ins)->opcode >= OP_ATOMIC_STORE_I1 && (ins)->opcode <= OP_ATOMIC_STORE_R8))
 485 #define MONO_IS_STORE_MEMINDEX(ins) (((ins)->opcode >= OP_STORE_MEMINDEX) && ((ins)->opcode <= OP_STORER8_MEMINDEX))
 486
 487 // OP_DYN_CALL is not a MonoCallInst
 488 #define MONO_IS_CALL(ins) (((ins->opcode >= OP_VOIDCALL) && (ins->opcode <= OP_VCALL2_MEMBASE)) || (ins->opcode == OP_TAILCALL))
 489
 490 #define MONO_IS_JUMP_TABLE(ins) (((ins)->opcode == OP_JUMP_TABLE) ? TRUE : ((((ins)->opcode == OP_AOTCONST) && (ins->inst_i1 == (gpointer)MONO_PATCH_INFO_SWITCH)) ? TRUE : ((ins)->opcode == OP_SWITCH) ? TRUE : ((((ins)->opcode == OP_GOT_ENTRY) && ((ins)->inst_right->inst_i1 == (gpointer)MONO_PATCH_INFO_SWITCH)) ? TRUE : FALSE)))
 491
 492 #define MONO_JUMP_TABLE_FROM_INS(ins) (((ins)->opcode == OP_JUMP_TABLE) ? (ins)->inst_p0 : (((ins)->opcode == OP_AOTCONST) && (ins->inst_i1 == (gpointer)MONO_PATCH_INFO_SWITCH) ? (ins)->inst_p0 : (((ins)->opcode == OP_SWITCH) ? (ins)->inst_p0 : ((((ins)->opcode == OP_GOT_ENTRY) && ((ins)->inst_right->inst_i1 == (gpointer)MONO_PATCH_INFO_SWITCH)) ? (ins)->inst_right->inst_p0 : NULL))))
 493
 494 /* FIXME: Add more instructions */
 495 /* INEG sets the condition codes, and the OP_LNEG decomposition depends on this on x86 */
 496 #define MONO_INS_HAS_NO_SIDE_EFFECT(ins) (MONO_IS_MOVE (ins) || (ins->opcode == OP_ICONST) || (ins->opcode == OP_I8CONST) || MONO_IS_ZERO (ins) || (ins->opcode == OP_ADD_IMM) || (ins->opcode == OP_R8CONST) || (ins->opcode == OP_LADD_IMM) || (ins->opcode == OP_ISUB_IMM) || (ins->opcode == OP_IADD_IMM) || (ins->opcode == OP_LNEG) || (ins->opcode == OP_ISUB) || (ins->opcode == OP_CMOV_IGE) || (ins->opcode == OP_ISHL_IMM) || (ins->opcode == OP_ISHR_IMM) || (ins->opcode == OP_ISHR_UN_IMM) || (ins->opcode == OP_IAND_IMM) || (ins->opcode == OP_ICONV_TO_U1) || (ins->opcode == OP_ICONV_TO_I1) || (ins->opcode == OP_SEXT_I4) || (ins->opcode == OP_LCONV_TO_U1) || (ins->opcode == OP_ICONV_TO_U2) || (ins->opcode == OP_ICONV_TO_I2) || (ins->opcode == OP_LCONV_TO_I2) || (ins->opcode == OP_LDADDR) || (ins->opcode == OP_PHI) || (ins->opcode == OP_NOP) || (ins->opcode == OP_ZEXT_I4) || (ins->opcode == OP_NOT_NULL) || (ins->opcode == OP_IL_SEQ_POINT))
 497
 498 #define MONO_METHOD_IS_FINAL(m) (((m)->flags & METHOD_ATTRIBUTE_FINAL) || ((m)->klass && ((m)->klass->flags & TYPE_ATTRIBUTE_SEALED)))
 499
 500
 501 #ifdef MONO_ARCH_SIMD_INTRINSICS
 502
 503 #define MONO_IS_PHI(ins) (((ins)->opcode == OP_PHI) || ((ins)->opcode == OP_FPHI) || ((ins)->opcode == OP_VPHI)  || ((ins)->opcode == OP_XPHI))
 504 #define MONO_IS_MOVE(ins) (((ins)->opcode == OP_MOVE) || ((ins)->opcode == OP_FMOVE) || ((ins)->opcode == OP_VMOVE) || ((ins)->opcode == OP_XMOVE) || ((ins)->opcode == OP_RMOVE))
 505 #define MONO_IS_NON_FP_MOVE(ins) (((ins)->opcode == OP_MOVE) || ((ins)->opcode == OP_VMOVE) || ((ins)->opcode == OP_XMOVE))
 506 #define MONO_IS_REAL_MOVE(ins) (((ins)->opcode == OP_MOVE) || ((ins)->opcode == OP_FMOVE) || ((ins)->opcode == OP_XMOVE) || ((ins)->opcode == OP_RMOVE))
 507 #define MONO_IS_ZERO(ins) (((ins)->opcode == OP_VZERO) || ((ins)->opcode == OP_XZERO))
 508
 509 #define MONO_CLASS_IS_SIMD(cfg, klass) (((cfg)->opt & MONO_OPT_SIMD) && (klass)->simd_type)
 510
 511 #else
 512
 513 #define MONO_IS_PHI(ins) (((ins)->opcode == OP_PHI) || ((ins)->opcode == OP_FPHI) || ((ins)->opcode == OP_VPHI))
 514 #define MONO_IS_MOVE(ins) (((ins)->opcode == OP_MOVE) || ((ins)->opcode == OP_FMOVE) || ((ins)->opcode == OP_VMOVE) || ((ins)->opcode == OP_RMOVE))
 515 #define MONO_IS_NON_FP_MOVE(ins) (((ins)->opcode == OP_MOVE) || ((ins)->opcode == OP_VMOVE))
 516 /*A real MOVE is one that isn't decomposed such as a VMOVE or LMOVE*/
 517 #define MONO_IS_REAL_MOVE(ins) (((ins)->opcode == OP_MOVE) || ((ins)->opcode == OP_FMOVE) || ((ins)->opcode == OP_RMOVE))
 518 #define MONO_IS_ZERO(ins) ((ins)->opcode == OP_VZERO)
 519
 520 #define MONO_CLASS_IS_SIMD(cfg, klass) (0)
 521
 522 #endif
 523
 524 typedef struct MonoInstList MonoInstList;
 525 typedef struct MonoInst MonoInst;
 526 typedef struct MonoCallInst MonoCallInst;
 527 typedef struct MonoCallArgParm MonoCallArgParm;
 528 typedef struct MonoMethodVar MonoMethodVar;
 529 typedef struct MonoBasicBlock MonoBasicBlock;
 530 typedef struct MonoLMF MonoLMF;
 531 typedef struct MonoSpillInfo MonoSpillInfo;
 532 typedef struct MonoTraceSpec MonoTraceSpec;
 533
 534 extern MonoNativeTlsKey mono_jit_tls_id;
 535 extern MonoTraceSpec *mono_jit_trace_calls;
 536 extern gboolean mono_break_on_exc;
 537 extern int mono_exc_esp_offset;
 538 extern gboolean mono_compile_aot;
 539 extern gboolean mono_aot_only;
 540 extern gboolean mono_llvm_only;
 541 extern MonoAotMode mono_aot_mode;
 542 extern MonoMethodDesc *mono_inject_async_exc_method;
 543 extern int mono_inject_async_exc_pos;
 544 extern MonoMethodDesc *mono_break_at_bb_method;
 545 extern int mono_break_at_bb_bb_num;
 546 extern gboolean mono_verify_all;
 547 extern gboolean mono_do_x86_stack_align;
 548 extern const char *mono_build_date;
 549 extern gboolean mono_do_signal_chaining;
 550 extern gboolean mono_do_crash_chaining;
 551 extern MONO_API gboolean mono_use_llvm;
 552 extern gboolean mono_do_single_method_regression;
 553 extern guint32 mono_single_method_regression_opt;
 554 extern MonoMethod *mono_current_single_method;
 555 extern GSList *mono_single_method_list;
 556 extern GHashTable *mono_single_method_hash;
 557 extern gboolean mono_using_xdebug;
 558 extern int mini_verbose;
 559 extern int valgrind_register;
 560
 561 #define INS_INFO(opcode) (&ins_info [((opcode) - OP_START - 1) * 4])
 562
 563 extern const char ins_info[];
 564 extern const gint8 ins_sreg_counts [];
 565
 566 #ifndef DISABLE_JIT
 567 #define mono_inst_get_num_src_registers(ins) (ins_sreg_counts [(ins)->opcode - OP_START - 1])
 568 #else
 569 #define mono_inst_get_num_src_registers(ins) 0
 570 #endif
 571
 572 #define mono_inst_get_src_registers(ins, regs) (((regs) [0] = (ins)->sreg1), ((regs) [1] = (ins)->sreg2), ((regs) [2] = (ins)->sreg3), mono_inst_get_num_src_registers ((ins)))
 573
 574 #define MONO_BB_FOR_EACH_INS(bb, ins) for ((ins) = (bb)->code; (ins); (ins) = (ins)->next)
 575
 576 #define MONO_BB_FOR_EACH_INS_SAFE(bb, n, ins) for ((ins) = (bb)->code, n = (ins) ? (ins)->next : NULL; (ins); (ins) = (n), (n) = (ins) ? (ins)->next : NULL)
 577
 578 #define MONO_BB_FOR_EACH_INS_REVERSE_SAFE(bb, p, ins) for ((ins) = (bb)->last_ins, p = (ins) ? (ins)->prev : NULL; (ins); (ins) = (p), (p) = (ins) ? (ins)->prev : NULL)
 579
 580 #define mono_bb_first_ins(bb) (bb)->code
 581
 582 struct MonoSpillInfo {
 583         int offset;
 584 };
 585
 586 /*
 587  * Information about a call site for the GC map creation code
 588  */
 589 typedef struct {
 590         /* The next offset after the call instruction */
 591         int pc_offset;
 592         /* The basic block containing the call site */
 593         MonoBasicBlock *bb;
 594         /*
 595          * The set of variables live at the call site.
 596          * Has length cfg->num_varinfo in bits.
 597          */
 598         guint8 *liveness;
 599         /*
 600          * List of OP_GC_PARAM_SLOT_LIVENESS_DEF instructions defining the param slots
 601          * used by this call.
 602          */
 603         GSList *param_slots;
 604 } GCCallSite;
 605
 606 /*
 607  * The IR-level extended basic block.
 608  *
 609  * A basic block can have multiple exits just fine, as long as the point of
 610  * 'departure' is the last instruction in the basic block. Extended basic
 611  * blocks, on the other hand, may have instructions that leave the block
 612  * midstream. The important thing is that they cannot be _entered_
 613  * midstream, ie, execution of a basic block (or extened bb) always start
 614  * at the beginning of the block, never in the middle.
 615  */
 616 struct MonoBasicBlock {
 617         MonoInst *last_ins;
 618
 619         /* the next basic block in the order it appears in IL */
 620         MonoBasicBlock *next_bb;
 621
 622         /*
 623          * Before instruction selection it is the first tree in the
 624          * forest and the first item in the list of trees. After
 625          * instruction selection it is the first instruction and the
 626          * first item in the list of instructions.
 627          */
 628         MonoInst *code;
 629
 630         /* unique block number identification */
 631         gint32 block_num;
 632
 633         gint32 dfn;
 634
 635         /* Basic blocks: incoming and outgoing counts and pointers */
 636         /* Each bb should only appear once in each array */
 637         gint16 out_count, in_count;
 638         MonoBasicBlock **in_bb;
 639         MonoBasicBlock **out_bb;
 640
 641         /* Points to the start of the CIL code that initiated this BB */
 642         unsigned char* cil_code;
 643
 644         /* Length of the CIL block */
 645         gint32 cil_length;
 646
 647         /* The offset of the generated code, used for fixups */
 648         int native_offset;
 649         /* The length of the generated code, doesn't include alignment padding */
 650         int native_length;
 651         /* The real native offset, which includes alignment padding too */
 652         int real_native_offset;
 653         int max_offset;
 654         int max_length;
 655
 656         /* Visited and reachable flags */
 657         guint32 flags;
 658
 659         /*
 660          * SSA and loop based flags
 661          */
 662         MonoBitSet *dominators;
 663         MonoBitSet *dfrontier;
 664         MonoBasicBlock *idom;
 665         GSList *dominated;
 666         /* fast dominator algorithm */
 667         MonoBasicBlock *df_parent, *ancestor, *child, *label;
 668         int size, sdom, idomn;
 669
 670         /* loop nesting and recognition */
 671         GList *loop_blocks;
 672         gint8  nesting;
 673         gint8  loop_body_start;
 674
 675         /*
 676          * Whenever the bblock is rarely executed so it should be emitted after
 677          * the function epilog.
 678          */
 679         guint out_of_line : 1;
 680         /* Caches the result of uselessness calculation during optimize_branches */
 681         guint not_useless : 1;
 682         /* Whenever the decompose_array_access_opts () pass needs to process this bblock */
 683         guint has_array_access : 1;
 684         /* Whenever this bblock is extended, ie. it has branches inside it */
 685         guint extended : 1;
 686         /* Whenever this bblock contains a OP_JUMP_TABLE instruction */
 687         guint has_jump_table : 1;
 688         /* Whenever this bblock contains an OP_CALL_HANDLER instruction */
 689         guint has_call_handler : 1;
 690         /* Whenever this bblock starts a try block */
 691         guint try_start : 1;
 692
 693 #ifdef ENABLE_LLVM
 694         /* The offset of the CIL instruction in this bblock which ends a try block */
 695         intptr_t try_end;
 696 #endif
 697
 698         /*
 699          * If this is set, extend the try range started by this bblock by an arch specific
 700          * number of bytes to encompass the end of the previous bblock (e.g. a Monitor.Enter
 701          * call).
 702          */
 703         guint extend_try_block : 1;
 704
 705         /* use for liveness analysis */
 706         MonoBitSet *gen_set;
 707         MonoBitSet *kill_set;
 708         MonoBitSet *live_in_set;
 709         MonoBitSet *live_out_set;
 710
 711         /* fields to deal with non-empty stack slots at bb boundary */
 712         guint16 out_scount, in_scount;
 713         MonoInst **out_stack;
 714         MonoInst **in_stack;
 715
 716         /* we use that to prevent merging of bblocks covered by different clauses*/
 717         guint real_offset;
 718
 719         GSList *seq_points;
 720         MonoInst *last_seq_point;
 721
 722         GSList *spill_slot_defs;
 723
 724         /* List of call sites in this bblock sorted by pc_offset */
 725         GSList *gc_callsites;
 726
 727         /*
 728          * The region encodes whether the basic block is inside
 729          * a finally, catch, filter or none of these.
 730          *
 731          * If the value is -1, then it is neither finally, catch nor filter
 732          *
 733          * Otherwise the format is:
 734          *
 735          *  Bits: |     0-3      |       4-7      |     8-31
 736          *        |              |                |
 737          *        | clause-flags |   MONO_REGION  | clause-index
 738          *
 739          */
 740         guint region;
 741
 742         /* The current symbolic register number, used in local register allocation. */
 743         guint32 max_vreg;
 744 };
 745
 746 /* BBlock flags */
 747 enum {
 748         BB_VISITED              = 1 << 0,
 749         BB_REACHABLE            = 1 << 1,
 750         BB_EXCEPTION_DEAD_OBJ   = 1 << 2,
 751         BB_EXCEPTION_UNSAFE     = 1 << 3,
 752         BB_EXCEPTION_HANDLER    = 1 << 4,
 753         /* for Native Client, mark the blocks that can be jumped to indirectly */
 754         BB_INDIRECT_JUMP_TARGET = 1 << 5
 755 };
 756
 757 typedef struct MonoMemcpyArgs {
 758         int size, align;
 759 } MonoMemcpyArgs;
 760
 761 typedef enum {
 762         LLVMArgNone,
 763         /* Scalar argument passed by value */
 764         LLVMArgNormal,
 765         /* Only in ainfo->pair_storage */
 766         LLVMArgInIReg,
 767         /* Only in ainfo->pair_storage */
 768         LLVMArgInFPReg,
 769         /* Valuetype passed in 1-2 consecutive register */
 770         LLVMArgVtypeInReg,
 771         LLVMArgVtypeByVal,
 772         LLVMArgVtypeRetAddr, /* On on cinfo->ret */
 773         LLVMArgGSharedVt,
 774         /* Fixed size argument passed to/returned from gsharedvt method by ref */
 775         LLVMArgGsharedvtFixed,
 776         /* Fixed size vtype argument passed to/returned from gsharedvt method by ref */
 777         LLVMArgGsharedvtFixedVtype,
 778         /* Variable sized argument passed to/returned from gsharedvt method by ref */
 779         LLVMArgGsharedvtVariable,
 780         /* Vtype passed/returned as one int array argument */
 781         LLVMArgAsIArgs,
 782         /* Vtype passed as a set of fp arguments */
 783         LLVMArgAsFpArgs,
 784         /*
 785          * Only for returns, a structure which
 786          * consists of floats/doubles.
 787          */
 788         LLVMArgFpStruct,
 789         LLVMArgVtypeByRef,
 790         /* Vtype returned as an int */
 791         LLVMArgVtypeAsScalar
 792 } LLVMArgStorage;
 793
 794 typedef struct {
 795         LLVMArgStorage storage;
 796
 797         /*
 798          * Only if storage == ArgValuetypeInReg/LLVMArgAsFpArgs.
 799          * This contains how the parts of the vtype are passed.
 800          */
 801         LLVMArgStorage pair_storage [8];
 802         /*
 803          * Only if storage == LLVMArgAsIArgs/LLVMArgAsFpArgs/LLVMArgFpStruct.
 804          * If storage == LLVMArgAsFpArgs, this is the number of arguments
 805          * used to pass the value.
 806          * If storage == LLVMArgFpStruct, this is the number of fields
 807          * in the structure.
 808          */
 809         int nslots;
 810         /* Only if storage == LLVMArgAsFpArgs/LLVMArgFpStruct (4/8) */
 811         int esize;
 812         /* Parameter index in the LLVM signature */
 813         int pindex;
 814         MonoType *type;
 815         /* Only if storage == LLVMArgAsFpArgs. Dummy fp args to insert before this arg */
 816         int ndummy_fpargs;
 817 } LLVMArgInfo;
 818
 819 typedef struct {
 820         LLVMArgInfo ret;
 821         /* Whenever there is an rgctx argument */
 822         gboolean rgctx_arg;
 823         /* Whenever there is an IMT argument */
 824         gboolean imt_arg;
 825         /*
 826          * The position of the vret arg in the argument list.
 827          * Only if ret->storage == ArgVtypeRetAddr.
 828          * Should be 0 or 1.
 829          */
 830         int vret_arg_index;
 831         /* The indexes of various special arguments in the LLVM signature */
 832         int vret_arg_pindex, this_arg_pindex, rgctx_arg_pindex, imt_arg_pindex;
 833
 834         /* Inline array of argument info */
 835         /* args [0] is for the this argument if it exists */
 836         LLVMArgInfo args [1];
 837 } LLVMCallInfo;
 838
 839 #define MONO_MAX_SRC_REGS       3
 840
 841 struct MonoInst {
 842         guint16 opcode;
 843         guint8  type; /* stack type */
 844         guint8  flags;
 845
 846         /* used by the register allocator */
 847         gint32 dreg, sreg1, sreg2, sreg3;
 848
 849         MonoInst *next, *prev;
 850
 851         union {
 852                 union {
 853                         MonoInst *src;
 854                         MonoMethodVar *var;
 855                         mgreg_t const_val;
 856 #if (SIZEOF_REGISTER > SIZEOF_VOID_P) && (G_BYTE_ORDER == G_BIG_ENDIAN)
 857                         struct {
 858                                 gpointer p[SIZEOF_REGISTER/SIZEOF_VOID_P];
 859                         } pdata;
 860 #else
 861                         gpointer p;
 862 #endif
 863                         MonoMethod *method;
 864                         MonoMethodSignature *signature;
 865                         MonoBasicBlock **many_blocks;
 866                         MonoBasicBlock *target_block;
 867                         MonoInst **args;
 868                         MonoType *vtype;
 869                         MonoClass *klass;
 870                         int *phi_args;
 871                         MonoCallInst *call_inst;
 872                         MonoExceptionClause *exception_clause;
 873                 } op [2];
 874                 gint64 i8const;
 875                 double r8const;
 876         } data;
 877
 878         const unsigned char* cil_code; /* for debugging and bblock splitting */
 879
 880         /* used mostly by the backend to store additional info it may need */
 881         union {
 882                 gint32 reg3;
 883                 gint32 arg_info;
 884                 gint32 size;
 885                 MonoMemcpyArgs *memcpy_args; /* in OP_MEMSET and OP_MEMCPY */
 886                 gpointer data;
 887                 gint shift_amount;
 888                 gboolean is_pinvoke; /* for variables in the unmanaged marshal format */
 889                 gboolean record_cast_details; /* For CEE_CASTCLASS */
 890                 MonoInst *spill_var; /* for OP_MOVE_I4_TO_F/F_TO_I4 and OP_FCONV_TO_R8_X */
 891                 guint16 source_opcode; /*OP_XCONV_R8_TO_I4 needs to know which op was used to do proper widening*/
 892                 int pc_offset; /* OP_GC_LIVERANGE_START/END */
 893
 894                 /*
 895                  * memory_barrier: MONO_MEMORY_BARRIER_{ACQ,REL,SEQ}
 896                  * atomic_load_*: MONO_MEMORY_BARRIER_{ACQ,SEQ}
 897                  * atomic_store_*: MONO_MEMORY_BARRIER_{REL,SEQ}
 898                  */
 899                 int memory_barrier_kind;
 900         } backend;
 901
 902         MonoClass *klass;
 903 };
 904
 905 struct MonoCallInst {
 906         MonoInst inst;
 907         MonoMethodSignature *signature;
 908         MonoMethod *method;
 909         MonoInst **args;
 910         MonoInst *out_args;
 911         MonoInst *vret_var;
 912         gconstpointer fptr;
 913         guint stack_usage;
 914         guint stack_align_amount;
 915         guint is_virtual : 1;
 916         guint tail_call : 1;
 917         /* If this is TRUE, 'fptr' points to a MonoJumpInfo instead of an address. */
 918         guint fptr_is_patch : 1;
 919         /*
 920          * If this is true, then the call returns a vtype in a register using the same
 921          * calling convention as OP_CALL.
 922          */
 923         guint vret_in_reg : 1;
 924         /* Whenever vret_in_reg returns fp values */
 925         guint vret_in_reg_fp : 1;
 926         /* Whenever there is an IMT argument and it is dynamic */
 927         guint dynamic_imt_arg : 1;
 928         /* Whenever there is an RGCTX argument */
 929         guint32 rgctx_reg : 1;
 930         /* Whenever the call will need an unbox trampoline */
 931         guint need_unbox_trampoline : 1;
 932         regmask_t used_iregs;
 933         regmask_t used_fregs;
 934         GSList *out_ireg_args;
 935         GSList *out_freg_args;
 936         GSList *outarg_vts;
 937         gpointer call_info;
 938 #ifdef ENABLE_LLVM
 939         LLVMCallInfo *cinfo;
 940         int rgctx_arg_reg, imt_arg_reg;
 941 #endif
 942 #ifdef TARGET_ARM
 943         /* See the comment in mini-arm.c!mono_arch_emit_call for RegTypeFP. */
 944         GSList *float_args;
 945 #endif
 946 };
 947
 948 struct MonoCallArgParm {
 949         MonoInst ins;
 950         gint32 size;
 951         gint32 offset;
 952         gint32 offPrm;
 953 };
 954
 955 /*
 956  * flags for MonoInst
 957  * Note: some of the values overlap, because they can't appear
 958  * in the same MonoInst.
 959  */
 960 enum {
 961         MONO_INST_HAS_METHOD = 1,
 962         MONO_INST_INIT       = 1, /* in localloc */
 963         MONO_INST_SINGLE_STEP_LOC = 1, /* in SEQ_POINT */
 964         MONO_INST_IS_DEAD    = 2,
 965         MONO_INST_TAILCALL   = 4,
 966         MONO_INST_VOLATILE   = 4,
 967         MONO_INST_NOTYPECHECK    = 4,
 968         MONO_INST_NONEMPTY_STACK = 4, /* in SEQ_POINT */
 969         MONO_INST_UNALIGNED  = 8,
 970     MONO_INST_CFOLD_TAKEN = 8, /* On branches */
 971     MONO_INST_CFOLD_NOT_TAKEN = 16, /* On branches */
 972         MONO_INST_DEFINITION_HAS_SIDE_EFFECTS = 8,
 973         /* the address of the variable has been taken */
 974         MONO_INST_INDIRECT   = 16,
 975         MONO_INST_NORANGECHECK   = 16,
 976         /* On loads, the source address can be null */
 977         MONO_INST_FAULT = 32,
 978         /*
 979          * On variables, identifies LMF variables. These variables have a dummy type (int), but
 980          * require stack space for a MonoLMF struct.
 981          */
 982         MONO_INST_LMF = 32,
 983         /* On loads, the source address points to a constant value */
 984         MONO_INST_INVARIANT_LOAD = 64,
 985         /* On variables, the variable needs GC tracking */
 986         MONO_INST_GC_TRACK = 128,
 987         /*
 988          * Set on instructions during code emission which make calls, i.e. OP_CALL, OP_THROW.
 989          * backend.pc_offset will be set to the pc offset at the end of the native call instructions.
 990          */
 991         MONO_INST_GC_CALLSITE = 128,
 992         /* On comparisons, mark the branch following the condition as likely to be taken */
 993         MONO_INST_LIKELY = 128,
 994 };
 995
 996 #define inst_c0 data.op[0].const_val
 997 #define inst_c1 data.op[1].const_val
 998 #define inst_i0 data.op[0].src
 999 #define inst_i1 data.op[1].src
1000 #if (SIZEOF_REGISTER > SIZEOF_VOID_P) && (G_BYTE_ORDER == G_BIG_ENDIAN)
1001 #define inst_p0 data.op[0].pdata.p[SIZEOF_REGISTER/SIZEOF_VOID_P - 1]
1002 #define inst_p1 data.op[1].pdata.p[SIZEOF_REGISTER/SIZEOF_VOID_P - 1]
1003 #else
1004 #define inst_p0 data.op[0].p
1005 #define inst_p1 data.op[1].p
1006 #endif
1007 #define inst_l  data.i8const
1008 #define inst_r  data.r8const
1009 #define inst_left  data.op[0].src
1010 #define inst_right data.op[1].src
1011
1012 #define inst_newa_len   data.op[0].src
1013 #define inst_newa_class data.op[1].klass
1014
1015 #define inst_var    data.op[0].var
1016 #define inst_vtype  data.op[1].vtype
1017 /* in branch instructions */
1018 #define inst_many_bb   data.op[1].many_blocks
1019 #define inst_target_bb data.op[0].target_block
1020 #define inst_true_bb   data.op[1].many_blocks[0]
1021 #define inst_false_bb  data.op[1].many_blocks[1]
1022
1023 #define inst_basereg sreg1
1024 #define inst_indexreg sreg2
1025 #define inst_destbasereg dreg
1026 #define inst_offset data.op[0].const_val
1027 #define inst_imm    data.op[1].const_val
1028 #define inst_call   data.op[1].call_inst
1029
1030 #define inst_phi_args   data.op[1].phi_args
1031 #define inst_eh_block    data.op[1].exception_clause
1032
1033 static inline void
1034 mono_inst_set_src_registers (MonoInst *ins, int *regs)
1035 {
1036         ins->sreg1 = regs [0];
1037         ins->sreg2 = regs [1];
1038         ins->sreg3 = regs [2];
1039 }
1040
1041 /* instruction description for use in regalloc/scheduling */
1042 enum {
1043         MONO_INST_DEST,
1044         MONO_INST_SRC1,         /* we depend on the SRCs to be consecutive */
1045         MONO_INST_SRC2,
1046         MONO_INST_SRC3,
1047         MONO_INST_LEN,
1048         MONO_INST_CLOB,
1049         /* Unused, commented out to reduce the size of the mdesc tables
1050         MONO_INST_FLAGS,
1051         MONO_INST_COST,
1052         MONO_INST_DELAY,
1053         MONO_INST_RES,
1054         */
1055         MONO_INST_MAX
1056 };
1057
1058 typedef union {
1059         struct {
1060                 guint16 tid; /* tree number */
1061                 guint16 bid; /* block number */
1062         } pos ;
1063         guint32 abs_pos;
1064 } MonoPosition;
1065
1066 typedef struct {
1067         MonoPosition first_use, last_use;
1068 } MonoLiveRange;
1069
1070 typedef struct MonoLiveRange2 MonoLiveRange2;
1071
1072 struct MonoLiveRange2 {
1073         int from, to;
1074         MonoLiveRange2 *next;
1075 };
1076
1077 typedef struct {
1078         /* List of live ranges sorted by 'from' */
1079         MonoLiveRange2 *range;
1080         MonoLiveRange2 *last_range;
1081 } MonoLiveInterval;
1082
1083 /*
1084  * Additional information about a variable
1085  */
1086 struct MonoMethodVar {
1087         guint           idx; /* inside cfg->varinfo, cfg->vars */
1088         MonoLiveRange   range; /* generated by liveness analysis */
1089         MonoLiveInterval *interval; /* generated by liveness analysis */
1090         int             reg; /* != -1 if allocated into a register */
1091         int             spill_costs;
1092         MonoBitSet     *def_in; /* used by SSA */
1093         MonoInst       *def;    /* used by SSA */
1094         MonoBasicBlock *def_bb; /* used by SSA */
1095         GList          *uses;   /* used by SSA */
1096         char            cpstate;  /* used by SSA conditional  constant propagation */
1097         /* The native offsets corresponding to the live range of the variable */
1098         gint32         live_range_start, live_range_end;
1099         /*
1100          * cfg->varinfo [idx]->dreg could be replaced for OP_REGVAR, this contains the
1101          * original vreg.
1102          */
1103         gint32         vreg;
1104 };
1105
1106 /*
1107  * Stores state need to resume exception handling when using LLVM
1108  */
1109 typedef struct {
1110         MonoJitInfo *ji;
1111         int clause_index;
1112         MonoContext ctx, new_ctx;
1113         /* FIXME: GC */
1114         gpointer        ex_obj;
1115         MonoLMF *lmf;
1116         int first_filter_idx, filter_idx;
1117 } ResumeState;
1118
1119 typedef struct {
1120         gpointer          end_of_stack;
1121         guint32           stack_size;
1122         /* !defined(HAVE_KW_THREAD) || !defined(MONO_ARCH_ENABLE_MONO_LMF_VAR) */
1123         MonoLMF          *lmf;
1124         MonoLMF          *first_lmf;
1125         gpointer         restore_stack_prot;
1126         guint32          handling_stack_ovf;
1127         gpointer         signal_stack;
1128         guint32          signal_stack_size;
1129         gpointer         stack_ovf_guard_base;
1130         guint32          stack_ovf_guard_size;
1131         guint            stack_ovf_valloced : 1;
1132         void            (*abort_func) (MonoObject *object);
1133         /* Used to implement --debug=casts */
1134         MonoClass       *class_cast_from, *class_cast_to;
1135
1136         /* Stores state needed by handler block with a guard */
1137         MonoContext     ex_ctx;
1138         ResumeState resume_state;
1139
1140         /*Variabled use to implement handler blocks (finally/catch/etc) guards during interruption*/
1141         /* handler block return address */
1142         gpointer handler_block_return_address;
1143
1144         /* handler block been guarded. It's safe to store this even for dynamic methods since there
1145         is an activation on stack making sure it will remain alive.*/
1146         MonoJitExceptionInfo *handler_block;
1147
1148         /* context to be used by the guard trampoline when resuming interruption.*/
1149         MonoContext handler_block_context;
1150         /*
1151          * Stores the state at the exception throw site to be used by mono_stack_walk ()
1152          * when it is called from profiler functions during exception handling.
1153          */
1154         MonoContext orig_ex_ctx;
1155         gboolean orig_ex_ctx_set;
1156
1157         /*
1158          * Stores if we need to run a chained exception in Windows.
1159          */
1160         gboolean mono_win_chained_exception_needs_run;
1161
1162         /*
1163          * The current exception in flight
1164          */
1165         guint32 thrown_exc;
1166
1167         /*
1168          * The calling assembly in llvmonly mode.
1169          */
1170         MonoImage *calling_image;
1171 } MonoJitTlsData;
1172
1173 /*
1174  * This structure is an extension of MonoLMF and contains extra information.
1175  */
1176 typedef struct {
1177         struct MonoLMF lmf;
1178         gboolean debugger_invoke;
1179         MonoContext ctx; /* if debugger_invoke is TRUE */
1180 } MonoLMFExt;
1181
1182 /* Generic sharing */
1183
1184 /*
1185  * Flags for which contexts were used in inflating a generic.
1186  */
1187 enum {
1188         MONO_GENERIC_CONTEXT_USED_CLASS = 1,
1189         MONO_GENERIC_CONTEXT_USED_METHOD = 2
1190 };
1191
1192 enum {
1193         /* Cannot be 0 since this is stored in rgctx slots, and 0 means an unitialized rgctx slot */
1194         MONO_GSHAREDVT_BOX_TYPE_VTYPE = 1,
1195         MONO_GSHAREDVT_BOX_TYPE_REF = 2,
1196         MONO_GSHAREDVT_BOX_TYPE_NULLABLE = 3
1197 };
1198
1199 typedef enum {
1200         MONO_RGCTX_INFO_STATIC_DATA,
1201         MONO_RGCTX_INFO_KLASS,
1202         MONO_RGCTX_INFO_ELEMENT_KLASS,
1203         MONO_RGCTX_INFO_VTABLE,
1204         MONO_RGCTX_INFO_TYPE,
1205         MONO_RGCTX_INFO_REFLECTION_TYPE,
1206         MONO_RGCTX_INFO_METHOD,
1207         /* In llvmonly mode, this is a function descriptor */
1208         MONO_RGCTX_INFO_GENERIC_METHOD_CODE,
1209         MONO_RGCTX_INFO_GSHAREDVT_OUT_WRAPPER,
1210         MONO_RGCTX_INFO_CLASS_FIELD,
1211         MONO_RGCTX_INFO_METHOD_RGCTX,
1212         MONO_RGCTX_INFO_METHOD_CONTEXT,
1213         MONO_RGCTX_INFO_REMOTING_INVOKE_WITH_CHECK,
1214         MONO_RGCTX_INFO_METHOD_DELEGATE_CODE,
1215         MONO_RGCTX_INFO_CAST_CACHE,
1216         MONO_RGCTX_INFO_ARRAY_ELEMENT_SIZE,
1217         MONO_RGCTX_INFO_VALUE_SIZE,
1218         /* +1 to avoid zero values in rgctx slots */
1219         MONO_RGCTX_INFO_FIELD_OFFSET,
1220         /* Either the code for a gsharedvt method, or the address for a gsharedvt-out trampoline for the method */
1221         /* In llvmonly mode, this is a function descriptor */
1222         MONO_RGCTX_INFO_METHOD_GSHAREDVT_OUT_TRAMPOLINE,
1223         /* Same for virtual calls */
1224         /* In llvmonly mode, this is a function descriptor */
1225         MONO_RGCTX_INFO_METHOD_GSHAREDVT_OUT_TRAMPOLINE_VIRT,
1226         /* Same for calli, associated with a signature */
1227         MONO_RGCTX_INFO_SIG_GSHAREDVT_OUT_TRAMPOLINE_CALLI,
1228         MONO_RGCTX_INFO_SIG_GSHAREDVT_IN_TRAMPOLINE_CALLI,
1229         /* One of MONO_GSHAREDVT_BOX_TYPE */
1230         MONO_RGCTX_INFO_CLASS_BOX_TYPE,
1231         /* Resolves to a MonoGSharedVtMethodRuntimeInfo */
1232         MONO_RGCTX_INFO_METHOD_GSHAREDVT_INFO,
1233         MONO_RGCTX_INFO_LOCAL_OFFSET,
1234         MONO_RGCTX_INFO_MEMCPY,
1235         MONO_RGCTX_INFO_BZERO,
1236         /* The address of Nullable<T>.Box () */
1237         /* In llvmonly mode, this is a function descriptor */
1238         MONO_RGCTX_INFO_NULLABLE_CLASS_BOX,
1239         MONO_RGCTX_INFO_NULLABLE_CLASS_UNBOX,
1240         /* MONO_PATCH_INFO_VCALL_METHOD */
1241         MONO_RGCTX_INFO_VIRT_METHOD_CODE,
1242         /*
1243          * MONO_PATCH_INFO_VCALL_METHOD
1244          * Same as MONO_RGCTX_INFO_CLASS_BOX_TYPE, but for the class
1245          * which implements the method.
1246          */
1247         MONO_RGCTX_INFO_VIRT_METHOD_BOX_TYPE,
1248 } MonoRgctxInfoType;
1249
1250 typedef struct _MonoRuntimeGenericContextInfoTemplate {
1251         MonoRgctxInfoType info_type;
1252         gpointer data;
1253         struct _MonoRuntimeGenericContextInfoTemplate *next;
1254 } MonoRuntimeGenericContextInfoTemplate;
1255
1256 typedef struct {
1257         MonoClass *next_subclass;
1258         MonoRuntimeGenericContextInfoTemplate *infos;
1259         GSList *method_templates;
1260 } MonoRuntimeGenericContextTemplate;
1261
1262 typedef struct {
1263         MonoVTable *class_vtable; /* must be the first element */
1264         MonoGenericInst *method_inst;
1265         gpointer infos [MONO_ZERO_LEN_ARRAY];
1266 } MonoMethodRuntimeGenericContext;
1267
1268 #define MONO_SIZEOF_METHOD_RUNTIME_GENERIC_CONTEXT (sizeof (MonoMethodRuntimeGenericContext) - MONO_ZERO_LEN_ARRAY * SIZEOF_VOID_P)
1269
1270 #define MONO_RGCTX_SLOT_MAKE_RGCTX(i)   (i)
1271 #define MONO_RGCTX_SLOT_MAKE_MRGCTX(i)  ((i) | 0x80000000)
1272 #define MONO_RGCTX_SLOT_INDEX(s)        ((s) & 0x7fffffff)
1273 #define MONO_RGCTX_SLOT_IS_MRGCTX(s)    (((s) & 0x80000000) ? TRUE : FALSE)
1274
1275 #define MONO_GSHAREDVT_DEL_INVOKE_VT_OFFSET -2
1276
1277 typedef struct {
1278         MonoMethod *method;
1279         MonoRuntimeGenericContextInfoTemplate *entries;
1280         int num_entries, count_entries;
1281 } MonoGSharedVtMethodInfo;
1282
1283 /* This is used by gsharedvt methods to allocate locals and compute local offsets */
1284 typedef struct {
1285         int locals_size;
1286         /*
1287          * The results of resolving the entries in MOonGSharedVtMethodInfo->entries.
1288          * We use this instead of rgctx slots since these can be loaded using a load instead
1289          * of a call to an rgctx fetch trampoline.
1290          */
1291         gpointer entries [MONO_ZERO_LEN_ARRAY];
1292 } MonoGSharedVtMethodRuntimeInfo;
1293
1294 typedef struct
1295 {
1296         MonoMethod *invoke;
1297         MonoMethod *method;
1298         MonoMethodSignature *invoke_sig;
1299         MonoMethodSignature *sig;
1300         gpointer method_ptr;
1301         gpointer invoke_impl;
1302         gpointer impl_this;
1303         gpointer impl_nothis;
1304         gboolean need_rgctx_tramp;
1305 } MonoDelegateTrampInfo;
1306
1307 /*
1308  * A function descriptor, which is a function address + argument pair.
1309  * In llvm-only mode, these are used instead of trampolines to pass
1310  * extra arguments to runtime functions/methods.
1311  */
1312 typedef struct
1313 {
1314         gpointer addr;
1315         gpointer arg;
1316 } MonoFtnDesc;
1317
1318 typedef enum {
1319 #define PATCH_INFO(a,b) MONO_PATCH_INFO_ ## a,
1320 #include "patch-info.h"
1321 #undef PATCH_INFO
1322         MONO_PATCH_INFO_NUM
1323 } MonoJumpInfoType;
1324
1325 /*
1326  * We need to store the image which the token refers to along with the token,
1327  * since the image might not be the same as the image of the method which
1328  * contains the relocation, because of inlining.
1329  */
1330 typedef struct MonoJumpInfoToken {
1331         MonoImage *image;
1332         guint32 token;
1333         gboolean has_context;
1334         MonoGenericContext context;
1335 } MonoJumpInfoToken;
1336
1337 typedef struct MonoJumpInfoBBTable {
1338         MonoBasicBlock **table;
1339         int table_size;
1340 } MonoJumpInfoBBTable;
1341
1342 typedef struct MonoJumpInfoRgctxEntry MonoJumpInfoRgctxEntry;
1343
1344 /* Contains information describing an LLVM IMT trampoline */
1345 typedef struct MonoJumpInfoImtTramp {
1346         MonoMethod *method;
1347         int vt_offset;
1348 } MonoJumpInfoImtTramp;
1349
1350 typedef struct MonoJumpInfoGSharedVtCall MonoJumpInfoGSharedVtCall;
1351
1352 /*
1353  * Represents the method which is called when a virtual call is made to METHOD
1354  * on a receiver of type KLASS.
1355  */
1356 typedef struct {
1357         /* Receiver class */
1358         MonoClass *klass;
1359         /* Virtual method */
1360         MonoMethod *method;
1361 } MonoJumpInfoVirtMethod;
1362
1363 typedef struct MonoJumpInfo MonoJumpInfo;
1364 struct MonoJumpInfo {
1365         MonoJumpInfo *next;
1366         /* Relocation type for patching */
1367         int relocation;
1368         union {
1369                 int i;
1370                 guint8 *p;
1371                 MonoInst *label;
1372         } ip;
1373
1374         MonoJumpInfoType type;
1375         union {
1376                 gconstpointer   target;
1377 #if SIZEOF_VOID_P == 8
1378                 gint64          offset;
1379 #else
1380                 int             offset;
1381 #endif
1382                 int index;
1383                 MonoBasicBlock *bb;
1384                 MonoInst       *inst;
1385                 MonoMethod     *method;
1386                 MonoClass      *klass;
1387                 MonoClassField *field;
1388                 MonoImage      *image;
1389                 MonoVTable     *vtable;
1390                 const char     *name;
1391                 MonoJumpInfoToken  *token;
1392                 MonoJumpInfoBBTable *table;
1393                 MonoJumpInfoRgctxEntry *rgctx_entry;
1394                 MonoJumpInfoImtTramp *imt_tramp;
1395                 MonoJumpInfoGSharedVtCall *gsharedvt;
1396                 MonoGSharedVtMethodInfo *gsharedvt_method;
1397                 MonoMethodSignature *sig;
1398                 MonoDelegateClassMethodPair *del_tramp;
1399                 /* MONO_PATCH_INFO_VIRT_METHOD */
1400                 MonoJumpInfoVirtMethod *virt_method;
1401         } data;
1402 };
1403
1404 /*
1405  * Contains information for computing the
1406  * property given by INFO_TYPE of the runtime
1407  * object described by DATA.
1408  */
1409 struct MonoJumpInfoRgctxEntry {
1410         MonoMethod *method;
1411         gboolean in_mrgctx;
1412         MonoJumpInfo *data; /* describes the data to be loaded */
1413         MonoRgctxInfoType info_type;
1414 };
1415
1416 /* Contains information about a gsharedvt call */
1417 struct MonoJumpInfoGSharedVtCall {
1418         /* The original signature of the call */
1419         MonoMethodSignature *sig;
1420         /* The method which is called */
1421         MonoMethod *method;
1422 };
1423
1424 typedef enum {
1425         MONO_TRAMPOLINE_JIT,
1426         MONO_TRAMPOLINE_JUMP,
1427         MONO_TRAMPOLINE_RGCTX_LAZY_FETCH,
1428         MONO_TRAMPOLINE_AOT,
1429         MONO_TRAMPOLINE_AOT_PLT,
1430         MONO_TRAMPOLINE_DELEGATE,
1431         MONO_TRAMPOLINE_RESTORE_STACK_PROT,
1432         MONO_TRAMPOLINE_GENERIC_VIRTUAL_REMOTING,
1433         MONO_TRAMPOLINE_VCALL,
1434         MONO_TRAMPOLINE_HANDLER_BLOCK_GUARD,
1435         MONO_TRAMPOLINE_NUM
1436 } MonoTrampolineType;
1437
1438 /* These trampolines return normally to their caller */
1439 #define MONO_TRAMPOLINE_TYPE_MUST_RETURN(t)             \
1440         ((t) == MONO_TRAMPOLINE_RESTORE_STACK_PROT ||   \
1441          (t) == MONO_TRAMPOLINE_RGCTX_LAZY_FETCH)
1442
1443 /* These trampolines receive an argument directly in a register */
1444 #define MONO_TRAMPOLINE_TYPE_HAS_ARG(t)         \
1445         ((t) == MONO_TRAMPOLINE_HANDLER_BLOCK_GUARD)
1446
1447 /* optimization flags */
1448 #define OPTFLAG(id,shift,name,descr) MONO_OPT_ ## id = 1 << shift,
1449 enum {
1450 #include "optflags-def.h"
1451         MONO_OPT_LAST
1452 };
1453
1454 /*
1455  * This structure represents a JIT backend.
1456  */
1457 typedef struct {
1458         guint            have_card_table_wb : 1;
1459         guint            have_op_generic_class_init : 1;
1460         guint            emulate_mul_div : 1;
1461         guint            emulate_div : 1;
1462         guint            emulate_long_shift_opts : 1;
1463         guint            have_objc_get_selector : 1;
1464         guint            have_generalized_imt_thunk : 1;
1465         guint            have_tls_get : 1;
1466         guint            have_tls_get_reg : 1;
1467         guint            have_liverange_ops: 1;
1468         guint            have_op_tail_call : 1;
1469         guint            have_dummy_init : 1;
1470         guint            gshared_supported : 1;
1471         guint            use_fpstack : 1;
1472         guint            ilp32 : 1;
1473         guint            need_got_var : 1;
1474         guint            need_div_check : 1;
1475         guint            no_unaligned_access : 1;
1476         int              monitor_enter_adjustment;
1477         int              dyn_call_param_area;
1478 } MonoBackend;
1479
1480 /* Flags for mini_method_compile () */
1481 typedef enum {
1482         /* Whenever to run cctors during JITting */
1483         JIT_FLAG_RUN_CCTORS = (1 << 0),
1484         /* Whenever this is an AOT compilation */
1485         JIT_FLAG_AOT = (1 << 1),
1486         /* Whenever this is a full AOT compilation */
1487         JIT_FLAG_FULL_AOT = (1 << 2),
1488         /* Whenever to compile with LLVM */
1489         JIT_FLAG_LLVM = (1 << 3),
1490         /* Whenever to disable direct calls to direct calls to icall functions */
1491         JIT_FLAG_NO_DIRECT_ICALLS = (1 << 4),
1492         /* Emit explicit null checks */
1493         JIT_FLAG_EXPLICIT_NULL_CHECKS = (1 << 5),
1494         /* Whenever to compile in llvm-only mode */
1495         JIT_FLAG_LLVM_ONLY = (1 << 6),
1496 } JitFlags;
1497
1498 /* Bit-fields in the MonoBasicBlock.region */
1499 #define MONO_REGION_TRY       0
1500 #define MONO_REGION_FINALLY  16
1501 #define MONO_REGION_CATCH    32
1502 #define MONO_REGION_FAULT    64         /* Currently unused */
1503 #define MONO_REGION_FILTER  128
1504
1505 #define MONO_BBLOCK_IS_IN_REGION(bblock, regtype) (((bblock)->region & (0xf << 4)) == (regtype))
1506
1507 #define MONO_REGION_FLAGS(region) ((region) & 0x7)
1508 #define MONO_REGION_CLAUSE_INDEX(region) (((region) >> 8) - 1)
1509
1510 #define get_vreg_to_inst(cfg, vreg) ((vreg) < (cfg)->vreg_to_inst_len ? (cfg)->vreg_to_inst [(vreg)] : NULL)
1511
1512 #define vreg_is_volatile(cfg, vreg) (G_UNLIKELY (get_vreg_to_inst ((cfg), (vreg)) && (get_vreg_to_inst ((cfg), (vreg))->flags & (MONO_INST_VOLATILE|MONO_INST_INDIRECT))))
1513
1514 #define vreg_is_ref(cfg, vreg) ((vreg) < (cfg)->vreg_is_ref_len ? (cfg)->vreg_is_ref [(vreg)] : 0)
1515 #define vreg_is_mp(cfg, vreg) ((vreg) < (cfg)->vreg_is_mp_len ? (cfg)->vreg_is_mp [(vreg)] : 0)
1516
1517 /*
1518  * Control Flow Graph and compilation unit information
1519  */
1520 typedef struct {
1521         MonoMethod      *method;
1522         MonoMethodHeader *header;
1523         MonoMemPool     *mempool;
1524         MonoInst       **varinfo;
1525         MonoMethodVar   *vars;
1526         MonoInst        *ret;
1527         MonoBasicBlock  *bb_entry;
1528         MonoBasicBlock  *bb_exit;
1529         MonoBasicBlock  *bb_init;
1530         MonoBasicBlock **bblocks;
1531         MonoBasicBlock **cil_offset_to_bb;
1532         MonoMemPool     *state_pool; /* used by instruction selection */
1533         MonoBasicBlock  *cbb;        /* used by instruction selection */
1534         MonoInst        *prev_ins;   /* in decompose */
1535         MonoJumpInfo    *patch_info;
1536         MonoJitInfo     *jit_info;
1537         MonoJitDynamicMethodInfo *dynamic_info;
1538         guint            num_bblocks, max_block_num;
1539         guint            locals_start;
1540         guint            num_varinfo; /* used items in varinfo */
1541         guint            varinfo_count; /* total storage in varinfo */
1542         gint             stack_offset;
1543         gint             max_ireg;
1544         gint             cil_offset_to_bb_len;
1545         MonoRegState    *rs;
1546         MonoSpillInfo   *spill_info [16]; /* machine register spills */
1547         gint             spill_count;
1548         gint             spill_info_len [16];
1549         /* unsigned char   *cil_code; */
1550         MonoMethod      *inlined_method; /* the method which is currently inlined */
1551         MonoInst        *domainvar; /* a cache for the current domain */
1552         MonoInst        *got_var; /* Global Offset Table variable */
1553         MonoInst        **locals;
1554         MonoInst        *rgctx_var; /* Runtime generic context variable (for static generic methods) */
1555         MonoInst        **args;
1556         MonoType        **arg_types;
1557         MonoMethod      *current_method; /* The method currently processed by method_to_ir () */
1558         MonoMethod      *method_to_register; /* The method to register in JIT info tables */
1559         MonoGenericContext *generic_context;
1560
1561         MonoBackend *backend;
1562
1563         /*
1564          * This variable represents the hidden argument holding the vtype
1565          * return address. If the method returns something other than a vtype, or
1566          * the vtype is returned in registers this is NULL.
1567          */
1568         MonoInst        *vret_addr;
1569
1570         /*
1571          * This is used to initialize the cil_code field of MonoInst's.
1572          */
1573         const unsigned char *ip;
1574
1575         struct MonoAliasingInformation *aliasing_info;
1576
1577         /* A hashtable of region ID-> SP var mappings */
1578         /* An SP var is a place to store the stack pointer (used by handlers)*/
1579         GHashTable      *spvars;
1580
1581         /* A hashtable of region ID -> EX var mappings */
1582         /* An EX var stores the exception object passed to catch/filter blocks */
1583         GHashTable      *exvars;
1584
1585         GList           *ldstr_list; /* used by AOT */
1586
1587         MonoDomain      *domain;
1588
1589         guint            real_offset;
1590         GHashTable      *cbb_hash;
1591
1592         /* The current virtual register number */
1593         guint32 next_vreg;
1594
1595         MonoGenericSharingContext gsctx;
1596         MonoGenericContext *gsctx_context;
1597
1598         MonoGSharedVtMethodInfo *gsharedvt_info;
1599
1600         /* Points to the gsharedvt locals area at runtime */
1601         MonoInst *gsharedvt_locals_var;
1602
1603         /* The localloc instruction used to initialize gsharedvt_locals_var */
1604         MonoInst *gsharedvt_locals_var_ins;
1605
1606         /* Points to a MonoGSharedVtMethodRuntimeInfo at runtime */
1607         MonoInst *gsharedvt_info_var;
1608
1609         /* For native-to-managed wrappers, CEE_MONO_JIT_(AT|DE)TACH opcodes */
1610         MonoInst *orig_domain_var;
1611
1612         MonoInst *lmf_var;
1613         MonoInst *lmf_addr_var;
1614
1615         MonoInst *stack_inbalance_var;
1616
1617         unsigned char   *cil_start;
1618 #ifdef __native_client_codegen__
1619         /* this alloc is not aligned, native_code */
1620         /* is the 32-byte aligned version of this */
1621         unsigned char   *native_code_alloc;
1622 #endif
1623         unsigned char   *native_code;
1624         guint            code_size;
1625         guint            code_len;
1626         guint            prolog_end;
1627         guint            epilog_begin;
1628         guint            epilog_end;
1629         regmask_t        used_int_regs;
1630         guint32          opt;
1631         guint32          prof_options;
1632         guint32          flags;
1633         guint32          comp_done;
1634         guint32          verbose_level;
1635         guint32          stack_usage;
1636         guint32          param_area;
1637         guint32          frame_reg;
1638         gint32           sig_cookie;
1639         guint            disable_aot : 1;
1640         guint            disable_ssa : 1;
1641         guint            disable_llvm : 1;
1642         guint            enable_extended_bblocks : 1;
1643         guint            run_cctors : 1;
1644         guint            need_lmf_area : 1;
1645         guint            compile_aot : 1;
1646         guint            full_aot : 1;
1647         guint            compile_llvm : 1;
1648         guint            got_var_allocated : 1;
1649         guint            ret_var_is_local : 1;
1650         guint            ret_var_set : 1;
1651         guint            unverifiable : 1;
1652         guint            skip_visibility : 1;
1653         guint            disable_reuse_registers : 1;
1654         guint            disable_reuse_stack_slots : 1;
1655         guint            disable_reuse_ref_stack_slots : 1;
1656         guint            disable_ref_noref_stack_slot_share : 1;
1657         guint            disable_initlocals_opt : 1;
1658         guint            disable_initlocals_opt_refs : 1;
1659         guint            disable_omit_fp : 1;
1660         guint            disable_vreg_to_lvreg : 1;
1661         guint            disable_deadce_vars : 1;
1662         guint            disable_out_of_line_bblocks : 1;
1663         guint            disable_direct_icalls : 1;
1664         guint            disable_gc_safe_points : 1;
1665         guint            create_lmf_var : 1;
1666         /*
1667          * When this is set, the code to push/pop the LMF from the LMF stack is generated as IR
1668          * instead of being generated in emit_prolog ()/emit_epilog ().
1669          */
1670         guint            lmf_ir : 1;
1671         /*
1672          * Whenever to use the mono_lmf TLS variable instead of indirection through the
1673          * mono_lmf_addr TLS variable.
1674          */
1675         guint            lmf_ir_mono_lmf : 1;
1676         guint            gen_write_barriers : 1;
1677         guint            init_ref_vars : 1;
1678         guint            extend_live_ranges : 1;
1679         guint            compute_precise_live_ranges : 1;
1680         guint            has_got_slots : 1;
1681         guint            uses_rgctx_reg : 1;
1682         guint            uses_vtable_reg : 1;
1683         guint            uses_simd_intrinsics : 1;
1684         guint            keep_cil_nops : 1;
1685         guint            gen_seq_points : 1;
1686         /* Generate seq points for use by the debugger */
1687         guint            gen_sdb_seq_points : 1;
1688         guint            explicit_null_checks : 1;
1689         guint            compute_gc_maps : 1;
1690         guint            soft_breakpoints : 1;
1691         guint            arch_eh_jit_info : 1;
1692         guint            has_emulated_ops : 1;
1693         guint            has_indirection : 1;
1694         guint            has_atomic_add_i4 : 1;
1695         guint            has_atomic_exchange_i4 : 1;
1696         guint            has_atomic_cas_i4 : 1;
1697         guint            check_pinvoke_callconv : 1;
1698         guint            has_unwind_info_for_epilog : 1;
1699         guint            disable_inline : 1;
1700         /* Disable inlining into caller */
1701         guint            no_inline : 1;
1702         guint            gshared : 1;
1703         guint            gsharedvt : 1;
1704         guint            r4fp : 1;
1705         guint            llvm_only : 1;
1706         int              r4_stack_type;
1707         gpointer         debug_info;
1708         guint32          lmf_offset;
1709     guint16          *intvars;
1710         MonoProfileCoverageInfo *coverage_info;
1711         GHashTable       *token_info_hash;
1712         MonoCompileArch  arch;
1713         guint32          inline_depth;
1714         /* Size of memory reserved for thunks */
1715         int              thunk_area;
1716         /* Thunks */
1717         guint8          *thunks;
1718         /* Offset between the start of code and the thunks area */
1719         int              thunks_offset;
1720         guint32          exception_type;        /* MONO_EXCEPTION_* */
1721         guint32          exception_data;
1722         char*            exception_message;
1723         gpointer         exception_ptr;
1724
1725         guint8 *         encoded_unwind_ops;
1726         guint32          encoded_unwind_ops_len;
1727         GSList*          unwind_ops;
1728
1729         GList*           dont_inline;
1730
1731         /* Fields used by the local reg allocator */
1732         void*            reginfo;
1733         int              reginfo_len;
1734
1735         /* Maps vregs to their associated MonoInst's */
1736         /* vregs with an associated MonoInst are 'global' while others are 'local' */
1737         MonoInst **vreg_to_inst;
1738
1739         /* Size of above array */
1740         guint32 vreg_to_inst_len;
1741
1742         /* Marks vregs which hold a GC ref */
1743         /* FIXME: Use a bitmap */
1744         gboolean *vreg_is_ref;
1745
1746         /* Size of above array */
1747         guint32 vreg_is_ref_len;
1748
1749         /* Marks vregs which hold a managed pointer */
1750         /* FIXME: Use a bitmap */
1751         gboolean *vreg_is_mp;
1752
1753         /* Size of above array */
1754         guint32 vreg_is_mp_len;
1755
1756         /*
1757          * The original method to compile, differs from 'method' when doing generic
1758          * sharing.
1759          */
1760         MonoMethod *orig_method;
1761
1762         /* Patches which describe absolute addresses embedded into the native code */
1763         GHashTable *abs_patches;
1764
1765         /* If the arch passes valuetypes by address, then for methods
1766            which use JMP the arch code should use these local
1767            variables to store the addresses of incoming valuetypes.
1768            The addresses should be stored in mono_arch_emit_prolog()
1769            and can be used when emitting code for OP_JMP.  See
1770            mini-ppc.c. */
1771         MonoInst **tailcall_valuetype_addrs;
1772
1773         /* Used to implement move_i4_to_f on archs that can't do raw
1774         copy between an ireg and a freg. This is an int32 var.*/
1775         MonoInst *iconv_raw_var;
1776
1777         /* Used to implement fconv_to_r8_x. This is a double (8 bytes) var.*/
1778         MonoInst *fconv_to_r8_x_var;
1779
1780         /*Use to implement simd constructors. This is a vector (16 bytes) var.*/
1781         MonoInst *simd_ctor_var;
1782
1783         /* Used to implement dyn_call */
1784         MonoInst *dyn_call_var;
1785
1786         /*
1787          * List of sequence points represented as IL offset+native offset pairs.
1788          * Allocated using glib.
1789          * IL offset can be -1 or 0xffffff to refer to the sequence points
1790          * inside the prolog and epilog used to implement method entry/exit events.
1791          */
1792         GPtrArray *seq_points;
1793
1794         /* The encoded sequence point info */
1795         struct MonoSeqPointInfo *seq_point_info;
1796
1797         /* Method headers which need to be freed after compilation */
1798         GSList *headers_to_free;
1799
1800         /* Used by AOT */
1801         guint32 got_offset, ex_info_offset, method_info_offset, method_index;
1802         /* Symbol used to refer to this method in generated assembly */
1803         char *asm_symbol;
1804         char *asm_debug_symbol;
1805         char *llvm_method_name;
1806         int castclass_cache_index;
1807
1808         MonoJitExceptionInfo *llvm_ex_info;
1809         guint32 llvm_ex_info_len;
1810         int llvm_this_reg, llvm_this_offset;
1811
1812         GSList *try_block_holes;
1813
1814         /* DWARF location list for 'this' */
1815         GSList *this_loclist;
1816
1817         /* DWARF location list for 'rgctx_var' */
1818         GSList *rgctx_loclist;
1819
1820         int *gsharedvt_vreg_to_idx;
1821
1822         GSList *signatures;
1823
1824         /* GC Maps */
1825
1826         /* The offsets of the locals area relative to the frame pointer */
1827         gint locals_min_stack_offset, locals_max_stack_offset;
1828
1829         /* The current CFA rule */
1830         int cur_cfa_reg, cur_cfa_offset;
1831
1832         /* The final CFA rule at the end of the prolog */
1833         int cfa_reg, cfa_offset;
1834
1835         /* Points to a MonoCompileGC */
1836         gpointer gc_info;
1837
1838         /*
1839          * The encoded GC map along with its size. This contains binary data so it can be saved in an AOT
1840          * image etc, but it requires a 4 byte alignment.
1841          */
1842         guint8 *gc_map;
1843         guint32 gc_map_size;
1844
1845         /* Error handling */
1846         MonoError error;
1847
1848         /* pointer to context datastructure used for graph dumping */
1849         MonoGraphDumper *gdump_ctx;
1850
1851         /* Stats */
1852         int stat_allocate_var;
1853         int stat_locals_stack_size;
1854         int stat_basic_blocks;
1855         int stat_cil_code_size;
1856         int stat_n_regvars;
1857         int stat_inlineable_methods;
1858         int stat_inlined_methods;
1859         int stat_code_reallocs;
1860 } MonoCompile;
1861
1862 typedef enum {
1863         MONO_CFG_HAS_ALLOCA = 1 << 0,
1864         MONO_CFG_HAS_CALLS  = 1 << 1,
1865         MONO_CFG_HAS_LDELEMA  = 1 << 2,
1866         MONO_CFG_HAS_VARARGS  = 1 << 3,
1867         MONO_CFG_HAS_TAIL     = 1 << 4,
1868         MONO_CFG_HAS_FPOUT    = 1 << 5, /* there are fp values passed in int registers */
1869         MONO_CFG_HAS_SPILLUP  = 1 << 6, /* spill var slots are allocated from bottom to top */
1870         MONO_CFG_HAS_CHECK_THIS  = 1 << 7,
1871         MONO_CFG_HAS_ARRAY_ACCESS = 1 << 8
1872 } MonoCompileFlags;
1873
1874 typedef struct {
1875         gint32 methods_compiled;
1876         gint32 methods_aot;
1877         gint32 methods_lookups;
1878         gint32 allocate_var;
1879         gint32 cil_code_size;
1880         gint32 native_code_size;
1881         gint32 code_reallocs;
1882         gint32 max_code_size_ratio;
1883         gint32 biggest_method_size;
1884         gint32 allocated_code_size;
1885         gint32 allocated_seq_points_size;
1886         gint32 inlineable_methods;
1887         gint32 inlined_methods;
1888         gint32 basic_blocks;
1889         gint32 max_basic_blocks;
1890         gint32 locals_stack_size;
1891         gint32 regvars;
1892         gint32 generic_virtual_invocations;
1893         gint32 alias_found;
1894         gint32 alias_removed;
1895         gint32 loads_eliminated;
1896         gint32 stores_eliminated;
1897         int methods_with_llvm;
1898         int methods_without_llvm;
1899         char *max_ratio_method;
1900         char *biggest_method;
1901         double jit_method_to_ir;
1902         double jit_liveness_handle_exception_clauses;
1903         double jit_handle_out_of_line_bblock;
1904         double jit_decompose_long_opts;
1905         double jit_local_cprop;
1906         double jit_local_emulate_ops;
1907         double jit_optimize_branches;
1908         double jit_handle_global_vregs;
1909         double jit_local_deadce;
1910         double jit_local_alias_analysis;
1911         double jit_if_conversion;
1912         double jit_bb_ordering;
1913         double jit_compile_dominator_info;
1914         double jit_compute_natural_loops;
1915         double jit_insert_safepoints;
1916         double jit_ssa_compute;
1917         double jit_ssa_cprop;
1918         double jit_ssa_deadce;
1919         double jit_perform_abc_removal;
1920         double jit_ssa_remove;
1921         double jit_local_cprop2;
1922         double jit_handle_global_vregs2;
1923         double jit_local_deadce2;
1924         double jit_optimize_branches2;
1925         double jit_decompose_vtype_opts;
1926         double jit_decompose_array_access_opts;
1927         double jit_liveness_handle_exception_clauses2;
1928         double jit_analyze_liveness;
1929         double jit_linear_scan;
1930         double jit_arch_allocate_vars;
1931         double jit_spill_global_vars;
1932         double jit_local_cprop3;
1933         double jit_local_deadce3;
1934         double jit_codegen;
1935         double jit_create_jit_info;
1936         double jit_gc_create_gc_map;
1937         double jit_save_seq_point_info;
1938         double jit_time;
1939         gboolean enabled;
1940 } MonoJitStats;
1941
1942 extern MonoJitStats mono_jit_stats;
1943
1944 /* opcodes: value assigned after all the CIL opcodes */
1945 #ifdef MINI_OP
1946 #undef MINI_OP
1947 #endif
1948 #ifdef MINI_OP3
1949 #undef MINI_OP3
1950 #endif
1951 #define MINI_OP(a,b,dest,src1,src2) a,
1952 #define MINI_OP3(a,b,dest,src1,src2,src3) a,
1953 enum {
1954         OP_START = MONO_CEE_LAST - 1,
1955 #include "mini-ops.h"
1956         OP_LAST
1957 };
1958 #undef MINI_OP
1959 #undef MINI_OP3
1960
1961 #if SIZEOF_VOID_P == 8
1962 #define OP_PCONST OP_I8CONST
1963 #define OP_DUMMY_PCONST OP_DUMMY_I8CONST
1964 #define OP_PADD OP_LADD
1965 #define OP_PADD_IMM OP_LADD_IMM
1966 #define OP_PSUB_IMM OP_LSUB_IMM
1967 #define OP_PAND_IMM OP_LAND_IMM
1968 #define OP_PXOR_IMM OP_LXOR_IMM
1969 #define OP_PSUB OP_LSUB
1970 #define OP_PMUL OP_LMUL
1971 #define OP_PMUL_IMM OP_LMUL_IMM
1972 #define OP_PNEG OP_LNEG
1973 #define OP_PCONV_TO_I1 OP_LCONV_TO_I1
1974 #define OP_PCONV_TO_U1 OP_LCONV_TO_U1
1975 #define OP_PCONV_TO_I2 OP_LCONV_TO_I2
1976 #define OP_PCONV_TO_U2 OP_LCONV_TO_U2
1977 #define OP_PCONV_TO_OVF_I1_UN OP_LCONV_TO_OVF_I1_UN
1978 #define OP_PCONV_TO_OVF_I1 OP_LCONV_TO_OVF_I1
1979 #define OP_PBEQ OP_LBEQ
1980 #define OP_PCEQ OP_LCEQ
1981 #define OP_PBNE_UN OP_LBNE_UN
1982 #define OP_PBGE_UN OP_LBGE_UN
1983 #define OP_PBLT_UN OP_LBLT_UN
1984 #define OP_PBGE OP_LBGE
1985 #define OP_STOREP_MEMBASE_REG OP_STOREI8_MEMBASE_REG
1986 #define OP_STOREP_MEMBASE_IMM OP_STOREI8_MEMBASE_IMM
1987 #else
1988 #define OP_PCONST OP_ICONST
1989 #define OP_DUMMY_PCONST OP_DUMMY_ICONST
1990 #define OP_PADD OP_IADD
1991 #define OP_PADD_IMM OP_IADD_IMM
1992 #define OP_PSUB_IMM OP_ISUB_IMM
1993 #define OP_PAND_IMM OP_IAND_IMM
1994 #define OP_PXOR_IMM OP_IXOR_IMM
1995 #define OP_PSUB OP_ISUB
1996 #define OP_PMUL OP_IMUL
1997 #define OP_PMUL_IMM OP_IMUL_IMM
1998 #define OP_PNEG OP_INEG
1999 #define OP_PCONV_TO_I1 OP_ICONV_TO_I1
2000 #define OP_PCONV_TO_U1 OP_ICONV_TO_U1
2001 #define OP_PCONV_TO_I2 OP_ICONV_TO_I2
2002 #define OP_PCONV_TO_U2 OP_ICONV_TO_U2
2003 #define OP_PCONV_TO_OVF_I1_UN OP_ICONV_TO_OVF_I1_UN
2004 #define OP_PCONV_TO_OVF_I1 OP_ICONV_TO_OVF_I1
2005 #define OP_PBEQ OP_IBEQ
2006 #define OP_PCEQ OP_ICEQ
2007 #define OP_PBNE_UN OP_IBNE_UN
2008 #define OP_PBGE_UN OP_IBGE_UN
2009 #define OP_PBLT_UN OP_IBLT_UN
2010 #define OP_PBGE OP_IBGE
2011 #define OP_STOREP_MEMBASE_REG OP_STOREI4_MEMBASE_REG
2012 #define OP_STOREP_MEMBASE_IMM OP_STOREI4_MEMBASE_IMM
2013 #endif
2014
2015 /* Opcodes to load/store regsize quantities */
2016 #if defined (__mono_ilp32__)
2017 #define OP_LOADR_MEMBASE OP_LOADI8_MEMBASE
2018 #define OP_STORER_MEMBASE_REG OP_STOREI8_MEMBASE_REG
2019 #else
2020 #define OP_LOADR_MEMBASE OP_LOAD_MEMBASE
2021 #define OP_STORER_MEMBASE_REG OP_STORE_MEMBASE_REG
2022 #endif
2023
2024 typedef enum {
2025         STACK_INV,
2026         STACK_I4,
2027         STACK_I8,
2028         STACK_PTR,
2029         STACK_R8,
2030         STACK_MP,
2031         STACK_OBJ,
2032         STACK_VTYPE,
2033         STACK_R4,
2034         STACK_MAX
2035 } MonoStackType;
2036
2037 typedef struct {
2038         union {
2039                 double   r8;
2040                 gint32   i4;
2041                 gint64   i8;
2042                 gpointer p;
2043                 MonoClass *klass;
2044         } data;
2045         int type;
2046 } StackSlot;
2047
2048 #if HAVE_ARRAY_ELEM_INIT
2049 extern const guint8 mono_burg_arity [];
2050 #else
2051 extern guint8 mono_burg_arity [];
2052 #endif
2053
2054 extern const char MONO_ARCH_CPU_SPEC [];
2055 #define MONO_ARCH_CPU_SPEC_IDX_COMBINE(a) a ## _idx
2056 #define MONO_ARCH_CPU_SPEC_IDX(a) MONO_ARCH_CPU_SPEC_IDX_COMBINE(a)
2057 extern const guint16 MONO_ARCH_CPU_SPEC_IDX(MONO_ARCH_CPU_SPEC) [];
2058 #define ins_get_spec(op) ((const char*)&MONO_ARCH_CPU_SPEC + MONO_ARCH_CPU_SPEC_IDX(MONO_ARCH_CPU_SPEC)[(op) - OP_LOAD])
2059
2060 enum {
2061         MONO_COMP_DOM = 1,
2062         MONO_COMP_IDOM = 2,
2063         MONO_COMP_DFRONTIER = 4,
2064         MONO_COMP_DOM_REV = 8,
2065         MONO_COMP_LIVENESS = 16,
2066         MONO_COMP_SSA = 32,
2067         MONO_COMP_SSA_DEF_USE = 64,
2068         MONO_COMP_REACHABILITY = 128,
2069         MONO_COMP_LOOPS = 256
2070 };
2071
2072 typedef enum {
2073         MONO_GRAPH_CFG = 1,
2074         MONO_GRAPH_DTREE = 2,
2075         MONO_GRAPH_CFG_CODE = 4,
2076         MONO_GRAPH_CFG_SSA = 8,
2077         MONO_GRAPH_CFG_OPTCODE = 16
2078 } MonoGraphOptions;
2079
2080 typedef struct {
2081         guint16 size;
2082         guint16 offset;
2083         guint8  pad;
2084 } MonoJitArgumentInfo;
2085
2086 typedef struct {
2087         gboolean handle_sigint;
2088         gboolean keep_delegates;
2089         gboolean reverse_pinvoke_exceptions;
2090         gboolean collect_pagefault_stats;
2091         gboolean break_on_unverified;
2092         gboolean better_cast_details;
2093         gboolean mdb_optimizations;
2094         gboolean no_gdb_backtrace;
2095         gboolean suspend_on_sigsegv;
2096         gboolean suspend_on_exception;
2097         gboolean suspend_on_unhandled;
2098         gboolean dyn_runtime_invoke;
2099         gboolean gdb;
2100         gboolean arm_use_fallback_tls;
2101         /*
2102          * Whenever data such as next sequence points and flags is required.
2103          * Next sequence points and flags are required by the debugger agent.
2104          */
2105         gboolean gen_sdb_seq_points;
2106         gboolean gen_seq_points_compact_data;
2107         /*
2108          * Setting single_imm_size should guarantee that each time managed code is compiled
2109          * the same instructions and registers are used, regardless of the size of used values.
2110          */
2111         gboolean single_imm_size;
2112         gboolean explicit_null_checks;
2113         /*
2114          * Fill stack frames with 0x2a in method prologs. This helps with the
2115          * debugging of the stack marking code in the GC.
2116          */
2117         gboolean init_stacks;
2118
2119         /*
2120          * Whenever to implement single stepping and breakpoints without signals in the
2121          * soft debugger. This is useful on platforms without signals, like the ps3, or during
2122          * runtime debugging, since it avoids SIGSEGVs when a single step location or breakpoint
2123          * is hit.
2124          */
2125         gboolean soft_breakpoints;
2126         /*
2127          * Whenever to break in the debugger using G_BREAKPOINT on unhandled exceptions.
2128          */
2129         gboolean break_on_exc;
2130         /*
2131          * Load AOT JIT info eagerly.
2132          */
2133         gboolean load_aot_jit_info_eagerly;
2134         /*
2135          * Check for pinvoke calling convention mismatches.
2136          */
2137         gboolean check_pinvoke_callconv;
2138         /*
2139          * Translate Debugger.Break () into a native breakpoint signal
2140          */
2141         gboolean native_debugger_break;
2142         /*
2143          * Disabling the frame pointer emit optimization can allow debuggers to more easily
2144          * identify the stack on some platforms
2145          */
2146         gboolean disable_omit_fp;
2147 } MonoDebugOptions;
2148
2149 enum {
2150         BRANCH_NOT_TAKEN,
2151         BRANCH_TAKEN,
2152         BRANCH_UNDEF
2153 };
2154
2155 typedef enum {
2156         CMP_EQ,
2157         CMP_NE,
2158         CMP_LE,
2159         CMP_GE,
2160         CMP_LT,
2161         CMP_GT,
2162         CMP_LE_UN,
2163         CMP_GE_UN,
2164         CMP_LT_UN,
2165         CMP_GT_UN
2166 } CompRelation;
2167
2168 typedef enum {
2169         CMP_TYPE_L,
2170         CMP_TYPE_I,
2171         CMP_TYPE_F
2172 } CompType;
2173
2174 /* Implicit exceptions */
2175 enum {
2176         MONO_EXC_INDEX_OUT_OF_RANGE,
2177         MONO_EXC_OVERFLOW,
2178         MONO_EXC_ARITHMETIC,
2179         MONO_EXC_DIVIDE_BY_ZERO,
2180         MONO_EXC_INVALID_CAST,
2181         MONO_EXC_NULL_REF,
2182         MONO_EXC_ARRAY_TYPE_MISMATCH,
2183         MONO_EXC_ARGUMENT,
2184         MONO_EXC_INTRINS_NUM
2185 };
2186
2187 enum {
2188         MINI_TOKEN_SOURCE_CLASS,
2189         MINI_TOKEN_SOURCE_METHOD,
2190         MINI_TOKEN_SOURCE_FIELD
2191 };
2192
2193  /*
2194   * Information about a trampoline function.
2195   */
2196  typedef struct
2197  {
2198         /*
2199          * The native code of the trampoline. Not owned by this structure.
2200          */
2201         guint8 *code;
2202         guint32 code_size;
2203         /*
2204          * The name of the trampoline which can be used in AOT/xdebug. Owned by this
2205          * structure.
2206          */
2207         char *name;
2208         /*
2209          * Patches required by the trampoline when aot-ing. Owned by this structure.
2210          */
2211         MonoJumpInfo *ji;
2212         /*
2213          * Unwind information. Owned by this structure.
2214          */
2215         GSList *unwind_ops;
2216
2217          /*
2218           * Encoded unwind info loaded from AOT images
2219           */
2220          guint8 *uw_info;
2221          guint32 uw_info_len;
2222 } MonoTrampInfo;
2223
2224 typedef void (*MonoInstFunc) (MonoInst *tree, gpointer data);
2225
2226 enum {
2227         FILTER_IL_SEQ_POINT = 1 << 0,
2228         FILTER_NOP          = 1 << 1,
2229 };
2230
2231 static inline gboolean
2232 mono_inst_filter (MonoInst *ins, int filter)
2233 {
2234         if (!ins || !filter)
2235                 return FALSE;
2236
2237         if ((filter & FILTER_IL_SEQ_POINT) && ins->opcode == OP_IL_SEQ_POINT)
2238                 return TRUE;
2239
2240         if ((filter & FILTER_NOP) && ins->opcode == OP_NOP)
2241                 return TRUE;
2242
2243         return FALSE;
2244 }
2245
2246 static inline MonoInst*
2247 mono_inst_next (MonoInst *ins, int filter)
2248 {
2249         do {
2250                 ins = ins->next;
2251         } while (mono_inst_filter (ins, filter));
2252
2253         return ins;
2254 }
2255
2256 static inline MonoInst*
2257 mono_inst_prev (MonoInst *ins, int filter)
2258 {
2259         do {
2260                 ins = ins->prev;
2261         } while (mono_inst_filter (ins, filter));
2262
2263         return ins;
2264 }
2265
2266 static inline MonoInst*
2267 mono_bb_first_inst (MonoBasicBlock *bb, int filter)
2268 {
2269         MonoInst *ins = bb->code;
2270         if (mono_inst_filter (ins, filter))
2271                 ins = mono_inst_next (ins, filter);
2272
2273         return ins;
2274 }
2275
2276 static inline MonoInst*
2277 mono_bb_last_inst (MonoBasicBlock *bb, int filter)
2278 {
2279         MonoInst *ins = bb->last_ins;
2280         if (mono_inst_filter (ins, filter))
2281                 ins = mono_inst_prev (ins, filter);
2282
2283         return ins;
2284 }
2285
2286 /* main function */
2287 MONO_API int         mono_main                      (int argc, char* argv[]);
2288 MONO_API void        mono_set_defaults              (int verbose_level, guint32 opts);
2289 MONO_API void        mono_parse_env_options         (int *ref_argc, char **ref_argv []);
2290 MONO_API char       *mono_parse_options_from        (const char *options, int *ref_argc, char **ref_argv []);
2291
2292 MonoDomain* mini_init                      (const char *filename, const char *runtime_version);
2293 void        mini_cleanup                   (MonoDomain *domain);
2294 MONO_API MonoDebugOptions *mini_get_debug_options   (void);
2295 MONO_API gboolean    mini_parse_debug_option (const char *option);
2296
2297 /* graph dumping */
2298 void mono_cfg_dump_create_context (MonoCompile *cfg);
2299 void mono_cfg_dump_begin_group (MonoCompile *cfg);
2300 void mono_cfg_dump_close_group (MonoCompile *cfg);
2301 void mono_cfg_dump_ir (MonoCompile *cfg, const char *phase_name);
2302
2303 /* helper methods */
2304 void      mini_jit_init                    (void);
2305 void      mini_jit_cleanup                 (void);
2306 void      mono_disable_optimizations       (guint32 opts);
2307 void      mono_set_optimizations           (guint32 opts);
2308 void      mono_set_bisect_methods          (guint32 opt, const char *method_list_filename);
2309 guint32   mono_get_optimizations_for_method (MonoMethod *method, guint32 default_opt);
2310 char*     mono_opt_descr                   (guint32 flags);
2311 void      mono_set_verbose_level           (guint32 level);
2312 MonoJumpInfoToken* mono_jump_info_token_new (MonoMemPool *mp, MonoImage *image, guint32 token);
2313 MonoJumpInfoToken* mono_jump_info_token_new2 (MonoMemPool *mp, MonoImage *image, guint32 token, MonoGenericContext *context);
2314 MonoInst* mono_find_spvar_for_region        (MonoCompile *cfg, int region);
2315 MonoInst* mono_find_exvar_for_offset        (MonoCompile *cfg, int offset);
2316 int       mono_get_block_region_notry       (MonoCompile *cfg, int region) MONO_LLVM_INTERNAL;
2317
2318 void      mono_precompile_assemblies        (void);
2319 MONO_API int       mono_parse_default_optimizations  (const char* p);
2320 void      mono_bblock_add_inst              (MonoBasicBlock *bb, MonoInst *inst) MONO_LLVM_INTERNAL;
2321 void      mono_bblock_insert_after_ins      (MonoBasicBlock *bb, MonoInst *ins, MonoInst *ins_to_insert);
2322 void      mono_bblock_insert_before_ins     (MonoBasicBlock *bb, MonoInst *ins, MonoInst *ins_to_insert);
2323 void      mono_verify_bblock                (MonoBasicBlock *bb);
2324 void      mono_verify_cfg                   (MonoCompile *cfg);
2325 void      mono_constant_fold                (MonoCompile *cfg);
2326 MonoInst* mono_constant_fold_ins            (MonoCompile *cfg, MonoInst *ins, MonoInst *arg1, MonoInst *arg2, gboolean overwrite);
2327 int       mono_eval_cond_branch             (MonoInst *branch);
2328 int       mono_is_power_of_two              (guint32 val) MONO_LLVM_INTERNAL;
2329 void      mono_cprop_local                  (MonoCompile *cfg, MonoBasicBlock *bb, MonoInst **acp, int acp_size);
2330 MonoInst* mono_compile_create_var           (MonoCompile *cfg, MonoType *type, int opcode);
2331 MonoInst* mono_compile_create_var_for_vreg  (MonoCompile *cfg, MonoType *type, int opcode, int vreg);
2332 void      mono_compile_make_var_load        (MonoCompile *cfg, MonoInst *dest, gssize var_index);
2333 MonoInst* mini_get_int_to_float_spill_area  (MonoCompile *cfg);
2334 MonoType* mono_type_from_stack_type         (MonoInst *ins);
2335 guint32   mono_alloc_ireg                   (MonoCompile *cfg) MONO_LLVM_INTERNAL;
2336 guint32   mono_alloc_lreg                   (MonoCompile *cfg) MONO_LLVM_INTERNAL;
2337 guint32   mono_alloc_freg                   (MonoCompile *cfg) MONO_LLVM_INTERNAL;
2338 guint32   mono_alloc_preg                   (MonoCompile *cfg) MONO_LLVM_INTERNAL;
2339 guint32   mono_alloc_dreg                   (MonoCompile *cfg, MonoStackType stack_type);
2340 guint32   mono_alloc_ireg_ref               (MonoCompile *cfg) MONO_LLVM_INTERNAL;
2341 guint32   mono_alloc_ireg_mp                (MonoCompile *cfg) MONO_LLVM_INTERNAL;
2342 guint32   mono_alloc_ireg_copy              (MonoCompile *cfg, guint32 vreg) MONO_LLVM_INTERNAL;
2343 void      mono_mark_vreg_as_ref             (MonoCompile *cfg, int vreg);
2344 void      mono_mark_vreg_as_mp              (MonoCompile *cfg, int vreg);
2345
2346 void      mono_link_bblock                  (MonoCompile *cfg, MonoBasicBlock *from, MonoBasicBlock* to);
2347 void      mono_unlink_bblock                (MonoCompile *cfg, MonoBasicBlock *from, MonoBasicBlock* to);
2348 gboolean  mono_bblocks_linked               (MonoBasicBlock *bb1, MonoBasicBlock *bb2);
2349 void      mono_remove_bblock                (MonoCompile *cfg, MonoBasicBlock *bb);
2350 void      mono_nullify_basic_block          (MonoBasicBlock *bb);
2351 void      mono_merge_basic_blocks           (MonoCompile *cfg, MonoBasicBlock *bb, MonoBasicBlock *bbn);
2352 void      mono_optimize_branches            (MonoCompile *cfg);
2353
2354 void      mono_blockset_print               (MonoCompile *cfg, MonoBitSet *set, const char *name, guint idom);
2355 const char*mono_ji_type_to_string           (MonoJumpInfoType type);
2356 void      mono_print_ji                     (const MonoJumpInfo *ji);
2357 void      mono_print_ins_index              (int i, MonoInst *ins);
2358 GString  *mono_print_ins_index_strbuf       (int i, MonoInst *ins);
2359 void      mono_print_ins                    (MonoInst *ins);
2360 void      mono_print_bb                     (MonoBasicBlock *bb, const char *msg);
2361 void      mono_print_code                   (MonoCompile *cfg, const char *msg);
2362 MONO_API void      mono_print_method_from_ip         (void *ip);
2363 MONO_API char     *mono_pmip                         (void *ip);
2364 gboolean  mono_debug_count                  (void);
2365 MONO_API const char* mono_inst_name                  (int op);
2366 int       mono_op_to_op_imm                 (int opcode);
2367 int       mono_op_imm_to_op                 (int opcode);
2368 int       mono_load_membase_to_load_mem     (int opcode);
2369 guint     mono_type_to_load_membase         (MonoCompile *cfg, MonoType *type);
2370 guint     mono_type_to_store_membase        (MonoCompile *cfg, MonoType *type);
2371 guint     mini_type_to_stind                (MonoCompile* cfg, MonoType *type);
2372 MonoJitInfo* mini_lookup_method             (MonoDomain *domain, MonoMethod *method, MonoMethod *shared);
2373 guint32   mono_reverse_branch_op            (guint32 opcode);
2374 void      mono_disassemble_code             (MonoCompile *cfg, guint8 *code, int size, char *id);
2375 void      mono_add_patch_info               (MonoCompile *cfg, int ip, MonoJumpInfoType type, gconstpointer target) MONO_LLVM_INTERNAL;
2376 void      mono_add_patch_info_rel           (MonoCompile *cfg, int ip, MonoJumpInfoType type, gconstpointer target, int relocation) MONO_LLVM_INTERNAL;
2377 void      mono_remove_patch_info            (MonoCompile *cfg, int ip);
2378 MonoJumpInfo* mono_patch_info_dup_mp        (MonoMemPool *mp, MonoJumpInfo *patch_info);
2379 guint     mono_patch_info_hash (gconstpointer data);
2380 gint      mono_patch_info_equal (gconstpointer ka, gconstpointer kb);
2381 MonoJumpInfo *mono_patch_info_list_prepend  (MonoJumpInfo *list, int ip, MonoJumpInfoType type, gconstpointer target);
2382 gpointer  mono_resolve_patch_target         (MonoMethod *method, MonoDomain *domain, guint8 *code, MonoJumpInfo *patch_info, gboolean run_cctors, MonoError *error) MONO_LLVM_INTERNAL;
2383 gpointer  mono_jit_find_compiled_method_with_jit_info (MonoDomain *domain, MonoMethod *method, MonoJitInfo **ji);
2384 gpointer  mono_jit_find_compiled_method     (MonoDomain *domain, MonoMethod *method);
2385 gpointer  mono_jit_compile_method           (MonoMethod *method, MonoError *error);
2386 gpointer  mono_jit_compile_method_inner     (MonoMethod *method, MonoDomain *target_domain, int opt, MonoError *error);
2387 MonoLMF * mono_get_lmf                      (void);
2388 MonoLMF** mono_get_lmf_addr                 (void);
2389 void      mono_set_lmf                      (MonoLMF *lmf);
2390 MonoJitTlsData* mono_get_jit_tls            (void);
2391 MONO_API MonoDomain* mono_jit_thread_attach (MonoDomain *domain);
2392 MONO_API void      mono_jit_set_domain      (MonoDomain *domain);
2393 gint32    mono_get_jit_tls_offset           (void);
2394 gint32    mono_get_lmf_tls_offset           (void);
2395 gint32    mono_get_lmf_addr_tls_offset      (void);
2396 int       mini_get_tls_offset               (MonoTlsKey key);
2397 gboolean  mini_tls_get_supported            (MonoCompile *cfg, MonoTlsKey key);
2398 MonoInst* mono_create_tls_get               (MonoCompile *cfg, MonoTlsKey key);
2399 MonoInst* mono_get_jit_tls_intrinsic        (MonoCompile *cfg);
2400 MonoInst* mono_get_domain_intrinsic         (MonoCompile* cfg);
2401 MonoInst* mono_get_thread_intrinsic         (MonoCompile* cfg);
2402 MonoInst* mono_get_lmf_intrinsic            (MonoCompile* cfg);
2403 MonoInst* mono_get_lmf_addr_intrinsic       (MonoCompile* cfg);
2404 GList    *mono_varlist_insert_sorted        (MonoCompile *cfg, GList *list, MonoMethodVar *mv, int sort_type);
2405 GList    *mono_varlist_sort                 (MonoCompile *cfg, GList *list, int sort_type);
2406 void      mono_analyze_liveness             (MonoCompile *cfg);
2407 void      mono_analyze_liveness_gc          (MonoCompile *cfg);
2408 void      mono_linear_scan                  (MonoCompile *cfg, GList *vars, GList *regs, regmask_t *used_mask);
2409 void      mono_global_regalloc              (MonoCompile *cfg);
2410 void      mono_create_jump_table            (MonoCompile *cfg, MonoInst *label, MonoBasicBlock **bbs, int num_blocks);
2411 MonoCompile *mini_method_compile            (MonoMethod *method, guint32 opts, MonoDomain *domain, JitFlags flags, int parts, int aot_method_index);
2412 void      mono_destroy_compile              (MonoCompile *cfg);
2413 MonoJitICallInfo *mono_find_jit_opcode_emulation (int opcode);
2414 void      mono_print_ins_index (int i, MonoInst *ins);
2415 void      mono_print_ins (MonoInst *ins);
2416 gboolean  mini_assembly_can_skip_verification (MonoDomain *domain, MonoMethod *method);
2417 gboolean mono_compile_is_broken (MonoCompile *cfg, MonoMethod *method, gboolean fail_compile);
2418 MonoInst *mono_get_got_var (MonoCompile *cfg);
2419 void      mono_add_seq_point (MonoCompile *cfg, MonoBasicBlock *bb, MonoInst *ins, int native_offset);
2420 void      mono_add_var_location (MonoCompile *cfg, MonoInst *var, gboolean is_reg, int reg, int offset, int from, int to);
2421 MonoInst* mono_emit_jit_icall (MonoCompile *cfg, gconstpointer func, MonoInst **args);
2422 MonoInst* mono_emit_jit_icall_by_info (MonoCompile *cfg, int il_offset, MonoJitICallInfo *info, MonoInst **args);
2423 MonoInst* mono_emit_method_call (MonoCompile *cfg, MonoMethod *method, MonoInst **args, MonoInst *this_ins);
2424 void      mono_create_helper_signatures (void);
2425
2426 gboolean  mini_class_is_system_array (MonoClass *klass);
2427 MonoMethodSignature *mono_get_element_address_signature (int arity);
2428 MonoJitICallInfo    *mono_get_element_address_icall (int rank);
2429 MonoJitICallInfo    *mono_get_array_new_va_icall (int rank);
2430
2431 void      mono_linterval_add_range          (MonoCompile *cfg, MonoLiveInterval *interval, int from, int to);
2432 void      mono_linterval_print              (MonoLiveInterval *interval);
2433 void      mono_linterval_print_nl (MonoLiveInterval *interval);
2434 gboolean  mono_linterval_covers             (MonoLiveInterval *interval, int pos);
2435 gint32    mono_linterval_get_intersect_pos  (MonoLiveInterval *i1, MonoLiveInterval *i2);
2436 void      mono_linterval_split              (MonoCompile *cfg, MonoLiveInterval *interval, MonoLiveInterval **i1, MonoLiveInterval **i2, int pos);
2437 void      mono_liveness_handle_exception_clauses (MonoCompile *cfg);
2438
2439 /* Native Client functions */
2440 gpointer mono_realloc_native_code(MonoCompile *cfg);
2441
2442 #if defined(__native_client__) || defined(__native_client_codegen__)
2443 extern volatile int __nacl_thread_suspension_needed;
2444 void __nacl_suspend_thread_if_needed(void);
2445 void mono_nacl_gc(void);
2446 #endif
2447
2448 extern MonoDebugOptions debug_options;
2449
2450 static inline MonoMethod*
2451 jinfo_get_method (MonoJitInfo *ji)
2452 {
2453         return mono_jit_info_get_method (ji);
2454 }
2455
2456 /* AOT */
2457 void      mono_aot_init                     (void);
2458 void      mono_aot_cleanup                  (void);
2459 gpointer  mono_aot_get_method_checked       (MonoDomain *domain,
2460                                                                                          MonoMethod *method, MonoError *error);
2461 gpointer  mono_aot_get_method_from_token    (MonoDomain *domain, MonoImage *image, guint32 token, MonoError *error);
2462 gboolean  mono_aot_is_got_entry             (guint8 *code, guint8 *addr);
2463 guint8*   mono_aot_get_plt_entry            (guint8 *code);
2464 guint32   mono_aot_get_plt_info_offset      (mgreg_t *regs, guint8 *code);
2465 gboolean  mono_aot_get_cached_class_info    (MonoClass *klass, MonoCachedClassInfo *res);
2466 gboolean  mono_aot_get_class_from_name      (MonoImage *image, const char *name_space, const char *name, MonoClass **klass);
2467 MonoJitInfo* mono_aot_find_jit_info         (MonoDomain *domain, MonoImage *image, gpointer addr);
2468 gpointer mono_aot_plt_resolve               (gpointer aot_module, guint32 plt_info_offset, guint8 *code, MonoError *error);
2469 void     mono_aot_patch_plt_entry           (guint8 *code, guint8 *plt_entry, gpointer *got, mgreg_t *regs, guint8 *addr);
2470 gpointer mono_aot_get_method_from_vt_slot   (MonoDomain *domain, MonoVTable *vtable, int slot, MonoError *error);
2471 gpointer mono_aot_create_specific_trampoline   (MonoImage *image, gpointer arg1, MonoTrampolineType tramp_type, MonoDomain *domain, guint32 *code_len);
2472 gpointer mono_aot_get_trampoline            (const char *name);
2473 gpointer mono_aot_get_trampoline_full       (const char *name, MonoTrampInfo **out_tinfo);
2474 gpointer mono_aot_get_unbox_trampoline      (MonoMethod *method);
2475 gpointer mono_aot_get_lazy_fetch_trampoline (guint32 slot);
2476 gpointer mono_aot_get_static_rgctx_trampoline (gpointer ctx, gpointer addr);
2477 gpointer mono_aot_get_imt_thunk             (MonoVTable *vtable, MonoDomain *domain, MonoIMTCheckItem **imt_entries, int count, gpointer fail_tramp);
2478 gpointer mono_aot_get_gsharedvt_arg_trampoline(gpointer arg, gpointer addr);
2479 guint8*  mono_aot_get_unwind_info           (MonoJitInfo *ji, guint32 *unwind_info_len);
2480 guint32  mono_aot_method_hash               (MonoMethod *method);
2481 MonoMethod* mono_aot_get_array_helper_from_wrapper (MonoMethod *method);
2482 void     mono_aot_set_make_unreadable       (gboolean unreadable);
2483 gboolean mono_aot_is_pagefault              (void *ptr);
2484 void     mono_aot_handle_pagefault          (void *ptr);
2485 void     mono_aot_register_jit_icall        (const char *name, gpointer addr);
2486 guint32  mono_aot_find_method_index         (MonoMethod *method);
2487 void     mono_aot_init_llvm_method          (gpointer aot_module, guint32 method_index);
2488 void     mono_aot_init_gshared_method_this  (gpointer aot_module, guint32 method_index, MonoObject *this_ins);
2489 void     mono_aot_init_gshared_method_mrgctx  (gpointer aot_module, guint32 method_index, MonoMethodRuntimeGenericContext *rgctx);
2490 void     mono_aot_init_gshared_method_vtable  (gpointer aot_module, guint32 method_index, MonoVTable *vtable);
2491
2492 /* This is an exported function */
2493 MONO_API void     mono_aot_register_module           (gpointer *aot_info);
2494
2495 /* These are used to load the AOT data for aot images compiled with MONO_AOT_FILE_FLAG_SEPARATE_DATA */
2496 /*
2497  * Return the AOT data for ASSEMBLY. SIZE is the size of the data. OUT_HANDLE should be set to a handle which is later
2498  * passed to the free function.
2499  */
2500 typedef unsigned char* (*MonoLoadAotDataFunc)          (MonoAssembly *assembly, int size, gpointer user_data, void **out_handle);
2501 /* Not yet used */
2502 typedef void  (*MonoFreeAotDataFunc)          (MonoAssembly *assembly, int size, gpointer user_data, void *handle);
2503 MONO_API void mono_install_load_aot_data_hook (MonoLoadAotDataFunc load_func, MonoFreeAotDataFunc free_func, gpointer user_data);
2504
2505 void     mono_xdebug_init                   (const char *xdebug_opts);
2506 void     mono_save_xdebug_info              (MonoCompile *cfg);
2507 void     mono_save_trampoline_xdebug_info   (MonoTrampInfo *info);
2508 /* This is an exported function */
2509 void     mono_xdebug_flush                  (void);
2510
2511 gboolean  mono_method_blittable             (MonoMethod *method);
2512 gboolean  mono_method_same_domain           (MonoJitInfo *caller, MonoJitInfo *callee);
2513
2514 void      mono_register_opcode_emulation    (int opcode, const char* name, const char *sigstr, gpointer func, gboolean no_throw);
2515 void      mono_draw_graph                   (MonoCompile *cfg, MonoGraphOptions draw_options);
2516 void      mono_add_ins_to_end               (MonoBasicBlock *bb, MonoInst *inst);
2517 gpointer  mono_create_ftnptr                (MonoDomain *domain, gpointer addr);
2518
2519 MONO_API void      mono_replace_ins                  (MonoCompile *cfg, MonoBasicBlock *bb, MonoInst *ins, MonoInst **prev, MonoBasicBlock *first_bb, MonoBasicBlock *last_bb);
2520
2521 int               mono_find_method_opcode      (MonoMethod *method);
2522 MonoJitICallInfo *mono_register_jit_icall      (gconstpointer func, const char *name, MonoMethodSignature *sig, gboolean is_save);
2523 gconstpointer     mono_icall_get_wrapper       (MonoJitICallInfo* callinfo) MONO_LLVM_INTERNAL;
2524 gconstpointer     mono_icall_get_wrapper_full  (MonoJitICallInfo* callinfo, gboolean do_compile);
2525 void              mini_register_opcode_emulation (int opcode, const char *name, const char *sigstr, gpointer func, const char *symbol, gboolean no_throw);
2526
2527 void              mono_trampolines_init (void);
2528 void              mono_trampolines_cleanup (void);
2529 guint8 *          mono_get_trampoline_code (MonoTrampolineType tramp_type);
2530 gpointer          mono_create_specific_trampoline (gpointer arg1, MonoTrampolineType tramp_type, MonoDomain *domain, guint32 *code_len);
2531 gpointer          mono_create_jump_trampoline (MonoDomain *domain,
2532                                                                                            MonoMethod *method,
2533                                                                                            gboolean add_sync_wrapper,
2534                                                                                            MonoError *error);
2535 gpointer          mono_create_class_init_trampoline (MonoVTable *vtable);
2536 gpointer          mono_create_jit_trampoline (MonoDomain *domain, MonoMethod *method, MonoError *error) MONO_LLVM_INTERNAL;
2537 gpointer          mono_create_jit_trampoline_from_token (MonoImage *image, guint32 token);
2538 gpointer          mono_create_delegate_trampoline (MonoDomain *domain, MonoClass *klass);
2539 MonoDelegateTrampInfo* mono_create_delegate_trampoline_info (MonoDomain *domain, MonoClass *klass, MonoMethod *method);
2540 gpointer          mono_create_delegate_virtual_trampoline (MonoDomain *domain, MonoClass *klass, MonoMethod *method);
2541 gpointer          mono_create_rgctx_lazy_fetch_trampoline (guint32 offset);
2542 gpointer          mono_create_monitor_enter_trampoline (void);
2543 gpointer          mono_create_monitor_enter_v4_trampoline (void);
2544 gpointer          mono_create_monitor_exit_trampoline (void);
2545 gpointer          mono_create_static_rgctx_trampoline (MonoMethod *m, gpointer addr);
2546 MonoVTable*       mono_find_class_init_trampoline_by_addr (gconstpointer addr);
2547 guint32           mono_find_rgctx_lazy_fetch_trampoline_by_addr (gconstpointer addr);
2548 gpointer          mono_magic_trampoline (mgreg_t *regs, guint8 *code, gpointer arg, guint8* tramp);
2549 #ifndef DISABLE_REMOTING
2550 gpointer          mono_generic_virtual_remoting_trampoline (mgreg_t *regs, guint8 *code, MonoMethod *m, guint8 *tramp);
2551 #endif
2552 gpointer          mono_delegate_trampoline (mgreg_t *regs, guint8 *code, gpointer *tramp_data, guint8* tramp);
2553 gpointer          mono_aot_trampoline (mgreg_t *regs, guint8 *code, guint8 *token_info,
2554                                                                            guint8* tramp);
2555 gpointer          mono_aot_plt_trampoline (mgreg_t *regs, guint8 *code, guint8 *token_info,
2556                                                                                    guint8* tramp);
2557 void              mono_class_init_trampoline (mgreg_t *regs, guint8 *code, MonoVTable *vtable, guint8 *tramp);
2558 void              mono_generic_class_init_trampoline (mgreg_t *regs, guint8 *code, MonoVTable *vtable, guint8 *tramp);
2559 void              mono_monitor_enter_trampoline (mgreg_t *regs, guint8 *code, MonoObject *obj, guint8 *tramp);
2560 void              mono_monitor_enter_v4_trampoline (mgreg_t *regs, guint8 *code, MonoObject *obj, guint8 *tramp);
2561 void              mono_monitor_exit_trampoline (mgreg_t *regs, guint8 *code, MonoObject *obj, guint8 *tramp);
2562 gconstpointer     mono_get_trampoline_func (MonoTrampolineType tramp_type);
2563 gpointer          mini_get_vtable_trampoline (MonoVTable *vt, int slot_index);
2564 const char*       mono_get_generic_trampoline_simple_name (MonoTrampolineType tramp_type);
2565 char*             mono_get_generic_trampoline_name (MonoTrampolineType tramp_type);
2566 char*             mono_get_rgctx_fetch_trampoline_name (int slot);
2567 gpointer          mini_get_nullified_class_init_trampoline (void);
2568 gpointer          mini_get_single_step_trampoline (void);
2569 gpointer          mini_get_breakpoint_trampoline (void);
2570 gpointer          mini_add_method_trampoline (MonoMethod *m, gpointer compiled_method, gboolean add_static_rgctx_tramp, gboolean add_unbox_tramp);
2571 gpointer          mini_add_method_wrappers_llvmonly (MonoMethod *m, gpointer compiled_method, gboolean caller_gsharedvt, gboolean add_unbox_tramp, gpointer *out_arg);
2572 gboolean          mini_jit_info_is_gsharedvt (MonoJitInfo *ji);
2573 gpointer*         mini_resolve_imt_method (MonoVTable *vt, gpointer *vtable_slot, MonoMethod *imt_method, MonoMethod **impl_method, gpointer *out_aot_addr,
2574                                                                                    gboolean *out_need_rgctx_tramp, MonoMethod **variant_iface);
2575 MonoFtnDesc      *mini_create_llvmonly_ftndesc (MonoDomain *domain, gpointer addr, gpointer arg);
2576
2577 gboolean          mono_running_on_valgrind (void);
2578 void*             mono_global_codeman_reserve (int size);
2579 const char       *mono_regname_full (int reg, int bank);
2580 gint32*           mono_allocate_stack_slots (MonoCompile *cfg, gboolean backward, guint32 *stack_size, guint32 *stack_align);
2581 void              mono_local_regalloc (MonoCompile *cfg, MonoBasicBlock *bb);
2582 MonoInst         *mono_branch_optimize_exception_target (MonoCompile *cfg, MonoBasicBlock *bb, const char * exname);
2583 void              mono_remove_critical_edges (MonoCompile *cfg);
2584 gboolean          mono_is_regsize_var (MonoType *t);
2585 void              mini_emit_memcpy (MonoCompile *cfg, int destreg, int doffset, int srcreg, int soffset, int size, int align);
2586 void              mini_emit_stobj (MonoCompile *cfg, MonoInst *dest, MonoInst *src, MonoClass *klass, gboolean native);
2587 void              mini_emit_initobj (MonoCompile *cfg, MonoInst *dest, const guchar *ip, MonoClass *klass);
2588 CompRelation      mono_opcode_to_cond (int opcode) MONO_LLVM_INTERNAL;
2589 CompType          mono_opcode_to_type (int opcode, int cmp_opcode);
2590 CompRelation      mono_negate_cond (CompRelation cond);
2591 int               mono_op_imm_to_op (int opcode);
2592 void              mono_decompose_op_imm (MonoCompile *cfg, MonoBasicBlock *bb, MonoInst *ins);
2593 void              mono_peephole_ins (MonoBasicBlock *bb, MonoInst *ins);
2594 MonoUnwindOp     *mono_create_unwind_op (int when,
2595                                                                                  int tag, int reg,
2596                                                                                  int val);
2597 void              mono_emit_unwind_op (MonoCompile *cfg, int when,
2598                                                                            int tag, int reg,
2599                                                                            int val);
2600 MonoTrampInfo*    mono_tramp_info_create (const char *name, guint8 *code, guint32 code_size, MonoJumpInfo *ji, GSList *unwind_ops);
2601 void              mono_tramp_info_free (MonoTrampInfo *info);
2602 void              mono_tramp_info_register (MonoTrampInfo *info, MonoDomain *domain);
2603 int               mini_exception_id_by_name (const char *name);
2604 gboolean          mini_type_is_hfa (MonoType *t, int *out_nfields, int *out_esize) MONO_LLVM_INTERNAL;
2605
2606 int               mono_method_to_ir (MonoCompile *cfg, MonoMethod *method, MonoBasicBlock *start_bblock, MonoBasicBlock *end_bblock,
2607                                                                          MonoInst *return_var, MonoInst **inline_args,
2608                                                                          guint inline_offset, gboolean is_virtual_call);
2609
2610 MonoInst         *mono_decompose_opcode (MonoCompile *cfg, MonoInst *ins);
2611 void              mono_decompose_long_opts (MonoCompile *cfg);
2612 void              mono_decompose_vtype_opts (MonoCompile *cfg);
2613 void              mono_decompose_array_access_opts (MonoCompile *cfg);
2614 void              mono_decompose_soft_float (MonoCompile *cfg);
2615 void              mono_local_emulate_ops (MonoCompile *cfg);
2616 void              mono_handle_global_vregs (MonoCompile *cfg);
2617 void              mono_spill_global_vars (MonoCompile *cfg, gboolean *need_local_opts);
2618 void              mono_allocate_gsharedvt_vars (MonoCompile *cfg);
2619 void              mono_if_conversion (MonoCompile *cfg);
2620
2621 /* Delegates */
2622 gpointer          mini_get_delegate_arg (MonoMethod *method, gpointer method_ptr);
2623 void              mini_init_delegate (MonoDelegate *del);
2624 gpointer          mono_get_delegate_virtual_invoke_impl  (MonoMethodSignature *sig, MonoMethod *method);
2625
2626 /* methods that must be provided by the arch-specific port */
2627 void      mono_arch_init                        (void);
2628 void      mono_arch_finish_init                 (void);
2629 void      mono_arch_cleanup                     (void);
2630 void      mono_arch_cpu_init                    (void);
2631 guint32   mono_arch_cpu_optimizations           (guint32 *exclude_mask);
2632 void      mono_arch_instrument_mem_needs        (MonoMethod *method, int *stack, int *code);
2633 void     *mono_arch_instrument_prolog           (MonoCompile *cfg, void *func, void *p, gboolean enable_arguments);
2634 void     *mono_arch_instrument_epilog           (MonoCompile *cfg, void *func, void *p, gboolean enable_arguments);
2635 void     *mono_arch_instrument_epilog_full     (MonoCompile *cfg, void *func, void *p, gboolean enable_arguments, gboolean preserve_argument_registers);
2636 void      mono_codegen                          (MonoCompile *cfg);
2637 void      mono_call_inst_add_outarg_reg         (MonoCompile *cfg, MonoCallInst *call, int vreg, int hreg, int bank) MONO_LLVM_INTERNAL;
2638 void      mono_call_inst_add_outarg_vt          (MonoCompile *cfg, MonoCallInst *call, MonoInst *outarg_vt);
2639 const char *mono_arch_regname                   (int reg);
2640 const char *mono_arch_fregname                  (int reg);
2641 void      mono_arch_exceptions_init             (void);
2642 guchar*   mono_arch_create_generic_trampoline   (MonoTrampolineType tramp_type, MonoTrampInfo **info, gboolean aot);
2643 gpointer  mono_arch_create_rgctx_lazy_fetch_trampoline (guint32 slot, MonoTrampInfo **info, gboolean aot);
2644 gpointer  mono_arch_create_general_rgctx_lazy_fetch_trampoline (MonoTrampInfo **info, gboolean aot);
2645 gpointer  mono_arch_get_nullified_class_init_trampoline (MonoTrampInfo **info);
2646 guint8*   mono_arch_create_sdb_trampoline (gboolean single_step, MonoTrampInfo **info, gboolean aot);
2647 gpointer  mono_arch_create_monitor_enter_trampoline (MonoTrampInfo **info, gboolean is_v4, gboolean aot);
2648 gpointer  mono_arch_create_monitor_exit_trampoline (MonoTrampInfo **info, gboolean aot);
2649 guint8   *mono_arch_create_llvm_native_thunk     (MonoDomain *domain, guint8* addr) MONO_LLVM_INTERNAL;
2650 GList    *mono_arch_get_allocatable_int_vars    (MonoCompile *cfg);
2651 GList    *mono_arch_get_global_int_regs         (MonoCompile *cfg);
2652 GList    *mono_arch_get_global_fp_regs          (MonoCompile *cfg);
2653 GList    *mono_arch_get_iregs_clobbered_by_call (MonoCallInst *call);
2654 GList    *mono_arch_get_fregs_clobbered_by_call (MonoCallInst *call);
2655 guint32   mono_arch_regalloc_cost               (MonoCompile *cfg, MonoMethodVar *vmv);
2656 void      mono_arch_patch_code                  (MonoCompile *cfg, MonoMethod *method, MonoDomain *domain, guint8 *code, MonoJumpInfo *ji, gboolean run_cctors, MonoError *error);
2657 void      mono_arch_patch_code_new              (MonoCompile *cfg, MonoDomain *domain, guint8 *code, MonoJumpInfo *ji, gpointer target);
2658 void      mono_arch_flush_icache                (guint8 *code, gint size);
2659 int       mono_arch_max_epilog_size             (MonoCompile *cfg);
2660 guint8   *mono_arch_emit_prolog                 (MonoCompile *cfg);
2661 void      mono_arch_emit_epilog                 (MonoCompile *cfg);
2662 void      mono_arch_emit_exceptions             (MonoCompile *cfg);
2663 void      mono_arch_lowering_pass               (MonoCompile *cfg, MonoBasicBlock *bb);
2664 void      mono_arch_peephole_pass_1             (MonoCompile *cfg, MonoBasicBlock *bb);
2665 void      mono_arch_peephole_pass_2             (MonoCompile *cfg, MonoBasicBlock *bb);
2666 void      mono_arch_output_basic_block          (MonoCompile *cfg, MonoBasicBlock *bb);
2667 void      mono_arch_free_jit_tls_data           (MonoJitTlsData *tls);
2668 void      mono_arch_fill_argument_info          (MonoCompile *cfg);
2669 void      mono_arch_allocate_vars               (MonoCompile *m);
2670 int       mono_arch_get_argument_info           (MonoMethodSignature *csig, int param_count, MonoJitArgumentInfo *arg_info);
2671 gboolean  mono_arch_print_tree                          (MonoInst *tree, int arity);
2672 void      mono_arch_emit_call                   (MonoCompile *cfg, MonoCallInst *call);
2673 void      mono_arch_emit_outarg_vt              (MonoCompile *cfg, MonoInst *ins, MonoInst *src);
2674 void      mono_arch_emit_setret                 (MonoCompile *cfg, MonoMethod *method, MonoInst *val);
2675 MonoDynCallInfo *mono_arch_dyn_call_prepare     (MonoMethodSignature *sig);
2676 void      mono_arch_dyn_call_free               (MonoDynCallInfo *info);
2677 void      mono_arch_start_dyn_call              (MonoDynCallInfo *info, gpointer **args, guint8 *ret, guint8 *buf, int buf_len);
2678 void      mono_arch_finish_dyn_call             (MonoDynCallInfo *info, guint8 *buf);
2679 MonoInst *mono_arch_emit_inst_for_method        (MonoCompile *cfg, MonoMethod *cmethod, MonoMethodSignature *fsig, MonoInst **args);
2680 void      mono_arch_decompose_opts              (MonoCompile *cfg, MonoInst *ins);
2681 void      mono_arch_decompose_long_opts         (MonoCompile *cfg, MonoInst *ins);
2682 GSList*   mono_arch_get_delegate_invoke_impls   (void);
2683 LLVMCallInfo* mono_arch_get_llvm_call_info      (MonoCompile *cfg, MonoMethodSignature *sig) MONO_LLVM_INTERNAL;
2684 guint8*   mono_arch_emit_load_got_addr          (guint8 *start, guint8 *code, MonoCompile *cfg, MonoJumpInfo **ji);
2685 guint8*   mono_arch_emit_load_aotconst          (guint8 *start, guint8 *code, MonoJumpInfo **ji, MonoJumpInfoType tramp_type, gconstpointer target);
2686 GSList*   mono_arch_get_cie_program             (void);
2687 void      mono_arch_set_target                  (char *mtriple);
2688 gboolean  mono_arch_gsharedvt_sig_supported     (MonoMethodSignature *sig);
2689 gpointer  mono_arch_get_gsharedvt_trampoline    (MonoTrampInfo **info, gboolean aot);
2690 gpointer  mono_arch_get_gsharedvt_call_info     (gpointer addr, MonoMethodSignature *normal_sig, MonoMethodSignature *gsharedvt_sig, gboolean gsharedvt_in, gint32 vcall_offset, gboolean calli);
2691 gboolean  mono_arch_opcode_needs_emulation      (MonoCompile *cfg, int opcode);
2692 gboolean  mono_arch_tail_call_supported         (MonoCompile *cfg, MonoMethodSignature *caller_sig, MonoMethodSignature *callee_sig);
2693 int       mono_arch_translate_tls_offset        (int offset);
2694 gboolean  mono_arch_opcode_supported            (int opcode);
2695 void     mono_arch_setup_resume_sighandler_ctx  (MonoContext *ctx, gpointer func);
2696
2697 #ifdef MONO_ARCH_SOFT_FLOAT_FALLBACK
2698 gboolean  mono_arch_is_soft_float               (void);
2699 #else
2700 static inline MONO_ALWAYS_INLINE gboolean
2701 mono_arch_is_soft_float (void)
2702 {
2703         return FALSE;
2704 }
2705 #endif
2706
2707 /* Soft Debug support */
2708 #ifdef MONO_ARCH_SOFT_DEBUG_SUPPORTED
2709 void      mono_arch_set_breakpoint              (MonoJitInfo *ji, guint8 *ip);
2710 void      mono_arch_clear_breakpoint            (MonoJitInfo *ji, guint8 *ip);
2711 void      mono_arch_start_single_stepping       (void);
2712 void      mono_arch_stop_single_stepping        (void);
2713 gboolean  mono_arch_is_single_step_event        (void *info, void *sigctx);
2714 gboolean  mono_arch_is_breakpoint_event         (void *info, void *sigctx);
2715 void     mono_arch_skip_breakpoint              (MonoContext *ctx, MonoJitInfo *ji);
2716 void     mono_arch_skip_single_step             (MonoContext *ctx);
2717 gpointer mono_arch_get_seq_point_info           (MonoDomain *domain, guint8 *code);
2718 void     mono_arch_init_lmf_ext                 (MonoLMFExt *ext, gpointer prev_lmf);
2719 #endif
2720
2721 gboolean
2722 mono_arch_unwind_frame (MonoDomain *domain, MonoJitTlsData *jit_tls,
2723                                                 MonoJitInfo *ji, MonoContext *ctx,
2724                                                 MonoContext *new_ctx, MonoLMF **lmf,
2725                                                 mgreg_t **save_locations,
2726                                                 StackFrameInfo *frame_info);
2727 gpointer  mono_arch_get_throw_exception_by_name (void);
2728 gpointer mono_arch_get_call_filter              (MonoTrampInfo **info, gboolean aot);
2729 gpointer mono_arch_get_restore_context          (MonoTrampInfo **info, gboolean aot);
2730 gpointer  mono_arch_get_throw_exception         (MonoTrampInfo **info, gboolean aot);
2731 gpointer  mono_arch_get_rethrow_exception       (MonoTrampInfo **info, gboolean aot);
2732 gpointer  mono_arch_get_throw_corlib_exception  (MonoTrampInfo **info, gboolean aot);
2733 gpointer  mono_arch_get_throw_pending_exception (MonoTrampInfo **info, gboolean aot);
2734 gboolean mono_arch_handle_exception             (void *sigctx, gpointer obj);
2735 void     mono_arch_handle_altstack_exception    (void *sigctx, MONO_SIG_HANDLER_INFO_TYPE *siginfo, gpointer fault_addr, gboolean stack_ovf);
2736 gboolean mono_handle_soft_stack_ovf             (MonoJitTlsData *jit_tls, MonoJitInfo *ji, void *ctx, MONO_SIG_HANDLER_INFO_TYPE *siginfo, guint8* fault_addr);
2737 void     mono_handle_hard_stack_ovf             (MonoJitTlsData *jit_tls, MonoJitInfo *ji, void *ctx, guint8* fault_addr);
2738 gpointer mono_arch_ip_from_context              (void *sigctx);
2739 mgreg_t mono_arch_context_get_int_reg               (MonoContext *ctx, int reg);
2740 void     mono_arch_context_set_int_reg              (MonoContext *ctx, int reg, mgreg_t val);
2741 void     mono_arch_flush_register_windows       (void);
2742 gboolean mono_arch_is_inst_imm                  (gint64 imm);
2743 gboolean mono_arch_is_int_overflow              (void *sigctx, void *info);
2744 void     mono_arch_invalidate_method            (MonoJitInfo *ji, void *func, gpointer func_arg);
2745 guint32  mono_arch_get_patch_offset             (guint8 *code);
2746 gpointer*mono_arch_get_delegate_method_ptr_addr (guint8* code, mgreg_t *regs);
2747 void     mono_arch_create_vars                  (MonoCompile *cfg) MONO_LLVM_INTERNAL;
2748 void     mono_arch_save_unwind_info             (MonoCompile *cfg);
2749 void     mono_arch_register_lowlevel_calls      (void);
2750 gpointer mono_arch_get_unbox_trampoline         (MonoMethod *m, gpointer addr);
2751 gpointer mono_arch_get_static_rgctx_trampoline  (MonoMethod *m, MonoMethodRuntimeGenericContext *mrgctx, gpointer addr);
2752 gpointer  mono_arch_get_llvm_imt_trampoline     (MonoDomain *domain, MonoMethod *method, int vt_offset);
2753 gpointer mono_arch_get_gsharedvt_arg_trampoline (MonoDomain *domain, gpointer arg, gpointer addr);
2754 void     mono_arch_patch_callsite               (guint8 *method_start, guint8 *code, guint8 *addr);
2755 void     mono_arch_patch_plt_entry              (guint8 *code, gpointer *got, mgreg_t *regs, guint8 *addr);
2756 void     mono_arch_nullify_class_init_trampoline(guint8 *code, mgreg_t *regs);
2757 int      mono_arch_get_this_arg_reg             (guint8 *code);
2758 gpointer mono_arch_get_this_arg_from_call       (mgreg_t *regs, guint8 *code);
2759 gpointer mono_arch_get_delegate_invoke_impl     (MonoMethodSignature *sig, gboolean has_target);
2760 gpointer mono_arch_get_delegate_virtual_invoke_impl (MonoMethodSignature *sig, MonoMethod *method, int offset, gboolean load_imt_reg);
2761 gpointer mono_arch_create_specific_trampoline   (gpointer arg1, MonoTrampolineType tramp_type, MonoDomain *domain, guint32 *code_len);
2762 MonoMethod* mono_arch_find_imt_method           (mgreg_t *regs, guint8 *code);
2763 MonoVTable* mono_arch_find_static_call_vtable   (mgreg_t *regs, guint8 *code);
2764 gpointer    mono_arch_build_imt_thunk           (MonoVTable *vtable, MonoDomain *domain, MonoIMTCheckItem **imt_entries, int count, gpointer fail_tramp);
2765 void    mono_arch_notify_pending_exc            (MonoThreadInfo *info);
2766 guint8* mono_arch_get_call_target               (guint8 *code);
2767 guint32 mono_arch_get_plt_info_offset           (guint8 *plt_entry, mgreg_t *regs, guint8 *code);
2768 GSList *mono_arch_get_trampolines               (gboolean aot);
2769
2770 /* Handle block guard */
2771 gpointer mono_arch_install_handler_block_guard (MonoJitInfo *ji, MonoJitExceptionInfo *clause, MonoContext *ctx, gpointer new_value);
2772 gpointer mono_arch_create_handler_block_trampoline (MonoTrampInfo **info, gboolean aot);
2773 gpointer mono_create_handler_block_trampoline (void);
2774 gboolean mono_install_handler_block_guard (MonoThreadUnwindState *ctx);
2775
2776 /*New interruption machinery */
2777 void
2778 mono_setup_async_callback (MonoContext *ctx, void (*async_cb)(void *fun), gpointer user_data);
2779
2780 void
2781 mono_arch_setup_async_callback (MonoContext *ctx, void (*async_cb)(void *fun), gpointer user_data);
2782
2783 gboolean
2784 mono_thread_state_init_from_handle (MonoThreadUnwindState *tctx, MonoThreadInfo *info);
2785
2786
2787 /* Exception handling */
2788 typedef gboolean (*MonoJitStackWalk)            (StackFrameInfo *frame, MonoContext *ctx, gpointer data);
2789
2790 void     mono_exceptions_init                   (void);
2791 gboolean mono_handle_exception                  (MonoContext *ctx, MonoObject *obj);
2792 void     mono_handle_native_sigsegv             (int signal, void *sigctx, MONO_SIG_HANDLER_INFO_TYPE *siginfo);
2793 MONO_API void     mono_print_thread_dump                 (void *sigctx);
2794 MONO_API void     mono_print_thread_dump_from_ctx        (MonoContext *ctx);
2795 void     mono_walk_stack_with_ctx               (MonoJitStackWalk func, MonoContext *start_ctx, MonoUnwindOptions unwind_options, void *user_data);
2796 void     mono_walk_stack_with_state             (MonoJitStackWalk func, MonoThreadUnwindState *state, MonoUnwindOptions unwind_options, void *user_data);
2797 void     mono_walk_stack                        (MonoJitStackWalk func, MonoUnwindOptions options, void *user_data);
2798 gboolean mono_thread_state_init_from_sigctx     (MonoThreadUnwindState *ctx, void *sigctx);
2799 void     mono_thread_state_init                 (MonoThreadUnwindState *ctx);
2800 gboolean mono_thread_state_init_from_current    (MonoThreadUnwindState *ctx);
2801 gboolean mono_thread_state_init_from_monoctx    (MonoThreadUnwindState *ctx, MonoContext *mctx);
2802
2803 void     mono_setup_altstack                    (MonoJitTlsData *tls);
2804 void     mono_free_altstack                     (MonoJitTlsData *tls);
2805 gpointer mono_altstack_restore_prot             (mgreg_t *regs, guint8 *code, gpointer *tramp_data, guint8* tramp);
2806 MonoJitInfo* mini_jit_info_table_find           (MonoDomain *domain, char *addr, MonoDomain **out_domain);
2807 MonoJitInfo* mini_jit_info_table_find_ext       (MonoDomain *domain, char *addr, gboolean allow_trampolines, MonoDomain **out_domain);
2808 void     mono_resume_unwind                     (MonoContext *ctx) MONO_LLVM_INTERNAL;
2809
2810 MonoJitInfo * mono_find_jit_info                (MonoDomain *domain, MonoJitTlsData *jit_tls, MonoJitInfo *res, MonoJitInfo *prev_ji, MonoContext *ctx, MonoContext *new_ctx, char **trace, MonoLMF **lmf, int *native_offset, gboolean *managed);
2811
2812 typedef gboolean (*MonoExceptionFrameWalk)      (MonoMethod *method, gpointer ip, size_t native_offset, gboolean managed, gpointer user_data);
2813 MONO_API gboolean mono_exception_walk_trace     (MonoException *ex, MonoExceptionFrameWalk func, gpointer user_data);
2814 void mono_restore_context                       (MonoContext *ctx);
2815 guint8* mono_jinfo_get_unwind_info              (MonoJitInfo *ji, guint32 *unwind_info_len);
2816 int  mono_jinfo_get_epilog_size                 (MonoJitInfo *ji);
2817 void     mono_llvm_rethrow_exception            (MonoObject *ex);
2818 void     mono_llvm_throw_exception              (MonoObject *ex);
2819 void     mono_llvm_throw_corlib_exception       (guint32 ex_token_index);
2820 void     mono_llvm_resume_exception             (void);
2821 void     mono_llvm_clear_exception              (void);
2822 MonoObject *mono_llvm_load_exception            (void);
2823 void     mono_llvm_reset_exception              (void);
2824 void     mono_llvm_raise_exception              (MonoException *e);
2825 gint32 mono_llvm_match_exception                (MonoJitInfo *jinfo, guint32 region_start, guint32 region_end, gpointer rgctx, MonoObject *this_obj);
2826
2827 gboolean
2828 mono_find_jit_info_ext (MonoDomain *domain, MonoJitTlsData *jit_tls,
2829                                                 MonoJitInfo *prev_ji, MonoContext *ctx,
2830                                                 MonoContext *new_ctx, char **trace, MonoLMF **lmf,
2831                                                 mgreg_t **save_locations,
2832                                                 StackFrameInfo *frame);
2833
2834 gpointer mono_get_throw_exception               (void);
2835 gpointer mono_get_rethrow_exception             (void);
2836 gpointer mono_get_call_filter                   (void);
2837 gpointer mono_get_restore_context               (void);
2838 gpointer mono_get_throw_exception_by_name       (void);
2839 gpointer mono_get_throw_corlib_exception        (void);
2840 gpointer mono_get_throw_exception_addr          (void);
2841 MonoArray *ves_icall_get_trace                  (MonoException *exc, gint32 skip, MonoBoolean need_file_info);
2842 MonoBoolean ves_icall_get_frame_info            (gint32 skip, MonoBoolean need_file_info,
2843                                                  MonoReflectionMethod **method,
2844                                                  gint32 *iloffset, gint32 *native_offset,
2845                                                  MonoString **file, gint32 *line, gint32 *column);
2846 void mono_set_cast_details                      (MonoClass *from, MonoClass *to);
2847
2848 /* Installs a function which is called when the runtime encounters an unhandled exception.
2849  * This hook isn't expected to return.
2850  * If no hook has been installed, the runtime will print a message before aborting.
2851  */
2852 typedef void  (*MonoUnhandledExceptionFunc)         (MonoObject *exc, gpointer user_data);
2853 MONO_API void mono_install_unhandled_exception_hook (MonoUnhandledExceptionFunc func, gpointer user_data);
2854 void          mono_invoke_unhandled_exception_hook  (MonoObject *exc);
2855
2856 /* Dominator/SSA methods */
2857 void        mono_compile_dominator_info         (MonoCompile *cfg, int dom_flags);
2858 void        mono_compute_natural_loops          (MonoCompile *cfg);
2859 MonoBitSet* mono_compile_iterated_dfrontier     (MonoCompile *cfg, MonoBitSet *set);
2860 void        mono_ssa_compute                    (MonoCompile *cfg);
2861 void        mono_ssa_remove                     (MonoCompile *cfg);
2862 void        mono_ssa_remove_gsharedvt           (MonoCompile *cfg);
2863 void        mono_ssa_cprop                      (MonoCompile *cfg);
2864 void        mono_ssa_deadce                     (MonoCompile *cfg);
2865 void        mono_ssa_strength_reduction         (MonoCompile *cfg);
2866 void        mono_free_loop_info                 (MonoCompile *cfg);
2867 void        mono_ssa_loop_invariant_code_motion (MonoCompile *cfg);
2868
2869 void        mono_ssa_compute2                   (MonoCompile *cfg);
2870 void        mono_ssa_remove2                    (MonoCompile *cfg);
2871 void        mono_ssa_cprop2                     (MonoCompile *cfg);
2872 void        mono_ssa_deadce2                    (MonoCompile *cfg);
2873
2874 /* debugging support */
2875 void      mono_debug_init_method                (MonoCompile *cfg, MonoBasicBlock *start_block,
2876                                                  guint32 breakpoint_id);
2877 void      mono_debug_open_method                (MonoCompile *cfg);
2878 void      mono_debug_close_method               (MonoCompile *cfg);
2879 void      mono_debug_free_method                (MonoCompile *cfg);
2880 void      mono_debug_open_block                 (MonoCompile *cfg, MonoBasicBlock *bb, guint32 address);
2881 void      mono_debug_record_line_number         (MonoCompile *cfg, MonoInst *ins, guint32 address);
2882 void      mono_debug_serialize_debug_info       (MonoCompile *cfg, guint8 **out_buf, guint32 *buf_len);
2883 void      mono_debug_add_aot_method             (MonoDomain *domain,
2884                                                  MonoMethod *method, guint8 *code_start,
2885                                                  guint8 *debug_info, guint32 debug_info_len);
2886 MONO_API void      mono_debug_print_vars                 (gpointer ip, gboolean only_arguments);
2887 MONO_API void      mono_debugger_run_finally             (MonoContext *start_ctx);
2888
2889 MONO_API gboolean mono_breakpoint_clean_code (guint8 *method_start, guint8 *code, int offset, guint8 *buf, int size);
2890
2891 /* Tracing */
2892 MonoTraceSpec *mono_trace_parse_options         (const char *options);
2893 void           mono_trace_set_assembly          (MonoAssembly *assembly);
2894 gboolean       mono_trace_eval                  (MonoMethod *method);
2895
2896 extern void
2897 mono_perform_abc_removal (MonoCompile *cfg);
2898 extern void
2899 mono_perform_abc_removal (MonoCompile *cfg);
2900 extern void
2901 mono_perform_ssapre (MonoCompile *cfg);
2902 extern void
2903 mono_local_cprop (MonoCompile *cfg);
2904 extern void
2905 mono_local_cprop (MonoCompile *cfg);
2906 extern void
2907 mono_local_deadce (MonoCompile *cfg);
2908 void
2909 mono_local_alias_analysis (MonoCompile *cfg);
2910
2911 /* Generic sharing */
2912
2913 void
2914 mono_set_generic_sharing_supported (gboolean supported);
2915
2916 void
2917 mono_set_generic_sharing_vt_supported (gboolean supported);
2918
2919 void
2920 mono_set_partial_sharing_supported (gboolean supported);
2921
2922 gboolean
2923 mono_class_generic_sharing_enabled (MonoClass *klass);
2924
2925 gpointer
2926 mono_class_fill_runtime_generic_context (MonoVTable *class_vtable, guint32 slot, MonoError *error);
2927
2928 gpointer
2929 mono_method_fill_runtime_generic_context (MonoMethodRuntimeGenericContext *mrgctx, guint32 slot, MonoError *error);
2930
2931 MonoMethodRuntimeGenericContext*
2932 mono_method_lookup_rgctx (MonoVTable *class_vtable, MonoGenericInst *method_inst);
2933
2934 const char*
2935 mono_rgctx_info_type_to_str (MonoRgctxInfoType type);
2936
2937 MonoJumpInfoType
2938 mini_rgctx_info_type_to_patch_info_type (MonoRgctxInfoType info_type);
2939
2940 gboolean
2941 mono_method_needs_static_rgctx_invoke (MonoMethod *method, gboolean allow_type_vars);
2942
2943 int
2944 mono_class_rgctx_get_array_size (int n, gboolean mrgctx);
2945
2946 guint32
2947 mono_method_lookup_or_register_info (MonoMethod *method, gboolean in_mrgctx, gpointer data,
2948         MonoRgctxInfoType info_type, MonoGenericContext *generic_context);
2949
2950 MonoGenericContext
2951 mono_method_construct_object_context (MonoMethod *method);
2952
2953 MonoMethod*
2954 mono_method_get_declaring_generic_method (MonoMethod *method);
2955
2956 int
2957 mono_generic_context_check_used (MonoGenericContext *context);
2958
2959 int
2960 mono_class_check_context_used (MonoClass *klass);
2961
2962 gboolean
2963 mono_generic_context_is_sharable (MonoGenericContext *context, gboolean allow_type_vars);
2964
2965 gboolean
2966 mono_generic_context_is_sharable_full (MonoGenericContext *context, gboolean allow_type_vars, gboolean allow_partial);
2967
2968 gboolean
2969 mono_method_is_generic_impl (MonoMethod *method);
2970
2971 gboolean
2972 mono_method_is_generic_sharable (MonoMethod *method, gboolean allow_type_vars);
2973
2974 gboolean
2975 mono_method_is_generic_sharable_full (MonoMethod *method, gboolean allow_type_vars, gboolean allow_partial, gboolean allow_gsharedvt);
2976
2977 gboolean
2978 mini_class_is_generic_sharable (MonoClass *klass);
2979
2980
2981 gboolean
2982 mini_generic_inst_is_sharable (MonoGenericInst *inst, gboolean allow_type_vars, gboolean allow_partial);
2983
2984 gboolean
2985 mono_is_partially_sharable_inst (MonoGenericInst *inst);
2986
2987 gboolean
2988 mini_is_gsharedvt_gparam (MonoType *t);
2989
2990 MonoGenericContext* mini_method_get_context (MonoMethod *method);
2991
2992 int mono_method_check_context_used (MonoMethod *method);
2993
2994 gboolean mono_generic_context_equal_deep (MonoGenericContext *context1, MonoGenericContext *context2);
2995
2996 gpointer mono_helper_get_rgctx_other_ptr (MonoClass *caller_class, MonoVTable *vtable,
2997                                           guint32 token, guint32 token_source, guint32 rgctx_type,
2998                                           gint32 rgctx_index);
2999
3000 void mono_generic_sharing_init (void);
3001 void mono_generic_sharing_cleanup (void);
3002
3003 MonoClass* mini_class_get_container_class (MonoClass *klass);
3004 MonoGenericContext* mini_class_get_context (MonoClass *klass);
3005
3006 MonoType* mini_get_underlying_type (MonoType *type) MONO_LLVM_INTERNAL;
3007 MonoType* mini_type_get_underlying_type (MonoType *type);
3008 MonoMethod* mini_get_shared_method (MonoMethod *method);
3009 MonoMethod* mini_get_shared_method_to_register (MonoMethod *method);
3010 MonoMethod* mini_get_shared_method_full (MonoMethod *method, gboolean all_vt, gboolean is_gsharedvt);
3011 MonoType* mini_get_shared_gparam (MonoType *t, MonoType *constraint);
3012 int mini_get_rgctx_entry_slot (MonoJumpInfoRgctxEntry *entry);
3013
3014 int mini_type_stack_size (MonoType *t, int *align);
3015 int mini_type_stack_size_full (MonoType *t, guint32 *align, gboolean pinvoke);
3016 void type_to_eval_stack_type (MonoCompile *cfg, MonoType *type, MonoInst *inst);
3017 guint mono_type_to_regmove (MonoCompile *cfg, MonoType *type) MONO_LLVM_INTERNAL;
3018
3019 void mono_cfg_add_try_hole (MonoCompile *cfg, MonoExceptionClause *clause, guint8 *start, MonoBasicBlock *bb);
3020
3021 void mono_cfg_set_exception (MonoCompile *cfg, int type);
3022 void mono_cfg_set_exception_invalid_program (MonoCompile *cfg, char *msg);
3023
3024 #define MONO_TIME_TRACK(a, phase) \
3025         { \
3026                 GTimer *timer = mono_time_track_start (); \
3027                 (phase) ; \
3028                 mono_time_track_end (&(a), timer); \
3029         }
3030
3031 GTimer *mono_time_track_start (void);
3032 void mono_time_track_end (double *time, GTimer *timer);
3033
3034 void mono_update_jit_stats (MonoCompile *cfg);
3035
3036 gboolean mini_type_is_reference (MonoType *type);
3037 gboolean mini_type_is_vtype (MonoType *t) MONO_LLVM_INTERNAL;
3038 gboolean mini_type_var_is_vt (MonoType *type) MONO_LLVM_INTERNAL;
3039 gboolean mini_is_gsharedvt_type (MonoType *t);
3040 gboolean mini_is_gsharedvt_klass (MonoClass *klass) MONO_LLVM_INTERNAL;
3041 gboolean mini_is_gsharedvt_signature (MonoMethodSignature *sig);
3042 gboolean mini_is_gsharedvt_variable_type (MonoType *t) MONO_LLVM_INTERNAL;
3043 gboolean mini_is_gsharedvt_variable_klass (MonoClass *klass) MONO_LLVM_INTERNAL;
3044 gboolean mini_is_gsharedvt_sharable_method (MonoMethod *method);
3045 gboolean mini_is_gsharedvt_variable_signature (MonoMethodSignature *sig);
3046 gboolean mini_is_gsharedvt_sharable_inst (MonoGenericInst *inst);
3047 gpointer mini_method_get_rgctx (MonoMethod *m);
3048 void mini_init_gsctx (MonoDomain *domain, MonoMemPool *mp, MonoGenericContext *context, MonoGenericSharingContext *gsctx);
3049
3050 gpointer mini_get_gsharedvt_wrapper (gboolean gsharedvt_in, gpointer addr, MonoMethodSignature *normal_sig, MonoMethodSignature *gsharedvt_sig,
3051                                                                          gint32 vcall_offset, gboolean calli);
3052 MonoMethod* mini_get_gsharedvt_in_sig_wrapper (MonoMethodSignature *sig);
3053 MonoMethod* mini_get_gsharedvt_out_sig_wrapper (MonoMethodSignature *sig);
3054 MonoMethodSignature* mini_get_gsharedvt_out_sig_wrapper_signature (gboolean has_this, gboolean has_ret, int param_count);
3055 gboolean mini_gsharedvt_runtime_invoke_supported (MonoMethodSignature *sig);
3056
3057 /* SIMD support */
3058
3059 /*
3060 This enum MUST be kept in sync with its managed mirror Mono.Simd.AccelMode.
3061  */
3062 enum {
3063         SIMD_VERSION_SSE1       = 1 << 0,
3064         SIMD_VERSION_SSE2       = 1 << 1,
3065         SIMD_VERSION_SSE3       = 1 << 2,
3066         SIMD_VERSION_SSSE3      = 1 << 3,
3067         SIMD_VERSION_SSE41      = 1 << 4,
3068         SIMD_VERSION_SSE42      = 1 << 5,
3069         SIMD_VERSION_SSE4a      = 1 << 6,
3070         SIMD_VERSION_ALL        = SIMD_VERSION_SSE1 | SIMD_VERSION_SSE2 |
3071                           SIMD_VERSION_SSE3 | SIMD_VERSION_SSSE3 |
3072                           SIMD_VERSION_SSE41 | SIMD_VERSION_SSE42 |
3073                           SIMD_VERSION_SSE4a,
3074
3075         /* this value marks the end of the bit indexes used in
3076          * this emum.
3077          */
3078         SIMD_VERSION_INDEX_END = 6
3079 };
3080
3081 enum {
3082         SIMD_COMP_EQ,
3083         SIMD_COMP_LT,
3084         SIMD_COMP_LE,
3085         SIMD_COMP_UNORD,
3086         SIMD_COMP_NEQ,
3087         SIMD_COMP_NLT,
3088         SIMD_COMP_NLE,
3089         SIMD_COMP_ORD
3090 };
3091
3092 enum {
3093         SIMD_PREFETCH_MODE_NTA,
3094         SIMD_PREFETCH_MODE_0,
3095         SIMD_PREFETCH_MODE_1,
3096         SIMD_PREFETCH_MODE_2,
3097 };
3098
3099 const char *mono_arch_xregname (int reg);
3100 void        mono_simd_simplify_indirection (MonoCompile *cfg);
3101 MonoInst*   mono_emit_simd_intrinsics (MonoCompile *cfg, MonoMethod *cmethod, MonoMethodSignature *fsig, MonoInst **args);
3102 guint32     mono_arch_cpu_enumerate_simd_versions (void);
3103 void        mono_simd_intrinsics_init (void);
3104
3105 MonoInst*   mono_emit_native_types_intrinsics (MonoCompile *cfg, MonoMethod *cmethod, MonoMethodSignature *fsig, MonoInst **args);
3106 MonoType*   mini_native_type_replace_type (MonoType *type) MONO_LLVM_INTERNAL;
3107
3108 #ifdef __linux__
3109 #define XDEBUG_ENABLED 1
3110 #endif
3111
3112 #ifdef __linux__
3113 /* maybe enable also for other systems? */
3114 #define ENABLE_JIT_MAP 1
3115 void mono_enable_jit_map (void);
3116 void mono_emit_jit_map   (MonoJitInfo *jinfo);
3117 void mono_emit_jit_tramp (void *start, int size, const char *desc);
3118 gboolean mono_jit_map_is_enabled (void);
3119 #else
3120 #define mono_enable_jit_map()
3121 #define mono_emit_jit_map(ji)
3122 #define mono_emit_jit_tramp(s,z,d)
3123 #define mono_jit_map_is_enabled() (0)
3124 #endif
3125
3126 /*
3127  * Per-OS implementation functions.
3128  */
3129 void mono_runtime_install_handlers (void);
3130 void mono_runtime_cleanup_handlers (void);
3131 void mono_runtime_setup_stat_profiler (void);
3132 void mono_runtime_shutdown_stat_profiler (void);
3133 void mono_runtime_posix_install_handlers (void);
3134 pid_t mono_runtime_syscall_fork (void);
3135 void mono_gdb_render_native_backtraces (pid_t crashed_pid);
3136
3137 void mono_cross_helpers_run (void);
3138
3139 /*
3140  * Signal handling
3141  */
3142
3143 #if defined(DISABLE_HW_TRAPS) || defined(MONO_ARCH_DISABLE_HW_TRAPS)
3144  // Signal handlers not available
3145 #define MONO_ARCH_NEED_DIV_CHECK 1
3146 #endif
3147
3148 void MONO_SIG_HANDLER_SIGNATURE (mono_sigfpe_signal_handler) ;
3149 void MONO_SIG_HANDLER_SIGNATURE (mono_sigill_signal_handler) ;
3150 void MONO_SIG_HANDLER_SIGNATURE (mono_sigsegv_signal_handler);
3151 void MONO_SIG_HANDLER_SIGNATURE (mono_sigint_signal_handler) ;
3152 gboolean MONO_SIG_HANDLER_SIGNATURE (mono_chain_signal);
3153
3154 #ifndef MONO_ARCH_HAVE_TLS_GET
3155 #define MONO_ARCH_HAVE_TLS_GET 0
3156 #endif
3157
3158 #ifdef MONO_ARCH_VARARG_ICALLS
3159 #define ARCH_VARARG_ICALLS 1
3160 #else
3161 #define ARCH_VARARG_ICALLS 0
3162 #endif
3163
3164 /*
3165  * Native unwinder integration
3166  */
3167 void mono_exception_native_unwind (void *ctx, MONO_SIG_HANDLER_INFO_TYPE *info);
3168
3169 /*
3170  * Coop support for trampolines
3171  */
3172 void mono_interruption_checkpoint_from_trampoline (void);
3173
3174 #endif /* __MONO_MINI_H__ */