Merge pull request #3289 from BrzVlad/fix-critical-finalizer

[sgen] Fix critical/normal finalization order at domain unload

Merge pull request #3321 from BrzVlad/fix-block-state-membar

[sgen] Add missing memory barrier

Merge pull request #3290 from BrzVlad/fix-finalizer-tests

[tests] Fix finalizer tests

[sgen] Add missing memory barrier

When doing the first phase of sweeping we tag the block pointer within the block list with a CAS, after which we own the block and we are free to update the state and do sweep computations on the block. When we finish this phase we directly write the untagged block pointer back in the list, making the block available to inspect by other threads. We need a write barrier before writting the untagged pointer back because, when another thread might acquire the block, it might encounter an invalid block state.

[runtime] Decrease the verbosity of the runtime test runner when not running under CI.

[ji] Run the mini tests without the emitnunit.pl script when not running under CI.

[versions.mk] Make path to SUBMODULES.json based on srcdir (#3314)

Since acceptance-tests/Makefile (and llvm/Makefile) include scripts/submodules/versions.mk which evals versions.py which looks
for a SUBMODULES.json file in the current working directory we got confusing error messages if the build directory is not the src dir:

```
Traceback (most recent call last):
  File "../../mono/scripts/submodules/versions.py", line 22, in <module>
    submodules = json.load(open(CONFIG_FILE))
IOError: [Errno 2] No such file or directory: 'SUBMODULES.json'
```

Instead we now pass the path to SUBMODULES.json as a variable to versions.py and set it based on $(top_srcdir) so it works
even for out-of-tree builds.

[runtime] Make AOT'ed TestDriver.dll dependency for builds (#3303)

[mini] Fail methods that try to throw scalars. Fix hard crash from #42417. (#3312)

[mobile_static] Use clang++ for the linker (#3308)

In order for our exception handling to work on linux, we need the
unwind-dw2-fde-dip implementation in libgcc to work with our
.o file. This requires that `--eh-frame-hdr` be passed by the linker.

By using clang++ as the linker, we will get this and other flags
necessary for correct interop with c++ libraries.

Merge pull request #3305 from esdrubal/response_stream_close

[System] Fix RequestCanceled ex on ResponseStream.Close

Merge pull request #3306 from kumpera/fix_wait

[wapi] Fix timed wait code to not overflow. Fixes #42688

[runtime] Only add Mono.Dynamic.Interpreter to mobile_static (#3302)

Merge pull request #3307 from alexanderkyte/aot_path

[mobile_static] Fix temp path for mcs/class AOT

[mobile_static] Fix temp path for mcs/class AOT

[wapi] Fix timed wait code to not overflow. Fixes #42688

Wait math must always subtract ticks and get deltas. That way we avoid overflows.

[System] Fix RequestCanceled ex on ResponseStream.Close

Fixes issues where ResponseStream.Close would throw an exception when
peer had already closed the connection and ResponseStream.Close would
still try to communicating to peer that it was closing.

The issue was brought to our attention by failures on:
  - MonoTests.System.Net.WebRequestTest.TestReceiveCancelation
  - MonoTests.System.Net.HttpWebRequestTest.TestLargeDataReading

[amd64] Rewrite the handler block trampoline to use normal calls instead of jumps so the functions called from the calls execute with an aligned stack.

[tests] Disable some more tests in the mobile_static profile.

[runtime] Add a missing mono_error_init () in a DISABLE_APPDOMAINS codepath.

[amd64] Fix stack alignment in the handler block trampoline.

[tests] Remove double inclusion of source file

[tests] Fix flakiness on some tests that assume object finalization

A common pattern that we use across the test suite is to create objects on a new thread, join the thread, collect then expect certain objects to be dead/finalized since we assumed that thread to be no longer a source of pinning. This is not always the case since, after joining, the thread might still be alive and running unmanaged code related to the thread shutdown, which can reuse the stack that previously contained the managed references.

The workaround is to still allocate objects far down the stack, even if we are on a separate thread.

At the moment the helper can be used in tests which run under the TestDriver (since it's included in TestDriver.dll) and can also be included as a helper source for test bcl classes that need it.

Merge pull request #3304 from kumpera/unlimited-abort

Change suspend abort timeout to infinite and fix timeout env

Revert "[Facades] Add System.Runtime.InteropServices.PInvoke"

This reverts commit 6d13f594fa39a4d7dedeab278192d48c5b563fa9.

[Facades] Add System.Runtime.InteropServices.PInvoke

[mono-threads] Change suspend abort timeout to infinite and fix timeout env var parsing.

[utils] Introduce MONO_INFINITE_WAIT instead of checking for -1 all over the place.

Merge pull request #3300 from esdrubal/mono-sym-fixes

[mono-symbolicate] Fixes symbolicate.expected

[tests] Disable tests which are expected to fail in the mobile_static profile.

Revert "[test] Mono.Debugger.Soft test for async I/O tasks"

This reverts commit cf94a6fcd4e5f7c1fe065ceb3d8852e7a2f19e60.

It seems this causes something that prevents the chroot from unmounting in the Linux builds on Jenkins,
resulting in an endless "can't unmount" loop and stuck builds. Reverting to see if this fixes it.

[jit] Add full aot support for handler block trampolines on amd64.

[jit] Avoid aborting if mono_ldtoken_checked () fails in one place.

[aot] Fix full-aot support for delegate virtual invokes.

[sgen] Fix critical/normal finalization order at domain unload

For objects that die at the same time, normal finalizers should be run before critical finalizers. When we were unloading a domain we were running finalizers for all objects in that domain without checking whether the finalizer is critical or not. Now we enqueue the objects first in the finalization queues so we can run all the normal finalizers before the critical ones.

[runtime] Reset the thread_info TLS key if thread registration fails.

[runtime] Fix leak in generic sharing

[sgen/mono] Don't leak stack info struct

[mono-symbolicate] Fixes symbolicate.expected

Make all file locations in symbolicate.expected relative to mono
repository base directory.

Merge pull request #3294 from lambdageek/dev/fix-42625

[threadpool-ms] Switch to GC Safe mode in event_wait backends

Merge pull request #3283 from esdrubal/mono-sym-docs

Update mono-symbolicate README and man

Merge pull request #3293 from esdrubal/mono-sym-fixes

Mono sym fixes

[tests] Make some tests work with full-aot.

Updated mono-symbolicate man.

Updated mono-symbolicate README

Updated mono-symbolicate usage.

Added practical example.

Renamed mono-symbolicate README to README.md

[mono-symbolicate] Fixes Directory Exists/Delete race condition.

[mono-symbolicate] Add mscorlib stacktrace to tests

BCL symbols are now added to tests symbol directories.

We now test a stacktrace with stackframes on mscorlib.

[mono-symbolicate] Fixed options/command logic.

Options are now parsed before comand store-symbols.

Merge pull request #3297 from lateralusX/jlorenss/win-x64-fix-pinvoke-failures

Fixing 4 failing pinvoke tests in runtime test suite on windows x64.

Fixing 4 failing pinvoke tests in runtime test suite on windows x64.

Fix for the following failing pinvoke tests in runtime tests suite on win x64:

* pinvoke11.exe
* winx64structs.exe
* pinvoke_ppcs.exe
* pinvoke_ppcc.exe

[test] Mono.Debugger.Soft test for async I/O tasks

Merge pull request #3092 from alexanderkyte/mobile_static_fix_runtime_tests

[mobile_static] Get mono/tests running on mobile_static

Merge pull request #3295 from mhutch/fix-pcl-build

[xbuild] Fix PCL build

[llvm] Add mono_llvm_set_call_notail () helper function, not yet used.

[llvm] Mark as the OBJC_METHOD_VAR_NAME/OBJC_SELECTOR_REFERENCES globals as used to prevent llvm from optimizing them away.

[llvm] Disable tail calls when using llvm 3.9.

Fix tarball package build broken by 8f130a6e17c3729f32c3bf930941ab6587f6fe38

- Microsoft.WebApplication.targets was inadvertently removed.
- The new Microsoft.NuGet.Build.Tasks assembly sources were not getting dist'ed. Adding to DIST_ONLY_SUBDIRS fixes this for now,
  though we can maybe add it to SUBDIRS instead (but neither me nor Marek know for what exactly that's used)

[xbuild] Fix %Identity issues

Identity metadata is the exact, unmodified ItemSpec.

[xbuild] Update PCL targets

[xbuild] Framework path should have trailing slash

Merge pull request #3280 from BrzVlad/fix-stw-stack-start

[sgen] Initialize stack_start to 0 when a thread is signaled for stw

[llvm] Add a workaround for 3.9 based llvm versions using 'x15' as the location of the rgctx argument on arm64 even through it is reserved.

[jit] Save/restore cfg->ip during inlining, so instructions emitted after a failed inline have the correct il offset.

Merge pull request #3132 from alexanderkyte/libmono_safe_undefined

[runtime] Make mini still build when -no-undefined given

[runtime] Don't build mobile_static on default preset, don't know which configuration to use

[runtime] Disable tests for AOT that require on unsupported runtime features

[runtime] Hardcode preset feature disables

[mobile_static] Move PLATFORM_AOT_SUFFIX into configure.ac

[mobile_static] AOT libs not aoted by the test runner

[mobile_static] Skip all appdomain-related tests

[mobile_static] AOT assemblyresolve for tests

[mobile_static] Build mono/tests bitcode files in subdirectories to make threadsafe

[mobile_static] Skip appdomain tests on mobile_static

[mobile_static] Make test runner aot each assembly individually

[mobile_static] Skip mcs compiler tests for mobile_static

[mobile_static] Skip verifying ilasm.exe on mobile_static

ILASM.exe has features which a mobile_static runtime will not support.
It is invoked with an external mono when used in the runtime.
We skip it here because otherwise it will fail to verify.

[mobile_static] Configure mini fullaot tests to work with mobile_static

[mobile_static] Enable Mono.Simd namespace to fix mini tests

[mobile_static] Use mobile_static paths in mono/mini tests when necessary

[mobile_static] Blacklist mono/tests sgen tests for mobile_static

[mobile_static] Pass aot options to mono/tests test runner if applicable

[mobile_static] AOT the mono/tests test runner when AOTing tests

[mobile_static] Make mono/tests runner handle steps necessary for mobile_static

[mobile_static] Move AOT build / run flags to make accessible in /mono

[mobile_static] Don't include Mono.Posix dependency to test driver

[mobile_static] Don't try to use SIGKILL to get test stacktrace if Mono.Posix not available

[mobile_static] Blacklist runtime tests for mobile_static profile

[mobile_static] Make preset AOT_RUN_FLAGS and AOT_BUILD_FLAGS available to /mono

[mobile_static] Set MCS build options for mobile_static to feature gate runner

[mobile_static] Ensure the mobile_static profile builds ilasm

[runtime] Get ilasm.exe compiling with mobile_static

[threadpool-ms] Switch to GC Safe mode in event_wait backends

Fixes [Bugzilla #42625](https://bugzilla.xamarin.com/show_bug.cgi?id=42625)

[llvm] Fix the DISABLE_JIT build.

[aot] Add a gen-seq-points-file deprecated option.

[mono-symbolicate] Handle wrapper stackframes

[mono-symbolicate] Fixes type with namespace not found

[mono-symbolicate] Adds log messages.

Added logger to mono-symbolicate, so we can add debug, warning and error
log messages.

[runtime] Fix small issues from https://github.com/mono/mono/pull/3278.

[tests] Reduce a test iteration in process-leak.exe so it doesn't take minutes to run.

[runtime] A bunch of small fixes.