[aot] Print JIT failures without having to pass an additional option. (#4648)

Merge pull request #4612 from kumpera/android-changes-part2

Fix Android compilation and some tests

[tests] Rework how we AOT compile tests + General cleanup of make targets (#4639)

[runtime] Don't return the modules for the current process when pid != getpid ().

[System] Disable test that is too unreliable.

Improve test assert.

[System] Disable a few tests that don't work on Android.

[System] Disable test that doesn't work on Android.

[io-layer] Don't RC std handles or the current process on every lookup.

Caller don't expect those lookups to be RC'd so they don't compensate. This leads to unbound growth of their ref count, which eventually overflows.

[runtime] When looking up the process name, don't bail out if you can't load its modules.

Loading modules for other processes can fail under some linux sandboxing rules but that doesn't mean
we should not be able to compute the process name. So when module == NULL, we make module loading non-fatal.

[runtime] Improve tracing of process name lookup functions.

[runtime] Fix compilation under Android

[jit] Fix a leak in the trampoline info registration code. (#4646)

[interp] testcase for stack overflow on tail recursion opt

inspired by

./mcs/mcs/assign.cs:
SimpleAssign:CheckEqualAssign ()

[interp] fix stack overflow on tail recursion

[interp] fix stack alloc size

[msvc] Update csproj files (#4645)

[System.Data] Fix Azure SQL specific issues (ProviderTests) (#4622)

* [System.Data] Fix Azure SQL specific issues (ProviderTests)

* [System.Data] ChangeDatabase - Azure specific test

* [System.Data] SqlConnectionTest: use Assert.Throws instead

[Facades] Add forwarder for DbDataReaderExtensions

[msvc] Update csproj files

[tests] Fix the mcs-compileall target in runtime/ (#4637)

It is used as the "verify" step on Jenkins/Wrench and I noticed
it didn't run recently.

Looks like it was broken a while ago by 695e8f53ae7d2139.
Moving the verifiable_files variable at the top is wrong since
the $$profile variable is only defined inside the for loop and
so we'd get an empty list.

When that was fixed it still didn't work as piping to `echo`
doesn't work. Replaced it with a Makefile solution instead.

Merge pull request #4630 from BrzVlad/feature-valloc-limit

[sgen] OOM testing

[runtime] Add arch size InterlockedAdd

[sgen] Add old forgotten oom tests to sgen oom suite

[sgen] Add oom testing suite

[sgen] Don't pass gc options to the test-runner

Also remove some plain configurations (in the tests we should explicitly select the major)

Merge pull request #4618 from BrzVlad/feature-par-nrs

[sgen] Parallel nursery collections

[appletls]: Make CFObject.dlsym() private and fix CFBoolean. (#4640)

This fixes a native crash when attempting to use appletls.

[sgen] Split up concurrent sweep from worker logic

While this was ok because workers and sweep could not run at the same time, this is no longer the case with parallel nursery collections. In the future, if many threads will be required for different types of jobs, we can consider running them on same native thread, but the jobs will still need to have appropriate contexts (the SgenThreadPool they belong to).

[sgen] Increase gray stack section size

Stealing a gray section is relatively expensive since it requires locking. We want to avoid repeated stealing, since only one gray queue section is stolen at a time (in the case of the parallel collector).

[sgen] Increase parallelization of minors

[sgen] Parallel nursery collections

Scans the card table and the roots on the workers, including draining the stack.

Fix mono_marshal_alloc to accept gsize instead of gulong(unsigned long) (#4623)

* Fix mono_marshal_alloc to accept gsize instead of platform dependent unsigned long

* fix header

[System.Core] Linker friendly test update

[Facades] Fixes System.Threading.Overlapped

[System.Core] Remove duplicate files

Bump cecil

[corlib] Port more of corert array

[llvm] Add sign extensions for the index register used during bounds checks and array address calculations. (#4636)

Merge pull request #4635 from xmcclure/5.3-bump

Bump master to 5.3 due to creation of 2017-04 branch

[jit] Fix a regression caused by 399f6e2425d5fdf73c4f956e9e906613b55968d0. Avoid a crash if MONO_VERBOS_METHOD is used.

Bump to 5.3 due to creation of 2017-04 branch

[jit] Fix the casting between arrays with bounds and vectors even for special cased types like object[]. Fixes #54212. (#4633)

Correctly detect relative Uri in package parts (#3630)

[runtime] Default Interface Method support (#4625)

* [runtime] Add support for the simplest case of default interfaces, where the default method is used.

* [runtime] Implement overriding of default interface methods in interfaces.

* [jit] Fix gshared support for default interface methods, they require an mrgctx since the this argument doesn't point to the implementing class, not the interface.

Merge pull request #4628 from xmcclure/orbis-profile

Platform support fixes

[jit] Fix the ppc build.

Make monolite profile directory versioned (#4631)

If you're building with monolite currently the build system
checks for the existence of mcs/class/lib/monolite and just
uses it in that case.

It becomes a problem when bumping corlib version since if you
pull the update and try to build it'll use the old monolite
and you'll hit the "corlib version not in sync" error.

By making the monolite directory include the version this can
be avoided and everything works out of the box.

Also removed the confusing "You need Mono version 4.8 or better"
message since we actually require a newer version in
basic-profile-check.cs now and keeping them in sync is error prone.

[msvc] Update csproj files (#4632)

Style fixes for PR feedback

change icall to use gsize as well

[sgen] Add debug option for valloc limit

This allows us to stress test OOM inside sgen (and potentially other areas).

[System] Fixes build

Fix Windows build

[msvc] Update csproj files (#4624)

Merge pull request #4621 from alexanderkyte/strdup_env

[runtime] Switch getenv to use heap memory

Add System.Security.dll to orbis profile

More platform support fixes

- Support platforms without mkdtemp
- Fix compile for console-null.c

Combined cherrypick of changes between mono-4.8.0-branch and orbis-branch-30

ORBIS #ifdefs in BCL, exclude several files and assembly directories
from the orbis build, HAVE_LOCALTIME_R define in C.

[sgen] Emit fast inline wbarrier instead of the wrapper one

Which seems to be about 4 times slower than the inline one.

[interp] basic filter clause support

[runtime] Switch getenv to use heap memory

Getenv doesn't use heap memory, it uses static memory.
Mono's usage is consistent with a view of getenv memory contents
that are durable and can be stored and manipulated.

In a multithreaded context, getenv calls can race and corrupt
string buffers as they are read. In a single threaded context,
subsequent calls to getenv will lead to overwriting the memory
that pointers to previous calls point to.

In order to bring memory safety back, we duplicate memory and
manage it at each call-site.

Note: this changes the API semantics of g_getenv. This is necessary
because the locking around the getenv buffer is safest when confined to
the function in eglib.

[System.Web] Implement HostingEnvironment.QueueBackgroundWorkItem

From reference source.

This is required for the Azure Functions Host to run unmodified.

Bring in the new reference assemblies (#4619)

This bumps the reference assemblies submodule so we can install
the new assemblies which are built from source.

[runtime] Fix typo in icall name (#4616)

Add beginnings of mixed code execution support (#4613)

* [interp] Fix a few problems exposed by the iltests.exe test suite.

The ENDFINALLY opcode should empty the stack. The INITBLK opcode is two bytes.

* [interp] Store the MonoMethod->RuntimeMethod mapping in a separate hash in MonoJitDomainInfo instead of using MonoDomain.jit_code_hash, the latter contains MonoMethod->MonoJitInfo mappings. Also avoid holding the domain lock while creating the RuntimeMethod structure.

* [interp] Add a mono_jit_compile_method_jit_only () function which always compiles its argument using the JIT/AOT.

* [interp] Print a warning when --interpreter is used with a runtime compiled without ENABLE_INTERPRETER.

* [interp] Fix the size of the icall enter trampoline on amd64. Fix some formatting issues.

* [interp] Add support for calling JITted code from the interpreter. This uses the gsharedvt_out wrappers used by bitcode to reduce the number of possible calling conventions since all arguments and the return value are passed/returned by value. Not enabled yet.

* [interp] Add a --interp= argument which allows passing of options to the interpreter. Add a 'jit=' option which is used to control the set of types whose methods will be called by exiting the interpreter.

* [interp] Add tests for mixed mode execution.

* [interp] Add support for calling interpreter code from JITted code.

* [interp] add mixedmode target to CI

* Revert a debug change.

* [runtime] Fix the locking in the gsharedvt/interp wrapper creation functions.

* [interp] Implement support for interp->jit calls with more than 8 arguments.

[System] WebSockets from corefx

[sgen] Remove CARDTABLE_STATS

For dirty card counts we already have heavy counters. For card table scan time we already have the binary protocol which has more flexibility.

[sgen] Make sure workers don't have evacuating blocks on the free-lists

Double copying of an object during a collection is not allowed. If we allocate from an evacuating block this can happen.

[sgen] Blocks on the freelist don't need to have been swept

[sgen] Shutdown thread pool worker even if it's not active

[sgen] Don't use workers during finishing pause if we're not parallel

Worker can be used though to drain the gray stack of workers after a forced finish (at the start of the finishing pause).

[sgen] Add scan/copy context for the simple parallel nursery

[sgen] Add option for parallel nursery collector

[bcl] Avoid waiting for events inside a finalizer in Process.WaitForExit () because it can hang if the thread which sets the event is aborted during shutdown. Fixes #53843. (#4609) (#4617)

[msvc] Update csproj files

Merge pull request #4540 from kumpera/android-changes-part1

[bcl+runtime] Multiple small cleanups to Android.

[tools] Remove unused sources

[jit] Cleanup the signature of the mono_arch_get_static_rgctx_trampoline () function. (#4605)

Remove the unused MonoMethod argument, and rename the 'mrgctx' argument to 'arg', since it can be any value, not just
an mrgctx.

Bump cecil

Bump corefx

[jit] Add ref types to mini_get_underlying_type (), use it to simplify the switch loops in the jit. (#4606)

[threadpool] Pass callback at initialization (#4546)

This remove the possibility to execute different callbacks on the threadpool, but this allows us to remove the work_items_lock, which is called on the hot path of the ThreadPool.

[msvc] Update csproj files

Merge pull request #4168 from xmcclure/aot-man

Correctly document --aot options in man page

Remove 'experimental' label from full/hybrid AOT in manpage

Correctly document --aot options in man page

- Ensure all AOT options are both documented and listed in
  alphabetical order in both the manpage and --help line
- Ensure all exceptoins are commented in the aot-compiler.c source
  with "intentionally udnocumented"

[mono] Remove unused icall

Update copyright years

[corlib] Add back X509 support for watchOS.

Otherwise we'd be regressing existing (and working) behavior.

Disable a few x509 tests that fail on older macOS

- Handles https://bugzilla.xamarin.com/show_bug.cgi?id=53958
- https://bugzilla.xamarin.com/show_bug.cgi?id=53689 is filed to turn them
  back on later with a better version check
- SecCertificateCreateWithData handles invalid arguments differently based on
  macOS version

[corlib] Add more Array tests

[System.Windows.Forms] Fixes DataGridViewColumnCollection comparer not to return 1 on match

[System.Windows.Forms] Imrove DataGridViewColumnCollectionTest

[corlib] Use array managed parts from corert to fix bugs in sorting and arguments checking. Fixes #53196 and similar

Bump corert

[corlib] Fix RegistryKeyTest cleanup

Merge pull request #4594 from lambdageek/bug-53890

[remoting] Pass correct object to invoke of IRemotingTypeInfo.CanCastTo

Merge pull request #4570 from lateralusX/jlorenss/visual_studio_msbuild_fix

Windows msbuild triggers too much to rebuild.

Add FieldInfoMirror.FullName (#4588)