Import NetBSD cat(1)

Import NetBSD ed(1)

imported code harmonisation

. common/include/arch/i386 is not actually an imported
  sys/arch/i386/include but leftover Minix files;
  remove and move to include/
. move include/ufs to sys/ufs, where it came from, now that
  we have a sys/ hierarchy
. move mdocml/ to external/bsd/, now we have that
. single sys/arch/i386/stand/ import for boot stuff

tools: some nbsd_ports fixes

. figure out which dates were used for various nbsd imports
  and specify them for each one in the nbsd_ports file
. other minor fixes and improvements

sprofalyze forgets a.out and learns that ELF binaries have larger addresses

libminc-related updates
- add files needed for acpi, ahci, fbd, vfs to libminc
- remove "-lc" from their respective makefiles
- remove setenv from libminc (requires initialization)

Test48: resolve existing hostname with static IP address

test48: disable failing resolver test

Temporary, until a better solution comes along.
Also, .xxx is now a valid TLD!

libddekit: resolve compiler warnings

Introduced by commit ca95f69.

pci: apply ACLs to device reservations

pci: USER_SPACE cleanup

drivers: slightly better use of PCI constants
- introduce PCI_BAR_{IO|MEM}_MASK
- remove redundant PCI definitions from lance
- fix vbox BAR retrieval

drivers: remove redundant PCI ID tables
- remove PCI tables where system.conf suffices
- remove drivers' ability to mess up NIC order
- fix dp8390 PCI enumeration
- convert ti1225 to instance model
- add system.conf entry for ti1225

dp8390,ti1225: reenable register memory mapping

pci: remove pci_init1 API call

swifi: modernize a bit
- ELF support
- update of one example script
- warning fixes

Kernel: do not retry message delivery upon failure

drivers: resolve compiler warnings

Import NetBSD du(1)

mfs: more accurate stat.st_blocks estimation

On MFS file systems, the stat(2) call now counts indirect blocks as
part of the st_blocks calculation, in addition to proper initial
rounding of the file size. The returned value is now a true upper
bound on the actual number of 512-byte blocks allocated to the file.
As before, it is not accurate for sparse files.

mfs: remove legacy stat code

Kernel: only reset/reload FPU state when necessary

Kernel: retain FPU state upon save

On the x86, saving FPU state has the side effect of resetting this
state. In some cases (fork, getcontext), this would cause the state
to be lost. This patch restores the FPU state right after saving it,
except when different state is loaded immediately after.

Kernel: pass FPU restore exception to user process

Previously, user processes could cause a kernel panic upon FPU state
restore, by passing bogus FPU state to the kernel (through e.g.
sigreturn). With this patch, the process is now sent a SIGFPE signal
instead.

Kernel: adjust FPU state upon process slot swap

This fixes seemingly random FPU exceptions and kernel panics occurring
after a system server restart.

e1000: add support for 82545EM

Tested on VirtualBox and VMware.

LWIP,NETSOCK - lwip uses asynchronous protocol

- libnetsock - internal implementation of a socket on the lwip
  server side. it encapsulates the asynchronous protocol

- lwip server - uses libnetsock to work with the asynchronous
  protocol

LWIP fixed Makefile

VFS - no CANCEL for async non-blocking operations

- if an operation (R, W, IOCTL) is non blocking, a flag is set
  and sent to the device.

- nothing changes for sync devices

- asyn devices should reply asap if an operation is non-blocking.
  We must trust the devices, but we had to trust them anyway to
  reply to CANCEL correctly

- we safe sending CANCEL commands to asyn devices. This greatly
  simplifies the protocol. Asynchronous devices can always reply
  when a reply is ready and do not need to deal with other
  situations

- currently, none of our drivers use the flags since they drive
  virtual devices which do not block

VFS : simplification of handling asyn selects

- select_request_async() returns no ops by default

- wantops in do_select() always set correctly, do_select() does
  not need a special case for SUSPEND (and ugly code)

VFS - dev_style_asyn()

 - dev_style_asyn() tests whether a device is asynchronous

 - simplifies code and helps readability

VFS - cancel_nblock()

- duplicate code in dev_io() which sends CANCEL in case of a
  non-blocking operation moved to cancel_nblock()

include netdrv_tg3 on cd

Cosmetic boot fix.

The NetBSD boot loader loads automatically the kernel module appropriate
for the detected root file system; it is preset at "ffs".  The MINIX3fs
support does not reset the underlying global variable, since there are
no use for this on MINIX.  As a result, the boot loader searches for
/ffs.kmod, and issues two warnings about "module failure to open/load."

fix for -lsys assert(): call panic()

. call panic() instead of abort() so that stacktraces are printed
. also call printf(..) instead of fprintf(stderr, ..)

start modules at 16MB

. keep more memory free below 16MB for e.g. lance

Revert "SMP - no_apic=0 and acpi=1 set when CONFIG_SMP=y"

This reverts commit c468f4efa5a9414c23949372158e711bd7b82a29.

Since we use the new boot loader, this hack is no longer necessary.

kernel: Update copyright date

iso9660: link with libc

Prevents assert("inited") in _env.c (libc) from triggering.

VFS: improve crashed FS resource cleanup

When VFS detects that an FS has crashed and tries to clean up
resources, it marks fairly late in the process that a vmnt is not
to be used again (to send requests to). This allows a thread to
become blocked on a vmnt after all blocked threads were stopped, but
before it finds out it shouldn't try to send to that vmnt.

allow elvis to be invoked as ex

mkimage: use a lower start address

VFS: remove unused variables

VFS: fix last_dir not returning last directory

If the provided path was only a single component (i.e., without
slashes), then last_dir would return early and skip the symlink
detection (i.e., check whether the path ends in a symlink and resolve
that first before returning). This bug triggered an assert in open
which expects that an advance after an last_dir (with VMNT_WRITE lock)
does not yield another vmnt lock.

fix for git commit id from branch

. git would take remote repo HEAD otherwise

pkgin needn't be on cd

try multiple reset methods

. fixes reboot-hang under vbox
. makes experience nicer under vmware
. taken from netbsd reset code

release: can specify branch

VFS: remove erroneous assert

The assert was meant as an additional check to the assert in link.c:198.
The reasoning behind the assert in link.c:198 is that once you've
obtained a write lock on a vmnt, you can't get an additional read lock
on the same vmnt. However, that does not always hold for the assert in
path.c:281 where the situation could be that you've obtained a read lock
and managed to get another read lock (this is possible). In other words,
the assert in path.c:281 is not the right place to check for that
situation.

portugese keymap

contributed by ralxc

pkgin_cd clarification in motd

better cpp

x11 on cd needs perl, drop groff for space

VFS: various select fixes

- Fix locking bug when unable to send DEV_SELECT request. Upon failure
  VFS tried to cancel the select operation, but this failed due to trying
  to lock a filp that was already locked to send the request in the first
  place. Do_select_request now handles locking of filps itself instead of
  relying on the caller to do it.  This fixes a crash when killing INET.
- Fix failure to revive a process after a non-blocking select operation
  yielded no ready select operations when replying DEV_SEL_REPL1.
- Improve readability by using OK, SUSPEND, and standard error values as
  results instead of having separate macros in select.
- Don't print not having a driver for a major device; after killing a driver
  select will trigger this printf.

test set: remove GCC specificity

servers: fix clang warnings in iso9660fs and vm

/usr/lib/cpp script to invoke clang -E

. mainly to keep X working

kernel/utility.c: fix implicit decl warnings

Fixes to allow versionless packages on cd

Use objcopy to build ramdisk object

. during build, uses much less memory,
  disk space, and time
. lets us throw out bintoc

gzip boot modules.

. import gzip

Remove obsolete INSTALLFLAGS from makefiles

mkboot: ensure image target dir is cleaned up

Strip only the image binaries

fix shell tests - no cc or aal

install library manpages

. harmonize bsd.lib.mk and bsd.man.mk with netbsd files
. throw out minix section 3 (library calls) manpages,
  replaced by netbsd ones that are now installed

no symlink for dropped manpage

More cleaning up

libblockdriver: attribute usage bugfix

updateboot script for netbsd bootloader

re-enable update-superblock check

This reverts commit cdbc4bfb13b9446a00da95efa1e13ebaa4f35741.

simplify chrootmake.sh

. just use make world

Remove elle(1) editor, due to an incompatible license

Don't update mtab upon mounting procfs

It causes an ugly error message when booting from cd and it gets
overwritten by `printroot >/etc/mtab` in /etc/rc anyway.

Added UPDATING note about newer clang required.

user(8): remove output file from source

Make ELF kernel boot faster

update_bootcfg script

. script to make neat menu entries for all /boot/minix/* dirs
  in /boot.cfg, read by new bootloader
. invoked when new images are created

Full switch to clang/ELF. Drop ack. Simplify.

There is important information about booting non-ack images in
docs/UPDATING. ack/aout-format images can't be built any more, and
booting clang/ELF-format ones is a little different. Updating to the
new boot monitor is recommended.

Changes in this commit:

. drop boot monitor -> allowing dropping ack support
. facility to copy ELF boot files to /boot so that old boot monitor
  can still boot fairly easily, see UPDATING
. no more ack-format libraries -> single-case libraries
. some cleanup of OBJECT_FMT, COMPILER_TYPE, etc cases
. drop several ack toolchain commands, but not all support
  commands (e.g. aal is gone but acksize is not yet).
. a few libc files moved to netbsd libc dir
. new /bin/date as minix date used code in libc/
. test compile fix
. harmonize includes
. /usr/lib is no longer special: without ack, /usr/lib plays no
  kind of special bootstrapping role any more and bootstrapping
  is done exclusively through packages, so releases depend even
  less on the state of the machine making them now.
. rename nbsd_lib* to lib*
. reduce mtree

make panic() work for multiboot/elf case

. we cannot use the boot monitor to print the system diag buffer
. for serial, we do nothing, just reset, everything is already printed
. for not-serial, we print the current diag buffer using direct video
  memory access from the kernel

clang compile fixes

release: fix for rm -rf

. new rm can return failure exit code

ELF hardlinks in /boot for compatibility with old boot.

VFS: replace VFS with AVFS

libmthread: fix typo in comments

libmthread: add guard pages to stacks

Add guard pages to the top of the stack to catch overflow errors.
Moreover, fix a bug where libmthread would keep using a stack that was
just deallocated; a detached thread would deallocate its own stack after
it was finished running).

libmthread: don't free() user allocated stack space

libblockdriver: increase stack size to 8KB per thread

silence makewhatis in daily script

sys: move some include dirs

. sys/machine should be sys/arch/i386

.gitignore: add another generated directory

AVFS: reinitialize lookup object before reuse

Also clean share/*, including zoneinfo

Fix shutdown message in setup.sh

Proper banner for CD.

Warn users about non NetBSD mbr.

New boot doesn't work with old mbr, when there are multiple MINIX
partitions. Warn user about it and suggest to install new mbr.

Support reinstall and new boot.

Build both old boot and new boot (for setup).

Build release CD based on new boot.

Also add stuff for usb stick and hdemu.

writeisofs: also boots plain binaries with -B

With -n -b file, a.out boot images can be used for CD booting;
with the new -n -B file option, plain binary (like bootxx_cd9660)
can be used instead.
Restore working the -h and -f options while there.
And add a new -F option for 2.8MB floppy image.