build.py: Make sure expandKeys has been called on the data dictonary before running tasks fixing various strange issues (from poky). Correctly add a task override in the form task-TASKNAME which whilst a change in behaviour shouldn't matter since the original approach didn't work at all

manuals: Add missing options documentation (thanks to zecke for noticing and the patch)

BBHandler.py: Correctly handle '-' characters in class names (#2958)

cooker.py: Make sure Build Completed events are generated even when tasks fail

utils.py:  Add md5 and sha256 checksum generation functions from Ross Burton (via Poky)

Allow to store the PersistData in a PERSISTENT_DIR.

If PERSISTENT_DIR is used wiping the tmpdir will not wipe the PersistData
which sometines is wanted (e.g. for git SRCREVs).

Acked-By: Richard

runqueue.py: Add bb.runqueue.check_stamp_fn() for use by packaged-staging, also improve check_stamp_task debug output

runqueue/taskdata.py: Make sure recrdeps tasks include all inter-task dependencies of a given fn

runqueue.py: Flush stdout/stderr before forking to fix duplicate console output

providers.py: No longer weight providers on the basis of a package being "already staged". This leads to builds being non-deterministic.

runqueue.py: Fix default whitelist variable value

runqueue.py: Add BB_STAMP_WHITELIST option which contains a list of stamps to ignore when checking stamp dependencies and using a BB_STAMP_POLICY of 'whitelist'. Useful for packaged-staging

providers.py: Improve runtime PREFERRED_PROVIDERS warning messages to be more user friendly

fetchers: Tweak the new checkstatus code to handle some corner cases better

lib/bb/fetch: Add ability to fetchers to check URL validity without downloading

Patch from John Lee to always use UTC time for checking out files.

I would suggest set cvs fetch in bitbake to always use UTC+0 for this
matter and we set the min and max date according to UTC+0 instead of
our own timezone.  Enclosed please find the patch to the bitbake 1.8
branch.

Pretty sane.

fetch/__init__.py: Improve runfetchcmd so errors are seen and various GIT variables are exported

fetch/cvs.py Add proxy support to CVS fetcher (patch from Cyril Chemparathy/Poky)

cache.py: Fix a bug where changed files weren't getting spotted and an invalid cache was being used

git.py:  Work around refs/HEAD issues with git over http (fixes #3410)

cache.py: Ignore cache load errors and always just rebuild

cache.py: Improve the way various data structures are handled to speed up the hot cache data path

cooker.py: Fix a typo breaking -b -c -f combiantion of options

runqueue.py: Fix problems with recrdeptask handling where some idepends weren't handled correctly

runqueue.py: Switch to check_stamp code since its simpler than check_stamps and accounts for tasks which adjust other stamps in the system such as packaged staging. The drawback is we can't 'accelerate' task numbers to get an accurate idea of how many tasks will run

runqueue.py: Fix check_stamps function

1.8.x/cooker: backport -f and -b fix from trunk

taskdata.py: When handling build target failures make sure idepends are checked and failed where needed. Fixes --continue mode crashes.

cache.py: Bump the cache version since digraph was removed and mayb still be present in old cache files

build.py: Fix task variable expansion issue

runqueue.py: Add BB_SCHEDULER and BB_STAMP_POLICY variables

runqueue.py: Fix recursive looping issue

fetch/__init__.py: Make fetcher timestamp updating non-fatal when permissions don't allow updates

Remove digraph and switch to new stamp checking code.

Convert -b option to use taskdata/runqueue

runqueue.py: Add StampUpdate event

shell.py: Update to use cooker.buildFile()

utils.py: Tweak explode_deps function to remove unused manipulation

build.py: Remove uneeded mkdirhiercall

build.py: Convert exec_task to use getVarFlags

cooker:Remove a debug message from the parsing loop to lower overhead

cache: Optmise cache handling by more quickly detecting an invalid cache, only saving the cache when its changed, moving the cache validity check into the parsing loop and factoring some getVar calls outside a for loop.

data_smart: Fix getVarFlags bug in data_smart

bbimage: Update to reflect recent core changes

cooker, BBHandler: Change parseConfigurationFile so it works on real data, not a copy.  Handle 'base' inherit and all other INHERITs from parseConfigurationFile instead of BBHandler

git.py: Fix git branch tags fetching

1.8.x: Fix MANIFEST in branch+release

runqueue.py: Fix exit code for build failures in --continue mode

Release bitbake 1.8.10

fetcher/git: remove debug output, add docstring

persist_data.py: Add sqlite version checks

cvs.py: Add norecurse and fullpath options to cvs fetcher (from Poky/Marcin)

taskdata/runqueue.py: Make taskdata and runqueue errors more user friendly

add branch support to the git fetcher -- thanks Otavio Salvador.

wget.py: Change the wget fetcher failure handling to avoid lockfile problems

cooker.py: Fix -g option breakage from previous commits

fetchers: Properly raise errors for invalid source URI protocols (from poky). utils.py: Fix a spelling mistake.

shell.py: Fix shell data updating problems (#1880) (add hunk missing from the last commit)

shell.py: Fix shell data updating problems (#1880)

Fix shell showdata command (#3259)

cooker.py: Add support for '-e target' (#3432)

runqueue.py:  Don't give a stacktrace for invalid tasks, have a user friendly message (#3431)

runqueue.py: Add task scheduler abstraction and some example schedulers. Improve circular dependency chain debugging code and user feedback.

runqueue.py: Improve code comments

runqueue.py: Disable task number acceleration since it can allow the tasks to run out of sequence

Add selfstamp and lockfiles flags

Add bb.utils.lockfile() and bb.utils.unlockfile() from Poky. Use these functions in the fetcher code

Fetcher SRCREV handling updates, improvements and fixes from Poky, typo fix for bin/bitbake

git.py: Use git-fetch instead of git-pull removing any need for merges when fetching (we don't care about the index). Fixes fetch errors. Add BB_GENERATE_MIRROR_TARBALLS option, set to 0 to make git fetches faster at the expense of not creating mirror tarballs. (from poky)

runqueue.py:  Allow multiple options for deptask flag (from poky), fix comment typo in trunk.

bb/__init__.py: Add bb.copyfile function similar to bb.movefile (and improve movefile error reporting)

data.py: Fix unexport handling (#3135)

taskdata.py: Fix 'depends' flag splitting

providers.py: Fix bogus preferred_version return values

runqueue: fix typo

fetch/: Add mercurial (hg) fetcher from Robert Schuster (#2913)

bzr.py: bzr fetcher tweaks from Robert Schuster (#2913)

build.py: Add support for cleaning directories before a task in the form: do_taskname[cleandirs] = 'dir'

fetch: Add bzr fetcher

Add support for the syntax "export VARIABLE"

BBHandler.py: Improve debug message

svn.py: Handle paths in svn fetcher module parameter

runqueue.py: Detect builds of tasks with overlapping providers and warn (will become a fatal error) (#1359).Add MULTI_PROVIDER_WHITELIST variable to allow known safe multiple providers to be listed. [backport]

providers.py: Fix regressions

Changelog: Remove duplicates

providers.py: Backport various providers fixed from trunk (+update Changelogs)

cooker.py: Warn about malformed PREFERRED_PROVIDERS (#1072) [backport]

__init__.py: Fix a bug in bb.decodeurl where some.where.com/somefile.tgz decoded to host="" (#1530) [backport]

cooker.py Add support for BB_NICE_LEVEL option (#1627) [backport]

bitbake: use Psyco only on x86 (no support for other archs) - taken from Poky

Release BitBake Version 1.8.8 and increase the branch version to 1.8.9

[regression] Make SRCDATE/CVSDATE for the fetchers work again. This regressed in r653

PN should always be set for files as it comes from bitbake.conf but as we are close
to a release make the least intrusive change and copy SRCDATE and CVSDATE to the above
line as well. I think the second return is dead code and we should remove it.

cooker.py: Only try to change terminal flags on terminals

fetch/__init__.py: Don't create .lock files for local files

cookey.py: Clear the terminal TOSTOP flag if set (and warn the user)

runqueue.py: Fix idepends handling to avoid dependency errors, improve debugging capability

data.py: Split expandKeys into two for loops to benefit from the expand_cache (12% speedup)

bb/__init.py: Sort digraph output to make builds more reproducible

BBHandler.py/build.py: Rework add_task to be more efficient (6% speedup, 7% number of function calls reduction)

taskdata.py: Improve dump_data debugging code