BitBake: Tag 1.6.2 and 1.7.2 of BitBake

cache.py: Allow version field in DEPENDS (ignored for now)

bump 1.7 versions

bin/bitbake: fix typo

bin/bitbake: Move handle_data() into parse_bbfiles instead of the callback

cache.py: Stop passing cooker around as its no longer needed

parse_py/ConfHandler.py: Remove broken default options (as identified by mithro)

data_smart.py: Add expand_cache, caching expanded data (but wiped on any write to the data) - gives a performance improvement

Minor bugfix in taskdata, the dump function was passing a list to bb.msg.debug where it expected a string.  Use ', '.join() to create a string.

taskdata.py: Remove a seemingly incorrect line of code fixing issues reported by pH5. This code was likely added for a reason so lets see what breaks...

Fix -f force option when used without -b

taskData.py: Only mark external targets as external

cache.py: Don't error if a file doesn't exist, just mark the cache entry invalid

taskqueue.py: Add a small cache for task ids for a big speed improvement

runqueue.py: Convert Deps and RunDeps fields into sets, add debugging code for tracing indriect circular dependencies

* shell: fix 'which' command
* shell: use 'rebuild' task for implementing rebuild

bin/bitbake: parse.handle must have an absolute path

bitbake/lib/bb/shell.py:
bitbake/bin/bitbake:
Split collect_bbfiles into collect_bbfiles and parse_bbfiles
Allow -b option to accept an expression which uniquely identifies a .bb file instead of requiring a full path
Disable BBFILES support within .bb files (it was already non-functional)

cache.py: The cache doesn't really need to know about any progress callback - adjust logging accordingly

taskdata.py: Clean up mesage handling for unbuildable targets - log at debug level unless the target was directly requested

build.py: Really fix debug_level references causing excessive debug output (s/general/default - thanks for spotting koen)

build.py: Fix debug_level references causing excessive debug output

cache.py: Drop uneeded BUILD_ALL_DEPS variable

lib/bb/shell.py - Use taskData and runQueue directly
lib/bb/runqueue.py - Add fn to TaskFailure
bin/bitbake - Remove now uneeded buildProvider

msg.py: Each -l option increases the debug level of that logging domain by 1 (similar to -D behaviour).

runqueue.py: Upon failure in abort mode, raise an exception rather than sys.exit

Turn BBParsingStatus into CacheData and move to cache.py

providers.py: Improve findBestProvider debug messages to explain the infamous 'preferred version 2.4 of glibc not available' messgae

build.py: Add interactive flag for tasks to optionally disable console redirection. Default to maintain backwards compatibility

bbimage: Add call to init logging variable

Add bitbake -l option to specify debug domains to show

Complete conversion to use bb.msg

Convert fetchers to use bb.msg

runqueue.py: Improve error messages (and make get_error_idstring a more global function)

bitbake/trunk/bitbake/bin/bbimage: prepend the path to BitBake instead of appending to fix #1108

    We want the 'local' libraries to be loaded before the installed copy. E.g.
    if you have a old version of BitBake installed but run a newer version
    from a local directory you want to load the BitBake libraries from the local
    directory

bitbake/bin/bitbake: Richard deserves a real (C) on BitBake

bitbake/trunk/bitbake: Update the ChangeLog to mention Richards great changes and Paul's svn fetcher change

bitbake/trunk/bitbake: Do svn co's to a permanent directory (SVNDIR) to be more similiar to the CVS fetcher
    Patch courtsey Paul Sokolovsky to address #1367 to have a
    permanent directory for subversion to ease updating of huge
    repositories.

bitbake/trunk/bitbake: Mention BitBake 1.6 as the stable branch

runqueue.py: Improve circular depends error message

runqueue.py: Fix the case where BB_NUMBER_THREADS is unset

runqueue.py: Make sure number_tasks is a number

runqueue.py: Make sure depends is initialised

taskdata.py: Fix so only warn about failed providers once.

runqueue.py: Print summary of active tasks when aborting a build run

taskdata.py: Add handling to remove/ignore files which fail after after the checks earlier in add_[r]provider

runqueue.py: Fix and disable some debug

bitbake/lib/bb/taskdata.py:
bitbake/lib/bb/__init__.py:
bitbake/lib/bb/shell.py:
bitbake/lib/bb/runqueue.py:
bitbake/lib/bb/msg.py:
bitbake/MANIFEST:
bitbake/bin/bitbake:
    Major rewrite and modularisation of the dependecy code. The code in bin/bitbake
    is replaced by the taskdata and runqueue modules. The code is designed to support
    multiple threads (although the initial threading algothirm is simplistic). The
    new code is aimed to be maintainable and debuggable (once msy.py is finished).

bitbake/lib/bb/build.py:
    - Add flag to disable exec_task dependency execution

bitbake/lib/bb/providers.py:
    - Add NoRProvider exception

Remove a debug statement that crept in

bitbake: Trunk is now at version 1.7.0

bitbake: Assign release number 1.6.0 to the trunk and update the ChangeLog

trunk/bitbake/bin/bitbake:
 * Fix up getRuntimeProviders calls in previous commit

trunk/bitbake/lib/bb/providers.py:
trunk/bitbake/bin/bitbake:
  * Move getProvidersRun -> bb.providers.getRuntimeProviders
  * Make filterProviders build_cache_fail parameter optional, pending
    rethink/removal
  * Add NoProvider exception

trunk/bitbake/bin/bitbake:
  * fix references to findBestProvider (closes #1288)

trunk/bitbake/bin/bitbake:
  * Add some variables to the data cache
  * Move self.preferred into the same place as other similar cache data
trunk/bitbake/lib/bb/cache.py:
  * Bump cache version number

trunk/bitbake/lib/bb/build.py:
  * Add version of stamp_is_current that works with cached data
  * Tweak mkstamp to work over broken? NFS filesystems (simply opening
    the file for write access wasn't enough to change the file's timestamp)
  * Have add_task create _task_deps variable containing various task flags
    for cache use

 r420@snorf:  ich | 2006-07-25 21:29:45 +0200
 Tabs -> Space
 r421@snorf:  ich | 2006-07-25 21:45:00 +0200
 lib/bb/parser/parse_c: Check if we parse a configuration file
     Check if we parse a configuration file and if we parse a config
     file and see illegal constructs like methods we will throw
     and parse error.
 r422@snorf:  ich | 2006-07-25 21:48:05 +0200
 lib/bb/parse/parse_c: Make sure to return 0 if we return -1 in some branch
 r423@snorf:  ich | 2006-07-25 22:21:06 +0200
 lib/bb/parse/parse_c: Modify BBPATH, handle inherits

     Add BBPATH to the dirname of the current fn. Handle INHERITS
     and include these files.
 r424@snorf:  ich | 2006-07-25 22:22:50 +0200
 lib/bb/parse/parse_c: Handle IOErrors on inheriting INHERITS

 bitbake/doc/manual: Do not mention rdepends.dot

lib/bb/parse/parse_c: Throw Parse Exceptions, crash less often

    -Make sure TOPDIR is set (do not declare this as an error here)
    -Do not crash on 'NULL' strings
    -Throws exceptions properly using 'except -1' from within our
     cdef.

lib/bb/parse/parser_c: Handle includes, requires, cope with our syntax

    -be able to parse variables like PREFERRED_PROVIDER_virtual/kernel
    -handle includes and requires, add 's' to %(fn)
    -be less verbose

bitbake/lib/parser/parse_c: Avoid some segfaults

msg needs to import sys, it calls it

Testing CIA notification, again.

Testing CIA notification.

switch pastebin provider to http://rafb.net/paste
patch courtesy Zwelch

Contrib: update the Vim syntax highlighting to include the 'require' keyword and '.=' and '=.'.  Add a Vim ftdetect plugin to properly set the filetype on bitbake files.

bitbake c parser: first steps torwards a working parser

bitbake/lib/bb/__init__.py:
bitbake/lib/bb/build.py:
bitbake/lib/bb/utils.py:
bitbake/lib/bb/shell.py:
bitbake/lib/bb/providers.py:
bitbake/lib/bb/msg.py:
bitbake/bin/bitbake:
bitbake/bin/bitdoc:
bitbake/classes/base.bbclass:
Start an overhaul of the message handling in bitbake:
- Introduce a new msg module to replace the existing simple calls.
- The msg module adds the conncept of message domains so ultimately we can
  select which kinds of debug messages we want to see (it uses an Enum class
  for this)
- Add a warn logging level for things the user should really pay attention to
  as note is a little overloaded at present
- Start converting to use the new fuctions

lib/bb/build.py: fix for 1017, try to change back to the prevdir

    In the case of rm_work.bbclass we might have deleted the
    directory where we come from. Do not fail to avoid
    the issues described in #1017

bitbake/lib/bb/build.py:
- Remove some stale inactive code

bitbake/lib/bb/providers.py:
bitbake/lib/bb/__init__.py:
bitbake/lib/bb/shell.py:
bitbake/bin/bitbake:
* Move providers functions into their own file. The arguments are horrible
  at present but we have to start somewhere with the cleanup and refactoring.

lib/bb/fetch/git.py: Add some commands to clean up the git directories to make things faster and use less space

bitbake/lib/bb/fetch/*:  Implement special 'now' handling for BitBake
    Patch courtsey Justin Patrin to teach BitBake SRCDATE="now" handling.
    If SRCDATE is set to now we will not look at the temporary DL_DIR
    for a saved tarball as we want to download a new version. OpenEmbedded
    should consider stamping the do fetch phase.

    Justin thanks for the patch and sorry for all the trouble

bitbake/doc/manual/usermanual.xml: Document the 'now' method for svn,svk and cvs

bitbake/doc/manual/usermanual.xml: Use version 2.5 of the license

    The CreateCommons license is now at version 2.5. The spirit
    remains unchanged.

 bitbake/bin/bitbake: DOT code cleanup
     Really use myFilterProvider which will take care
     of the PREFERRED_PROVIDER, and add documentation
     to the code.

 bitbake/bin/bitbake: Add code to handle RDEPENDS

     Add code to handle the RDEPENDS. We use getRunProviders
     and the rundeps variable of BBParsingStatus to get the
     providers, similiar to addRunDeps.
     The graph is now not looking too bad.

 bitbake/bin/bitbake: We need to look at seen_depends everytime and can't filter

     Due the recursion we need to reevualate seen_depends everytime.
     Move the variables/files down to the actual call...

 bitbake/bin/bitbake: Add first version of mixed dependency handling

     First version of showing DEPENDS and RDEPENDS in the same graph.
     The is one issue that some provider get handled twice and we
     see two arrows.

 bitbake/bin/bitbake: Kill the generation of the RDEPENDS for

     RDEPENDS needs different handling than DEPENDS. Looking
     in providers is not enough most of the times.

 bitbake/bin/bitbake: Kill whitespace

 bitbake/bin/bitbake: CLI help updates, DOT generatin emits version
     Emit the Version of the provider in the node as well. Create
     a myFilterProvider to take PREFERRED_PROVIDER into account.

 doc/manual/usermanual.xml: Add some Bla about using the -g option

     Start documenting the -g option... well start with it. Hopefully
     someone else will document it.

 doc/manual/usermanual.xml: Simplify the sentence

 doc/manual/usermanual.xml: Fix the EventHandler example

     The python method needs a closing brace. Add the
     missing one.

 fetcher module:
     Add ParameterError as Exception from bug report #72

 bitbake/lib/bb/shell.py:
     -Rename last trace of pastebin.com to oe.pastebin.com
      (which was in a comment any way)

 bitbake/lib/bb/data.py:
     Add another testcase regarding createCopy
     and update_data

bitbake/bin/bitbake: Add option to ignore dependencies on graph

If your dependency graph should not show specific
depends, e.g. the virtual/libc, quilt-native depends
use -I virtual/libc -I quilt-native to do so.

bitbake/bin/bitbake: Make sure we add all handlers from INHERIT

    The code had the assumption that at least one .inc
    file was included (always included). This is not true
    in the NSLu2 case. The code now makes sure we load each
    bbclass we have in the INHERIT line either directly or
    indirectly. And then we can safely add all event handlers.

    Todo: Add HANDLERS += to only load the HANDLERS and not
    all classes.

bitbake/bin/bitbake: Generate DOT depedency start
Add option -g to generate graphs for
DEPENDS and RDEPENDS. Currently these
are emitted in two different files for now.

For the future:
-Add option to stop at level X
-Emit both DEPENDS and RDEPENDS into
 the same graph...

bitbake/lib/bb/shell.py:
    No need to use imp on bin/bitbake

bitbake/bin/bitbake:
    BBConfiguration do not initialise the
    configuration twice

    Save a copy of th configuration data and update
    it.

bitbake/lib/bb/cache.py:
    -Do not use the cooker directly in load_bbfile
    -do not set TOPDIR etc. This should be set
     by parse.init()

bitbake/lib/bb/data_smart.py: Double OVERRIDE expansion fix

    INITSCRIPT_PARAMS_${PN}_slugos. We will expandKeys
    and end up with INITSCRIPT_PARAMS_busybox_slugos
    then (we have slugos in OVERRIDES) and we get
    INITSCRIPT_PARAMS_busybox. Now adding busybox to OVERRIDES
    and nothing changed. The reason is simple. The update_data
    code is using __getitem__ and __setitem__ to access
    the data object. This method does not pay the cookie
    monster. This is why we don't know that for the OVERRIDE
    busybox INITSCRIPT_PARAMS is available. We now pay the
    cookie monster and it looks better

bitbake/bin/bitbake:
- Make the update_data for buildDepGraph act on a copy of self.configuration.data
  fixing certain dependency errors.

bitbake/lib/bb/shell.py:
    -Make it work, mickeyl please remove old
        code ;)

lib/bb/fetch/cvs.py:
lib/bb/fetch/__init__.py:
lib/bb/fetch/svn.py:
- Move the DL_DIR check into try_mirror since every fetcher will do this.
  (git fetcher already assumes this check is made)

fetch/__init__.py:
- Allow multiple entries in tarball stash and iterate through them