code.vuplus.com Git - vuplus_openembedded/blob - contrib/angstrom/sort.sh

   1 #!/bin/bash
   2
   3 # Angstrom feed sorting script
   4 # This must be run in unstable/ directory
   5
   6 if [ $(basename $PWD) != "unsorted" ] ; then
   7         echo "Not in feed dir! Exiting"
   8         exit 1
   9 fi
  10
  11 rm Packages* >& /dev/null
  12
  13 # Find ipkg files in unsorted/ and remove stale ones
  14 echo "Deleting morgue directories "
  15 find . -name morgue | xargs rm -rf
  16 echo "Moving packages to the top level directory"
  17 find */ -name  "*.ipk" -exec mv  '{}'  ./ \;
  18
  19 # Make a list of ipkg files already present in feeds and in unsorted
  20 echo "Making a list of unsorted packages"
  21 for i in $(find . -name "*.ipk") ; do basename $i ; done > files-unsorted
  22 # Make a list of duplicates and delete those
  23 echo "Finding duplicate packages in unsorted"
  24 cat files-sorted files-unsorted | sort | uniq -d > files-duplicate
  25 echo "Removing duplicate packages in unsorted"
  26 cat files-duplicate | xargs rm -f
  27
  28 # Log remaining packages to a file
  29 find . -name "*.ipk" |grep -v dbg | grep -v -- -dev | grep -v -- -doc | grep -v angstrom-version | grep -v locale > new-files.txt
  30 for newfile in $(cat new-files.txt | sed s:./::g) ; do
  31     echo "$(date -u +%s) $newfile $(basename ${PWD})" >> ../upload-full.txt
  32 done
  33 tail -n 100 ../upload-full.txt > ../upload.txt
  34
  35 do_sort() {
  36 archdir=$arch
  37
  38 case "$arch" in
  39         "arm-oabi")
  40                         machines="h3600 h3800 collie simpad htcwallaby" ;;
  41         "armv4t")
  42                         machines="ep93xx h6300 om-gta01 om-gta02 fic-gta01 fic-gta02" ;;
  43         "armv5te")
  44                         machines="davinci-dvevm davinci-sffsdr neuros-osd neuros-osd2 gumstix-connex gumstix-verdex gumstix e680 a780 a1200 at91sam9263ek rokre6 rokre2 rokr-e2 akita c7x0 h2200 h3900 h4000 h5000 htcapache htctornado htcblueangel htcuniversal hx4700 nslu2le hx2000 ixp4xxle magician netbook-pro nokia770 palmld palmtx palmtt3 palmz72 qemuarm omap5912osk poodle spitz tosa" ;;
  45         "armv5teb")
  46                         machines="ixp4xxbe nslu2be" ;;
  47         "armv6-novfp")
  48                         machines="htcdiamond htckaiser htcpolaris htcraphael htcvogue" ;;
  49         "armv6")
  50                         machines="mx31ads nokia800 " ;;
  51         "armv7")
  52                         machines="" ;;
  53         "armv7a")
  54                         machines="beagleboard omap3evm " ;;
  55         "avr32")
  56                         machines="atngw100 at32stk1000" ;;
  57         "bfin")
  58                         archdir="blackfin"
  59                         machines="adsp-bf537-stamp" ;;
  60         "geode")
  61                         machines="alix" ;;
  62         "i486")
  63                         machines="x86" ;;
  64         "i586")
  65                         machines="epia qemux86" ;;
  66         "i686")
  67                         machines="guinness progear" ;;
  68         "iwmmxt")
  69                         machines="" ;;
  70         "ppc405")
  71                         machines="dht-walnut" ;;
  72         "ppc603e")
  73                         machines="efika" ;;
  74         "ppce300c3")
  75                         machines="mpc8313e-rdb mpc8315e-rdb" ;;
  76         "sparc")
  77                         machines="" ;;
  78 esac
  79
  80 echo "Sorting $arch"
  81 for i in `find . -name  "*.ipk"| grep $arch` ; do mkdir -p ../$archdir/base/ || true ;mv $i ../$archdir/base/ ; done
  82         for machine in $machines ; do
  83                 for i in `find . -name  "*_$machine.ipk"| grep $machine` ; do mkdir -p ../$archdir/machine/$machine || true ;mv $i ../$archdir/machine/$machine ; done
  84         done
  85 ( mkdir -p ../$archdir ; cd ../$archdir && do_index )
  86
  87 }
  88
  89 do_index() {
  90 ipkg_tools_path="/home/angstrom/bin"
  91 echo "Processing $(basename $PWD) packages...."
  92
  93 BPWD=`pwd`
  94
  95 mkdir -p base
  96 cd base
  97
  98 mkdir -p ../debug ../perl ../python ../gstreamer ../locales/en || true
  99
 100 #split the feeds based on names
 101 mv python* ../python/ >& /dev/null
 102 mv perl* ../perl/ >& /dev/null
 103 mv *-dbg* ../debug/ >& /dev/null
 104 mv gst* ../gstreamer >& /dev/null
 105
 106 for i in ../* ; do
 107   if [ -d $i ]; then
 108       cd $i
 109       echo -n "building index for $i:" |sed s:\.\./::
 110       ${ipkg_tools_path}/ipkg-make-index -p Packages -l Packages.filelist  -m -L ../locales  . >& /tmp/index-log
 111       echo " DONE"
 112   fi
 113 done
 114 mkdir -p  ${BPWD}/machine
 115 cd ${BPWD}/machine
 116
 117 for i in ./* ; do
 118   if [ -d $i ]; then
 119      cd $i
 120      echo -n "building index for machine $i:"
 121      ${ipkg_tools_path}/ipkg-make-index -p Packages -l Packages.filelist  -m  . >& /dev/null
 122      echo " DONE"
 123      cd ../
 124   fi
 125 done
 126
 127 mkdir -p ${BPWD}/locales/en/
 128 cd ${BPWD}/locales/en/
 129 echo -n "building index for locales:"
 130 for i in ../* ; do
 131   if [ -d $i ]; then
 132    echo -n " $i" |sed s:\.\./::
 133    ${ipkg_tools_path}/ipkg-make-index -p Packages -l Packages.filelist  -m . >& /dev/null;
 134    cd $i
 135   fi
 136  done
 137 echo " DONE"
 138 cd ${BPWD}
 139
 140 echo -n "Stripping source lines from Package files"
 141 for i in `find . -name Packages` ; do grep -v ^Source: $i|gzip -c9>$i.gz ;gunzip -c $i.gz>$i ; touch $i.sig ; done
 142 echo " DONE"
 143 }
 144
 145 echo "Processing 'all' feed"
 146 for i in `find . -name  "*.ipk"| grep _all` ; do mkdir -p ../all/ || true ;mv $i ../all/ ; done
 147  (mkdir -p ../all ; cd ../all && ipkg-make-index -p Packages -m . >& /dev/null ; touch Packages.sig )
 148
 149 for arch in arm-oabi armv4t armv5teb armv5te armv6-novfp armv6 armv7a armv7 avr32 bfin geode i486 i586 i686 iwmmxt ppc405 ppc603e sparc ; do
 150         do_sort
 151 done
 152
 153 if [ "$1" != "--skip-sorted-list" ]; then
 154     echo "Updating list of sorted packages (takes long)"
 155     for i in $(find ../ -name "*.ipk"| grep -v unsorted) ; do basename $i ; done > files-sorted
 156 fi
 157
 158 #(cd ~/website/repo ; php update.php)