当前时区为 UTC + 8 小时



发表新帖 回复这个主题  [ 8 篇帖子 ] 
作者 内容
1 楼 
 文章标题 : 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-25 18:13 

注册: 2006-03-20 13:29
帖子: 20
送出感谢: 0 次
接收感谢: 0 次
到处都找不到ppa的sync源


页首
 用户资料  
 
2 楼 
 文章标题 : Re: 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-25 18:37 
头像

注册: 2007-06-13 15:57
帖子: 12567
地址: 在他乡
送出感谢: 50
接收感谢: 87
沙发,支持! :em11


页首
 用户资料  
 
3 楼 
 文章标题 : Re: 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-25 18:46 
论坛管理员

注册: 2005-03-27 0:06
帖子: 10116
系统: Ubuntu 12.04
送出感谢: 7
接收感谢: 128
给你我的镜像脚本, 希望对你有用。

代码:
$ cat ppamirror.py
#!/usr/bin/env python
#coding=utf-8
import os,re
import threading
import time

release=["hardy","jaunty","karmic"]
component=["main"]
system=["binary-i386","binary-amd64"]
baseUrl="http://ppa.launchpad.net/"
savePath="/share/ubuntu-cn/"
maxdownThread=20
currdownThread=0

def downfile(url,savefile):
    cmd="wget -nv -T 20 -c -t 0 -O "+savefile+" "+url
#    print cmd
    global currdownThread
    currdownThread=currdownThread+1
    result=os.spawnvp(os.P_WAIT,'wget',cmd.split())
    currdownThread=currdownThread-1
    return result

def getPackageFiles(ppaurl,component,system,release):
    path=ppaurl[25:]+"/dists/"+release+"/"+component+"/"+system+"/"
    ppaname=path.split('/')[0]
    url=baseUrl+path+"Release"
    savefile=savePath+path+"Release"
    if not os.path.exists(savePath+path):
        try:
           os.makedirs(savePath+path)
        except:
            pass
    if os.path.exists(savefile):
        os.remove(savefile)

    if downfile(url,savefile)!=0:
        print "downing",url, "error!"
        try:
            os.removedirs(savePath+ppanme)
        except:
            pass         
        return

    url=baseUrl+path+"Packages.gz"
    savefile=savePath+path+"Packages.gz"
    backfile=savePath+path+"Packages.gz.bak"
    if os.path.exists(savefile):
        if os.path.exists(backfile):
            os.remove(backfile)
        os.rename(savefile,backfile)
    if downfile(url,savefile)!=0:
        print "downing",url, "error!"
        return
    if os.path.exists(backfile):
        if os.path.getsize(savefile)==os.path.getsize(backfile):
            os.remove(backfile)
            if os.path.getsize(savefile)>=100:
               return
        else:
            os.remove(backfile)
    if os.path.getsize(savefile)<100:
        try:
            os.removedirs(savePath+ppanme)
        except:
            pass
        return

    url=baseUrl+path+"Packages"
    savefile=savePath+path+"Packages"
    if os.path.exists(savefile):
        os.remove(savefile)
    if downfile(url,savefile)!=0:
        print "downing",url, "error!"
        return
    if os.path.getsize(savefile)==0:
        try:
            os.removedirs(savePath+ppanme)
        except:
            pass
        return

    f=open(savefile)
    html=f.read()
    f.close()
    regx = r'Filename: (.*)'
    matchs=re.findall(regx, html)
    for match in matchs:
        url=baseUrl+ppaurl[25:]+"/"+match
        savefile=savePath+ppaurl[25:]+"/"+match
        path=savefile[:savefile.rfind("/")+1]
        try:
            os.makedirs(path)
        except:
            pass         
        if downfile(url,savefile)!=0:
            print "downing",url, "error!"

class DownloadThread(threading.Thread):
    def __init__(self, ppaname,component,system,release):
        threading.Thread.__init__(self)
        self.component=component
        self.system=system
        self.ppaname=ppaname
        self.release=release
       
    def run(self):
        getPackageFiles(self.ppaname,self.component,self.system,self.release)
       
if __name__ == "__main__":
    f=open("/share/ppasource")
    lines=f.readlines()
    f.close()
    threadList=[]
    for line in lines:
        for a in release:
            for b in component:
                for c in system:
                    threadList.append(DownloadThread(line.strip(),b,c,a))
    for thread in threadList:
        i=0
        while currdownThread>maxdownThread:
            time.sleep(5)
            i=i+1
            if i>6:
                break
        thread.start()   
    print 'All threads started'
    for thread in threadList:
        thread.join()   
    print 'All threads stoped'


代码:
$ cat ppasource
http://ppa.launchpad.net/ubuntu-china-repo/ppa/ubuntu
http://ppa.launchpad.net/amule-releases/ppa/ubuntu
http://ppa.launchpad.net/awn-testing/ppa/ubuntu
http://ppa.launchpad.net/bisigi/ppa/ubuntu
http://ppa.launchpad.net/blueman/ppa/ubuntu
http://ppa.launchpad.net/breathe-dev/ppa/ubuntu
http://ppa.launchpad.net/chmsee/jaunty/ubuntu
http://ppa.launchpad.net/chromium-daily/ppa/ubuntu
http://ppa.launchpad.net/c-korn/vlc/ubuntu
http://ppa.launchpad.net/compiz/ppa/ubuntu
http://ppa.launchpad.net/debfx/qt/ubuntu
http://ppa.launchpad.net/debfx/virtualbox/ubuntu
http://ppa.launchpad.net/do-core/ppa/ubuntu
http://ppa.launchpad.net/exaile-devel/ppa/ubuntu
http://ppa.launchpad.net/firerabbit/ppa/ubuntu
http://ppa.launchpad.net/galaxium/ppa/ubuntu
http://ppa.launchpad.net/geany-dev/ppa/ubuntu
http://ppa.launchpad.net/globalmenu-team/ppa/ubuntu
http://ppa.launchpad.net/gmchess/ppa/ubuntu
http://ppa.launchpad.net/gnome-colors-packagers/ppa/ubuntu
http://ppa.launchpad.net/gnome-games-experimental/ppa/ubuntu
http://ppa.launchpad.net/gnome-terminator/ppa/ubuntu
http://ppa.launchpad.net/gnote/ppa/ubuntu
http://ppa.launchpad.net/gstreamer-developers/ppa/ubuntu
http://ppa.launchpad.net/gtg/ppa/ubuntu
http://ppa.launchpad.net/gwibber-daily/ppa/ubuntu
http://ppa.launchpad.net/gwibber-team/ppa/ubuntu
http://ppa.launchpad.net/ibus-dev/ibus-1.2-jaunty/ubuntu
http://ppa.launchpad.net/ibus-dev/ppa/ubuntu
http://ppa.launchpad.net/kubuntu-ppa/backports/ubuntu
http://ppa.launchpad.net/kubuntu-ppa/ppa/ubuntu
http://ppa.launchpad.net/liferea/ppa/ubuntu
http://ppa.launchpad.net/lyx/ppa/ubuntu
http://ppa.launchpad.net/markuz/ppa/ubuntu
http://ppa.launchpad.net/matthaeus123/mrw-gimp-svn/ubuntu
http://ppa.launchpad.net/midori/ppa/ubuntu
http://ppa.launchpad.net/moblin/ppa/ubuntu
http://ppa.launchpad.net/mono-edge/ppa/ubuntu
http://ppa.launchpad.net/moovida-packagers/ppa/ubuntu
http://ppa.launchpad.net/njpatel/clutter-edgers/ubuntu
http://ppa.launchpad.net/pidgin-developers/ppa/ubuntu
http://ppa.launchpad.net/rvm/mplayer/ubuntu
http://ppa.launchpad.net/rvm/smplayer/ubuntu
http://ppa.launchpad.net/rvm/testing/ubuntu
http://ppa.launchpad.net/shutter/ppa/ubuntu
http://ppa.launchpad.net/specto/ppa/ubuntu
http://ppa.launchpad.net/spicebird/ppa/ubuntu
http://ppa.launchpad.net/spicebird/test-build/ubuntu
http://ppa.launchpad.net/sudbury-team/ppa/ubuntu
http://ppa.launchpad.net/team-xbmc/ppa/ubuntu
http://ppa.launchpad.net/telepathy/ppa/ubuntu
http://ppa.launchpad.net/tp-fan/ppa/ubuntu
http://ppa.launchpad.net/transmissionbt/ppa/ubuntu
http://ppa.launchpad.net/tualatrix/gloobus/ubuntu
http://ppa.launchpad.net/tualatrix/ppa/ubuntu
http://ppa.launchpad.net/ubuntu-mozilla-security/ppa/ubuntu
http://ppa.launchpad.net/ubuntu-x-swat/x-updates/ubuntu
http://ppa.launchpad.net/vicox/ppa/ubuntu
http://ppa.launchpad.net/webkit-team/ppa/ubuntu


页首
 用户资料  
 
4 楼 
 文章标题 : Re: 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-25 19:49 
头像

注册: 2008-04-02 13:26
帖子: 3331
地址: 上海
送出感谢: 0 次
接收感谢: 1
强烈支持!!!现在的PPA源慢的要命命命命命命~~~~~


_________________
Blog: http://ttboke.com/ubuntu/
Google+: http://gplus.to/jandyzhu


页首
 用户资料  
 
5 楼 
 文章标题 : Re: 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-25 20:08 
头像

注册: 2007-05-06 2:46
帖子: 15634
送出感谢: 0 次
接收感谢: 2
早就绝了PPA的念

据说国外快,莫非该死的对.cn限速


页首
 用户资料  
 
6 楼 
 文章标题 : Re: 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-25 21:18 
头像

注册: 2008-04-02 13:26
帖子: 3331
地址: 上海
送出感谢: 0 次
接收感谢: 1
hcym 写道:
早就绝了PPA的念

据说国外快,莫非该死的对.cn限速

能跟国外比吗。


_________________
Blog: http://ttboke.com/ubuntu/
Google+: http://gplus.to/jandyzhu


页首
 用户资料  
 
7 楼 
 文章标题 : Re: 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-25 23:53 

注册: 2006-03-20 13:29
帖子: 20
送出感谢: 0 次
接收感谢: 0 次
:em11
忒感谢了,马上开始爬文件去


页首
 用户资料  
 
8 楼 
 文章标题 : Re: 有一定的资源,想建一个ppa的源(全的),可不知道怎么建
帖子发表于 : 2009-09-26 5:10 
头像

注册: 2009-03-19 9:19
帖子: 1423
地址: 江苏
送出感谢: 0 次
接收感谢: 2
:em11 :em11 :em11


_________________


页首
 用户资料  
 
显示帖子 :  排序  
发表新帖 回复这个主题  [ 8 篇帖子 ] 

当前时区为 UTC + 8 小时


在线用户

正在浏览此版面的用户:没有注册用户 和 5 位游客


不能 在这个版面发表主题
不能 在这个版面回复主题
不能 在这个版面编辑帖子
不能 在这个版面删除帖子
不能 在这个版面提交附件

前往 :  
本站点为公益性站点,用于推广开源自由软件,由 DiaHosting VPSBudgetVM VPS 提供服务。
我们认为:软件应可免费取得,软件工具在各种语言环境下皆可使用,且不会有任何功能上的差异;
人们应有定制和修改软件的自由,且方式不受限制,只要他们自认为合适。

Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
简体中文语系由 王笑宇 翻译