在yocto中使用kylin源生成rootfs(验证篇-续)

接上篇~

yocto生成rootfs的流程 (DEB为例):

生成DEB ----> 生成本地源 -----> 配置apt ------> apt update --------> apt install packages。

最后两步,是在rootfs之外执行的,看一下配置:

Dir "/"
{
   State "var/lib/apt/"
   {   
     Lists "/home/zhangsong/work/temp/apt-conf/lists/";
     status "/home/zhangsong/work/temp/rootfs/var/lib/dpkg/status";
     extended_states "/home/zhangsong/work/temp/rootfs/var/lib/apt/extended_states";
   };  
   Cache "var/cache/apt/"
   {   
     Archives "/home/zhangsong/work/temp/apt-conf/lists/";
     pkgcache ""; 
     srcpkgcache ""; 
   };  
   Bin "/usr/bin/"
   {   
     methods "/usr/lib/apt/methods/";
     gzip "gzip";
     dpkg "dpkg";
     dpkg-source "dpkg-source";
     dpkg-buildpackage "dpkg-buildpackage";
     apt-get "apt-get";
     apt-cache "apt-cache";
   };  
   Etc "/home/zhangsong/work/temp/apt-conf"
   {   
     Preferences "preferences";
   };  
   Log "/home/zhangsong/work/temp/rootfs/var/log/apt";
};

APT
{
  Install-Recommends "true";
  Immediate-Configure "false";
  Architectures {"amd64";};
  Architecture "amd64";
  Get 
  {
    Assume-Yes "true";
  };  
};

Acquire
{
  AllowInsecureRepositories "true";
};

DPkg::Options {"--instdir=/home/zhangsong/work/temp/rootfs";"--root=/home/zhangsong/work/temp/rootfs";"--admindir=/home/zhangsong/work/temp/rootfs/var/lib/dpkg";"--force-all";"-D=2000";"--no-debsig"};
DPkg::Path "/usr/sbin:/usr/bin:/sbin:/bin";

这是我模仿yocto创建的配置,但是使用的是host上的apt、dpkg等。

正常情况下,apt install 最终会调用dpkg将deb包解压到rootfs中并且会chroot到rootfs中执行configure动作(执行preinst、postinst等);即configure动作时root为rootfs而不是当前shell的 /

但是yocto中提供的apt、dpkg,据观察(未在代码中确认)只做了解压动作,而未执行configure;configure动作是放在后面单独处理了:

158     ¦   bb.note("fucking life *** apt update ***")
159     ¦   self.pm.update()

165     ¦   for pkg_type in self.install_order:
166     ¦   ¦   if pkg_type in pkgs_to_install:
167     ¦   ¦   ¦   self.pm.install(pkgs_to_install[pkg_type],
168     ¦   ¦   ¦   ¦   ¦   ¦   ¦   [False, True][pkg_type == Manifest.PKG_TYPE_ATTEMPT_ONLY])
169     ¦   ¦   ¦   self.pm.fix_broken_dependencies()
170 
184     ¦   bb.note("fucking life *** apt fix_broken_dependencies ***")
185     ¦   self.pm.fix_broken_dependencies()
186 
187     ¦   bb.note("fucking life *** apt mark_packages ***")
188     ¦   self.pm.mark_packages("installed")
189 
190     ¦   bb.note("fucking life *** apt run_pre_post_installs ***")
191     ¦   self.pm.run_pre_post_installs()
192 
193     ¦   bb.note("fucking life *** execute_pre_post_process ***")
194     ¦   execute_pre_post_process(self.d, deb_post_process_cmds)
241     ¦   os.environ['D'] = self.target_rootfs
242     ¦   os.environ['OFFLINE_ROOT'] = self.target_rootfs
243     ¦   os.environ['IPKG_OFFLINE_ROOT'] = self.target_rootfs
244     ¦   os.environ['OPKG_OFFLINE_ROOT'] = self.target_rootfs
245     ¦   os.environ['INTERCEPT_DIR'] = self.intercepts_dir
246     ¦   os.environ['NATIVE_ROOT'] = self.d.getVar('STAGING_DIR_NATIVE')
247 
248     ¦   for pkg_name in installed_pkgs:
249     ¦   ¦   for control_script in control_scripts:
250     ¦   ¦   ¦   p_full = os.path.join(info_dir, pkg_name + control_script.suffix)
251     ¦   ¦   ¦   if os.path.exists(p_full):
252     ¦   ¦   ¦   ¦   try:
253     ¦   ¦   ¦   ¦   ¦   bb.note("Executing %s for package: %s ..." %
254     ¦   ¦   ¦   ¦   ¦   ¦   ¦   ¦(control_script.name.lower(), pkg_name))
255     ¦   ¦   ¦   ¦   ¦   output = subprocess.check_output([p_full, control_script.argument],
256     ¦   ¦   ¦   ¦   ¦   ¦   ¦   stderr=subprocess.STDOUT).decode("utf-8")
257     ¦   ¦   ¦   ¦   ¦   bb.note(output)
258     ¦   ¦   ¦   ¦   except subprocess.CalledProcessError as e:
259     ¦   ¦   ¦   ¦   ¦   bb.warn("%s for package %s failed with %d:\n%s" %
260     ¦   ¦   ¦   ¦   ¦   ¦   ¦   (control_script.name, pkg_name, e.returncode,
261     ¦   ¦   ¦   ¦   ¦   ¦   ¦   ¦   e.output.decode("utf-8")))
262     ¦   ¦   ¦   ¦   ¦   failed_postinsts_abort([pkg_name], self.d.expand("${T}/log.do_${BB_CURRENTTASK}"))

yocto这么做的原因(目前能看到的好处):

  1. 不用root权限。
  2. 不用chroot。

小结论:

这就确定了yocto原生逻辑不支持直接使用非yocto style package(即按照yocto规则生成的package)组成的源来制作rootfs。(准确的说是不保证做出来的rootfs没问题)

除非是按照yocto的规则改造,比如meta-debian中的做法,从新生成deb。

原因就是 postinst、preinst脚本的执行需要处于一个/指向目标rootfs的环境,比如chroot rootfs。

现在我的做法

目前简单处理,直接使用dbootstrap了

 17 do_rootfs[depends] += "virtual/fakeroot-native:do_populate_sysroot pbzip2-native:do_populate_sysroot"
 18 fakeroot python do_rootfs () {
 19     import subprocess, time
 20 
 21     rootfs_dir = d.getVar('IMAGE_ROOTFS')
 22 
 23     def exec_debootstrap():
 24     ¦   newenv = os.environ.copy()  
 25     ¦   newenv['PATH'] = '/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:/snap/bin'
 26     ¦   newenv['IMAGE_ROOTFS'] = rootfs_dir
 27     ¦   cmd = "debootstrap --arch=amd64 --foreign --no-check-gpg --keep-debootstrap-dir --variant=minbase --components=main,restricted,universe,multiverse 10.1 {} http://172.29.220.242/kylin/KYLIN-ALL gutsy".format
 28 
 30     ¦   bb.note("fucking life : %s" % cmd)
 31     ¦   proc = subprocess.Popen(cmd, stdout=subprocess.PIPE, stderr=subprocess.PIPE,shell=True,env=newenv)
 32 
 33     ¦   while True:
 34     ¦   ¦   for line in iter(proc.stdout.readline, b''):
 35     ¦   ¦   ¦   bb.note(line.decode('utf-8'))   
 36 
 37     ¦   ¦   try:
 38     ¦   ¦   ¦   proc.wait(timeout=0.1)  
 39     ¦   ¦   ¦   break
 40     ¦   ¦   except subprocess.TimeoutExpired:
 41     ¦   ¦   ¦   pass
 42 
 43 
 44     bb.note('fucking life : begin kylin::do_rootfs') 
 45 
 46     if not os.path.exists(rootfs_dir): 
 47     ¦   exec_debootstrap()
 48     else:
 49     ¦   bb.note("fucking life : rootfs already exists, skip exec_debootstrap !")
 50 
 51     bb.note('fucking life : exit kylin::do_rootfs')
 52 }

创建了kylinos-image类,修改了do_rootfs的逻辑,在$WORKDIR/rootfs目录中使用debootstrap生成一个rootfs —— 目前只用了debootstrap的第一阶段(已经是一个完整的可chroot环境)。
后续的处理沿用yocto image.bbclass,用来生成镜像。

延伸思考

其实是否用debootstrap不重要,重要的是:

  1. 提供一个chroot环境
  2. 该环境还要能够支撑后续要安装的包进行configure动作,这个是难点。

目前debootstrap第一阶段完成后,即使删除了cache,也有200M以上,太大。关键是很难裁减,因为 第二条原因。

满足这2个条件的决定性因素实际上是源。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 223,689评论 6 521
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 95,685评论 3 401
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 170,676评论 0 366
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 60,496评论 1 300
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 69,512评论 6 399
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 53,044评论 1 314
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 41,423评论 3 427
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 40,399评论 0 278
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 46,923评论 1 323
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 38,973评论 3 343
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 41,117评论 1 354
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 36,761评论 5 350
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 42,440评论 3 336
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 32,929评论 0 25
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 34,045评论 1 275
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 49,609评论 3 380
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 46,147评论 2 363

推荐阅读更多精彩内容