学做嵌入式Linux系统V0.1（完整版）

我也来学做嵌入式Linux系统V0.1（完整版）

呵呵，终于搞完了，把它发到一个贴子中来，做了一些修改……其中还有一些错误，希望大家指正，偶好修改！！！
——————————————————————————————————
《我也来学做嵌入式Linux系统V0.1》
作者：九贱
E-mail:[e-mail]
个人站点：
___________________________________________________

第一章 前言
目的
本文的目的，是讲述嵌入式Linux系统的建立、开发的一般过程。制作一个小型的Linux的系统，可以移植至其它硬盘、软盘、优盘、flash rom……

关于作者
九贱，E名kendo，喜欢网络入侵技术、防火墙、入侵检测技术及网络技术，对Linux也颇感兴趣，想认识有共同爱好的朋友。最近闲暇，把一些学过的东 西写下来，总结总结，以作备忘这需。已完成的有《网络入侵检测设计与Snort2.2源码分析》和这篇《我也来学做嵌入式Linux》。正在进行中的有 《Windows防火墙技术实现大全》和《Linux防火墙实现及源码分析》。大家可以在CU上，或者是到我的小站上与我交流

做一个嵌入式Linux系统究竟要做哪些工作
做一个嵌入式Linux系统究竟需要做哪些工作？也就是本文究竟要讲述哪些内容？我先介绍一个脉络，可以做为我们后面工作的一个总的提纲：
第一步、建立交叉编译环境
没有交叉开发经验的读者，可能一时很难接受这个概念。首先，要明白两个概念：一般我们工作的机器，称为开发机、主机；我们制作好的系统将要放到某台机器，如手机或另一台PC机，这台机我们称为目标主机。
我 们一般开发机上已经有一套开发工具，我们称之为原生开发套件，我们一般就是用它们来写程序，那么，那什么又是交叉编译环境呢？其实一点也不神秘，也就是在 开发机上再安装一套开发工具，这套开发工具编译出来的程序，如内核、系统工作或者我们自己的程序，是放在目标主机上运行的。
那么或许有初学者会 问，直接用原生开发工具为目标主机编译程序不就完了？至少我当初是这么想的。一般来说，我们的开发机都是X86平台，原生开发套件开发的工具，也针对 X86平台，而我们的目标主机可能是PowerPC、IXP、MIPS……所以，我们的交叉编译环境是针对某一类具体平台的。
一般来讲，交叉开发环境需要二进制工具程序、编译器、C链接库，嵌入式开发常用的这三类软件是：
Binutils
Gcc
uClibc
当然，GNU包含的工具套件不仅于此，你还要以根据实际需要，进行选择

第二步、编译内核
开发工具是针对某一类硬件平台，内核同样也是。这一步，我们需要用第一步中建立的工具，对内核进行编译，对于有内核编译经验的人来说，这是非常简单的；

第三步、建立根文件系统
也就是建立我们平常看到的bin、dev、proc……这一大堆目录，以及一些必备的文件；另外，我们还需要为我们的目标系统安装一些常用的工具软件，如 ls、ifconfig……当然，一个办法是找到这些工具的源代码，用第一步建立的交叉编译工具来编译，但是这些软件一是数量多，二是某些体积较大，不适 合嵌入式系统，这一步，我们一般都是用busybox来完成的，包括系统引导软件init；
最后，我们为系统还需要建立初始化的引导文件，如inittab……

第四步、启动系统
在这一步，我们把建立好的目标、文件、程序、内核及模块全部拷贝到目标机存储器上，如硬盘。然后为系统安装bootloader，对于嵌入式系统，有许多 引导程序可供我们使用。不过它们许多都有硬件平台的限制。当然，如果你是工作在X86，可以直接用lilo来引导，事实上，本文就是采用的lilo。
做到这一步，将目标存储设备挂上目标机，如果顺利，就可以启动系统了。
当然，针对某些特别的平台，不能像硬盘这样拷贝了，需要读卡器、烧录……但是基本的方法是相通的！

第五步、优化和个性化系统
通过前四步，我们已经得到了一个可以正常工作的系统。在这一步里，就是发挥你想像的时候了……


本文的工作环境
项目根目录/home/kendo/project ------>;我将它指定至PATH:$PRJROOT
子目录及说明
目录 内容
bootloader 目标板的引导加载程序，如lilo等
build-tools 建立交叉编译平台的工具源码
debug 调试工具及所有相关包
doc 项目中用到的所有文档
images 编译好的内核映像，以及根文件系统
kernel 各个版本的Linux内核源码
rootfs 制作好的根文件系统
sysapps 目标板将要用到的系统应用系统，比如thttpd,udhcpd等
tmp 存放临时文件
tools 编译好的跨平台开发工具链以及C链接库


工作的脚本
#!/usr/bin

export PROJECT=skynet
export PRJROOT=/home/${PROJECT}
export TARGET=i386-linux
export PREFIX=${PRJROOT}/tools
export TARGET_PREFIX=${PREFIX}/${TARGET}
export PATH=${PREFIX}/bin:/bin:/sbin:/usr/bin:/usr/sbin

cd $PRJROOT


第二章 建立交叉编译环境
在CU中发表的另一篇同名的贴子里，我讲述了一个全手工创建交叉编译环境的方法。目前，创建交叉编译环境，包括建立根文件，一般来讲，有两种方法：
手功创建
可以得到最大程序的个性化定制，缺点是过程繁杂，特别是极易出错，注意这个“极”字，包括有经验的开发人员；
自动创建
无它，方便而。

因 为前一篇文章中，已经讲述了全手工创建交叉编译环境的一般性方法，本文就不打算再重复这个步骤了，感兴趣的朋友，可以再去搜索那篇贴子，提醒一点的就是， 在准备工具链的时候，要注意各个工具版本之间的搭配、每个工具需要哪些补丁，我建议你在google上针对这两项搜索一下，准备一个清单，否则……
本 章要讲述的是自动创建交叉编译环境的方法。目标，针对商业硬件平台，厂家都会为你提供一个开发包，我用过XX厂家的IXP425和MIPS的，非常地方 便，记得我第一次接触嵌入式开发，拿着这个开发包自动化创建交叉编译环境、编译内核、建立根文件系统、创建Ram Disk，我反复做了三四次，结果还不知道自己究竟做了些什么，呵呵，够傻吧……
所以，建议没有这方面经验的读者，还是首先尝试一下手工创建的方法吧，而本章接下来的内容，是送给曾经被它深深伤害而不想再次去亲历这项工作而又想提高交率而又在通用平台上工作没有商业开发包的朋友。

建立交叉开发工具链
准备工具：
buildroot-0.9.27.tar.tar
只需要一个软件？对，其它的不用准备了，buildroot事实上是一个脚本与补丁的集合，其它需要用到的软件，如gcc、uClibc，你只需在buildroot中指明相应的版本，它会自动去给你下载。
事 实上，buildroot到网上去下载所需的所有工作是需要时间的，除非你的带宽足够，否则下载软件时间或许会占去80%，而我在做这项工作之间，所需的 工作链全部都在我本地硬盘上，我解压开buildroot后，新建dl文件夹，将所有工具源码的压缩包拷贝进去，呵呵，buildroot就不用去网上下 载了。

我的软件清单：
Linux-libc-headers-2.4.27.tar.bz2
Gcc-3.3.4.tar.bz2
binutils 2.15.91.0.2.tar.bz2
uClibc 0.9.27.tar.bz2
genext2fs_1.3.orig.tar.gz
ccache-2.3.tar.gz

将它拷贝到${PRJROOT}/build-tools下，解压
[root@skynet build-tools]# tar jxvf buildroot-0.9.27.tar.tar
[root@skynet build-tools]#cd buildroot
配置它：
[root@skynet build-tools]#make menuconfig
Target Architecture (i386) --->; 选择硬件平台，我的是i386
Build options --->; 编译选项
这个选项下重要的是(${PRJROOT}/tools) Toolchain and header file location?编译好的工具链放在哪儿？
如果你像我一样，所有工具包都在本地，不需它到网上自动下载，可以把wget command选项清空；
Toolchain Options --->; 工具链选项
--- Kernel Header Options 头文件它会自动去下载，不过应该保证与你将要用的内核是同一个版本；
[] Use the daily snapshot of uClibc? 使用最近的uClibc的snapshot
Binutils Version (binutils 2.15.91.0.2) --->; Binutils的版本
GCC compiler Version (gcc 3.4.2) --->; gcc 版本
[*] Build/install c++ compiler and libstdc++?
[ ] Build/install java compiler and libgcj? 支持的语言，我没有选择java
[ ] Enable ccache support? 启用ccache的支持，它用于编译时头文件的缓存处理，用它来编译程序，第一次会有点慢，但是以后的速度可就很理想了，呵呵……
--- Gdb Options 根据你的需要，选择gdb的支持

Package Selection for the target --->;
这一项我没有选择任意一项，因为我打算根文件系统及busybox 等工具链创建成工，手工来做。
Target Options --->; 文件系统类型，根据实际需要选，我用的ext2；

配置完成后，编译它：
[root@skynet build-tools]#make

这一项工作是非常花时间的，我的工具包全部在本地，也花去我一小时十三分的时间，如果全要下载，我估计网速正常也要多花一两个钟头。

经过漫长的等待（事实上并不漫长，去打了几把游戏，很快过去了）：
……
make[1]: Leaving directory `/home/skynet/build-tools/buildroot/build_i386/genext2fs-1.3'
touch -c /home/skynet/build-tools/buildroot/build_i386/genext2fs-1.3/genext2fs
#-@find /home/skynet/build-tools/buildroot/build_i386/root/lib -type f -name \*.so\* | xargs /home/skynet/tools/bin/i386-linux-uclibc-strip --remove-section=.comment --remove-section=.note --strip-unneeded 2>;/dev/null || true;
/home/skynet/build-tools/buildroot/build_i386/genext2fs-1.3/genext2fs -i 503 -b 1056 \
-d /home/skynet/build-tools/buildroot/build_i386/root -q -D target/default/device_table.txt /home/skynet/build-tools/buildroot/root_fs_i386.ext2

大功告成！！！

清点战利品
让我来看看它究竟做了哪些事情吧:
[root@skynet skynet]# cd tools
[root@skynet tools]# ls
bin bin-ccache i386-linux i386-linux-uclibc include info lib libex!ec man usr

bin：所有的编译工具，如gcc，都在这儿了，只是加了些指定的前缀；
bin-ccache：如果在Toolchain optaion中没有选择对ccache的支持，就没有这一项了；
i386-linux：链接文件；实际指向include
i386-linux-uclibc：uclibc的相关工具；
include：供交叉开发工具使用的头文件；
info：gcc 的info文件；
lib：供交叉开发工具使用的链接库文件；
……

现在可以把编译工具所在目录XXX/bin添加至PATH了

测试工具链
如果你现在写一个程序，用i386-linux-gcc来编译，运行的程序会告诉你：
./test: linked against GNU libc
因为程序运行库会寻到默认的/lib:/usr/lib上面去，而我们目前的uclibc的库并不在那里（虽然对于目标机来讲，这是没有错的），所以，也只能暂时静态编译，试试它能否工作了。当然，你也可以在建好根文件系统后，试试用chroot……

第三章 编译内核
本章的工作，是为目标机建立一个合适的内核，对于建立内核，我想有两点值得考虑的：
1、功能上的选择，应该能够满足需要的情况下，尽量地小；
2、小不是最终目的，稳定才是；

所以，最好编译内核前有一份目标机硬件平台清单以及所需功能清单，这样，才能更合理地裁减内核。

准备工具
Linux内核源码，我选用的是Linux-2.4.27.tar.bz2

编译内核
将Linux-2.4.27.tar.bz2拷贝至${PRJROOT}/kernel，解压
#cd linux-2.4.27
//配置
# make ARCH=i386 CROSS_COMPILE=i386-linux- menuconfig
//建立源码的依存关系
# make ARCH=i386 CROSS_COMPILE=i386-linux- clean dep
//建立内核映像
# make ARCH=i386 CROSS_COMPILE=i386-linux- bzImage
ARCH指明了硬件平台，CROSS_COMPILE指明了这是交叉编译，且编译器的名称为i386-linux-XXX，这里没有为编译器指明路径，是因为我前面已将其加入至环境变量PATH。

又是一个漫长的等待……
OK，编译完成，673K，稍微大了点，要移到其它平台，或许得想办法做到512以下才好，回头来想办法做这个工作。

安装内核
内核编译好后，将内核及配置文件拷贝至${PRJROOT}/images下。
# cp arch/i386/boot/bzImage ${PRJROOT}/images/bzImage-2.4.27-rmk5
# cp vmlinux ${PRJROOT}/images/vmlinux-2.4.27-rmk5
# cp System.map ${PRJROOT}/images/System-2.4.27-rmk5
# cp .config ${PRJROOT}/images/2.4.27-rmk5

我采用了后缀名的方式重命名，以便管理多个不同版本的内核，当然，你也可以不用这样，单独为每个版本的内核在images下新建对应文件夹也是可行的。

安装内核模块
完整内核的编译后，剩下的工作就是建立及安装模块了，因为我的内核并没有选择模块的支持（这样扩展性差了一点，但是对于我的系统来说，功能基本上定死了，这样影响也不太大），所以，剩下的步骤也省去了，如果你还需要模块的支持，应该：
//建立模块
#make ARCH=i386 CROSS_COMPILE=i386-linux- modules
//安装内核模块至${PRJROOT}/images
#make ARCH=i386 CROSS_COMPILE= i386-linux- \
>;INSTALL_MOD_PATH=${PRJROOT}/images/modules-2.4.18-rmk5 \
>;modules_install

最 后一步是为模块建立依存关系，不能使用原生的depmod来建立，而需要使用交叉编译工具。需要用到busybox中的depmod.pl脚本，很可惜， 我在busybox1.0.0中，并没有找到这个脚本，所以，还是借用了busybox0.63中scripts中的depmod.pl。
将depmod.pl拷贝至${PREFIX}/bin目录中，也就是交叉编译工具链的bin目录。
#depmod.pl \
>;-k ./vmlinux –F ./System.map \
>;-b ${PRJROOT}/images/modules-2.4.27-rmk5/lib/modules >; \
>;${PRJROOT}/images/modules-2.4.27-rmk5/lib/modules/2.4.27-rmk5/modules.dep

注：后面讨论移植内核和模块内容时，我只会提到内核的拷贝，因为我的系统并没有模块的支持。如果你需要使用模块，只需按相同方法将其拷贝至相应目录即可。

附，内核编译清单
附，内核选择：
内核编译记录：
Code maturity level options 不选
Loadable module support 不选
Processor type and features 根据实际，选择处理器类型
General setup --->;
[*] Networking support
[*] PCI support
(Any) PCI access mode
[*] PCI device name database
[*] System V IPC
[*] Sysctl support
(ELF) Kernel core (/proc/kcore) format
[*] Kernel support for ELF binaries
[*] Power Management support

Memory Technology Devices (MTD) --->; MTD设备，我用CF卡，不选

Parallel port support --->; 不选
Plug and Play configuration --->; 我的系统用不着即插即用，不选

Block devices --->;
[*] Loopback device support
[*] RAM disk support
(4096) Default RAM disk size (NEW)
[*] Initial RAM disk (initrd) support

Multi-device support (RAID and LVM) --->; 不选

Networking options --->; 基本上都选了

ATA/IDE/MFM/RLL support --->; 用了默认的

Telephony Support --->; 不选

SCSI support --->; 不选

Fusion MPT device support --->; 不选

I2O device support --->; 不选

Network device support --->; 根据实际情况选择

Amateur Radio support --->; 不选

IrDA (infrared) support --->; 不选

ISDN subsystem --->; 不选

Old CD-ROM drivers (not SCSI, not IDE) --->; 不选

Input core support --->; 不选

Character devices --->;
[*] Virtual terminal
[*] Support for console on virtual terminal
[*] Standard/generic (8250/16550 and compatible UARTs) serial support
[*] Support for console on serial port

Multimedia devices --->; 不选

File systems --->;
[*] Kernel automounter version 4 support (also supports v3)
[*] Virtual memory file system support (former shm fs)
[*] /proc file system support
[*] Second extended fs support

Console drivers --->;
[*] VGA text console 调试时接显示器用

剩下三个都不要
Sound --->;
USB support --->;
Kernel hacking --->;

第四章 建立根文件系统
1、建立目录
构建工作空间时，rootfs文件夹用来存放根文件系统，
#cd rootfs
根据根文件系统的基本结构，建立各个对应的目录：
# mkdir bin dev etc lib proc sbin tmp usr var root home
# chmod 1777 tmp
# mkdir usr/bin usr/lib usr/sbin
# ls
dev etc lib proc sbin tmp usr var
# mkdir var/lib var/lock var/log var/run var/tmp
# chmod 1777 var/tmp

对于单用户系统来说，root和home并不是必须的。
准备好根文件系统的骨架后，把前面建立的文件安装到对应的目录中去。
2、拷贝链接库
把uclibc的库文件拷贝到刚才建立的lib文件夹中：
# cd ${PREFIX}/lib
[root@skynet lib]# cp *-*.so ${PRJROOT}/rootfs/lib
[root@skynet lib]# cp -d *.so.[*0-9] ${PRJROOT}/rootfs/lib

3、 拷贝内核映像和内核模块
因为没有模块，所以拷贝模块就省了，
新建boot目录，把刚才建立好的内核拷贝过来
# cd /home/kendo/control-project/daq-module/rootfs/
# mkdir boot
# cd ${PRJROOT}/images
# cp bzImages-2.4.18-rmk5 /home/kendo/control-project/daq-module/rootfs/boot

4、 建立/dev下边的设备文件
在linux中，所有的的设备文件都存放在/dev中，使用mknod命令创建基本的设备文件。
mknod命令需要root权限，不过偶本身就是用的root用户，本来是新建了一个用户专门用于嵌入式制作的，不过后来忘记用了……
# mknod -m 600 mem c 1 1
# mknod -m 666 null c 1 3
# mknod -m 666 zero c 1 5
# mknod -m 644 random c 1 8
# mknod -m 600 tty0 c 4 0
# mknod -m 600 tty1 c 4 1
# mknod -m 600 ttyS0 c 4 64
# mknod -m 666 tty c 5 0
# mknod -m 600 console c 5 1
基本的设备文件建立好后，再创建必要的符号链接：
# ln -s /proc/self/fd fd
# ln -s fd/0 stdin
# ln -s fd/1 stdout
# ln -s fd/2 stderr
# ls
console fd mem null random stderr stdin stdout tty tty0 tty1 ttyS0 zero

设备文件也可以不用手动创建，听说RedHat /dev下的脚本MAKEDEV 可以实现这一功能，不过没有试过……

基本上差不多了，不过打算用硬盘/CF卡来做存储设备，还需要为它们建立相关文件，因为我的CF在目标机器上是CF-to-IDE，可以把它们等同来对待，先看看Redhat 下边had的相关属性：
# ls -l /dev/hda
brw-rw---- 1 root disk 3, 0 Jan 30 2003 /dev/hda
# ls -l /dev/hda1
brw-rw---- 1 root disk 3, 1 Jan 30 2003 /dev/hda1
对比一下，可以看出，had类型是b，即块设备，主编号为3，次编号从0递增，根限位是
rw-rw----，即660，所以：
# mknod -m 660 hda b 3 0
# mknod -m 660 hda1 b 3 1
# mknod -m 660 hda2 b 3 2
# mknod -m 660 hda3 b 3 3


5、添加基本的应用程序
未来系统的应用程序，基本上可以分为三类：
 基本系统工具，如ls、ifconfig这些……
 一些服务程序，管理工具，如WEB、Telnet……
 自己开发的应用程序

这里先添加基本的系统工具，有想过把这些工具的代码下载下来交叉编译，不过实在是麻烦，用BusyBox，又精简又好用……
将busybox-1.00.tar.gz下载至sysapps目录下，解压：
#tar zxvf busybox-1.00.tar.gz
#cd busybox-1.00
//进入配置菜单
#make TARGET_ARCH=i386 CROSS=i386-linux- PREFIX=${PRJROOT}/rootfs menuconfig
//建立依存关系
#make TARGET_ARCH=i386 CROSS= i386-linux- PREFIX=${PRJROOT}/rootfs dep
//编译
#make TARGET_ARCH=i386 CROSS= i386-linux- PREFIX=${PRJROOT}/rootfs
//安装
#make TARGET_ARCH=i386 CROSS= i386-linux- PREFIX=${PRJROOT}/rootfs install

# cd ${PRJROOT}/rootfs/bin
# ls
addgroup busybox chown delgroup echo kill ls mv ping rm sleep
adduser chgrp cp deluser grep ln mkdir netstat ps rmdir umount
ash chmod date dmesg hostname login mount pidof pwd sh vi
一下子多了这么多命令……
配置busybox的说明：
A、如果编译时选择了：
Runtime SUID/SGID configuration via /etc/busybox.conf
系统每次运行命令时，都会出现“Using fallback suid method ”
可以将它去掉，不过我还是在/etc为其建了一个文件busybox.conf搞定；
B、 [*] Do you want to build BusyBox with a Cross Compiler? (i386-linux-gcc) Cross Compiler prefix
这个指明交叉编译器名称（其实在编译时的命令行已指定过了……）
C、安装选项下的(${PRJROOT}/rootfs) BusyBox installation prefix，这个指明了编译好后的工具的安装目录。
D、静态编译好还是动态编译好？即是否选择
[ ] Build BusyBox as a static binary (no shared libs)
动态编译的最大好处是节省了宝贵空间，一般来说都是用动态编译，不过我以前动态编译出过问题（其实是库的问题，不关busybox的事），出于惯性，我选择了静态编译，为此多付出了107KB的空间。
E、其它命令，根据需要，自行权衡。


6、系统初始化文件
内 核启动时，最后一个初始化动作就是启动init程序，当然，大多数发行套件的Linux都使用了与System V init相仿的init，可以在网上下载System V init套件，下载下来交叉编译。另外，我也找到一篇写得非常不错的讲解如何编写初始化文件的文件，bsd-init，回头附在后面。不过，对于嵌入式系 统来讲，BusyBox init可能更为合适，在第6步中选择命令的时候，应该把init编译进去。
#cd ${PRJROOT}/rootfs/etc
#vi inittab
我的inittal文件如下：
#指定初始化文件
::sysinit:/etc/init.d/rcS
#打开一个串口，波特率为9600
::respawn:/sbin/getty 9600 ttyS0
#启动时执行的shell
::respawn:/bin/sh
#重启时动作
::restart:/sbin/init
#关机时动作，卸载所有文件系统
::shutdown:/bin/umount -a –r

保存退出；

再来编写rcS脚本：
#mkdir ${PRJROOT}/rootfs/etc/init.d
#cd ${PRJROOT}/rootfs/etc/init.d
#vi rcS
我的脚本如下：
#!/bin/sh

#Set Path
PATH=/sbin:/bin
export PATH

syslogd -m 60
klogd

#install /proc
mount -n -t proc none /proc

#reinstall root file system by read/write mode(need: /etc/fstab)
mount -n -o remount,rw /

#reinstall /proc
mount -n -o remount,rw -t proc none /proc

#set lo ip address
ifconfig lo 127.0.0.1

#set eth0 ip address
#当然，这样子做只是权宜之计，最后做的应该是在这一步引导网络启动脚本，像RedHat
#那样，自动读取所有指定的配置文件来启动
ifconfig eth0 192.168.0.68 netmask 255.255.255.0

#set route
#同样的，最终这里应该是运行启动路由的脚本，读取路由配置文件
route add default gw 192.168.0.1

#还差一个运行服务程序的脚本，哪位有现成的么？
#网卡/路由/服务这三步，事实上可以合在一步，在rcS这一步中，做一个循环，运行指定启动目录下的所有脚，先将就着这么做吧，确保系统能够正常启动了，再来写这个脚本。

#set hostname
hostname MyLinux

保存退出。

编写fstab文件
#vi fstab
我的fstab很简单：
/dev/hda1 / ext2 defaults 1 1
none /proc proc defaults 0 0

第五章 让MyLinux能够启动
前 一章，我们把编译好的内核、应用程序、配置文件都拷贝至rootfs目录对应的子目录中去了，这一步，就是把这些文件移植至目标机的存储器。这里，我是先 另外拿一块硬盘，挂在我的开发机上做的测试，因为我的本本用来写文档，PC机用来做开发机，已经没有另外的机器了……但是本章只是讲述一个一般性的过程， 并不影响你直接在目标主机上的工作。
因为以后目标机识别硬盘序号都是hda，而我现在直接挂上去，则会是hdb、hdc……这样，安装lilo时有点麻烦（虽然也可以实现）。所以我想了另一个办法：
 把新硬盘挂在IDE0的primary上，进入linux后，会被认为是had；
 原来主机的装Redhat的硬盘，我将它从IDE0的primary上变到了IDE1 的primary，因为它的lilo早已装好，基本上不影响系统的使用；

分区和格式化
BIOS中改为从第二个硬盘启动；也就是从我原来开发机启动，新的硬盘被识别成了had。
#fdisk /dev/hda
用d参数删除已存在的所有分区
用n参数新建一个分区，也是就/dev/hda1
格式化
#mkfs.ext2 /dev/hda1

安装bootloader
因为我是X86平台，所以直接用了lilo，如果你是其这平台，当然，有许多优秀的bootloader供你选择，你只需查看其相应的说明就可以了。
编译lilo配置文件，我的配置文件名为target.lilo.conf，置于${PRJROOT}/rootfs/etc目录。内容如下所示：
boot=/dev/hda
disk=/dev/hda
bios=0x80
image=/boot/bzImage-2.4.18-rmk5
label=Linux
root=/dev/hda1
append="root=/dev/hda1"
read-only

//新建文件夹，为mount做新准备
#mkdir /mnt/cf
//把目标硬盘mount上来
#mount –t ext2 /dev/hdc1 /mnt/cf
回到rootfs
#cd ${PRJROOT}/rootfs
拷贝所有文件至目标硬盘
#cp –r * /mnt/cf

这样，我们所有的文件都被安装至目标硬盘了，当然，它还不能引导，因为没有bootloader。使用如下命令：
# lilo -r /mnt/cf -C etc/target.lilo.conf
Warning: LBA32 addressing assumed
Added Linux *
-r ：改变根目标为/mnt/cf ，这样配置文件其实就是/mnt/cf/etc/target.lilo.conf，也就是我们先前建立的文件。
当然，完成这一步，需要lilo22.3及以后版本，如果你的版本太旧，比如Redhat9.0自带的，就会出现下面的信息：
#lilo –r /mnt/cf –C etc/target.lilo.conf
Fatal: open /boot/boot.b: No such file or directory
这时，你需要升级你的lilo，或者重新安装一个。

启动系统
#umount /mnt/cf
#reboot

将BIOS改为从IDE0启动，也就是目标硬盘。如果一切顺利，你将顺利进入一个属于你的系统。

回头再来看看我们的工作空间吧
[root@skynet lib]# df /dev/hda1
Filesystem 1K-blocks Used Available Use% Mounted on
/dev/hda1 3953036 1628 3750600 1% /mnt/cf

总共花去了我1628KB的空间，看来是没有办法放到软盘里边去了^o^，不过一味求小，并不是我的目标。

[root@skynet skynet]# ls ${PRJROOT}
bootloader build-tools debug doc images kernel rootfs sysapps tmp tools
这几个目录中的文件，呵呵，与本文一开头规划的一样

[root@skynet skynet]# ls build-tools/
buildroot buildroot-0.9.27.tar.tar
包含了buildroot源码及压缩包，事实上buildroot下边还包括了GNU其它工具的源码、编译文件等诸多内容，是我们最重要的一个文件夹，不过到现在它已经没有多大用处了，如果你喜欢，可以将它删除掉（不建议）。

[root@skynet skynet]# ls images
2.4.18-rmk5 bzImage-2.4.18-rmk5 System-2.4.18-rmk5 vmlinux-2.4.18-rmk5
内核映像及配置文件等，如果你有模块，因为还有相应的目录

[root@skynet skynet]# ls kernel/
linux-2.4.27 linux-2.4.27.tar.bz2
内核源码及压缩包

[root@skynet skynet]# ls rootfs/
bin boot dev etc home lib linuxrc proc root sbin tmp usr var
制作好的根文件系统，重中之重，注意备份……

[root@skynet skynet]# ls sysapps/
busybox-1.00 busybox-1.00.tar.gz
busybox-1.00源码包，或许你还要继续添加/删除一些命令……

[root@skynet skynet]# ls tools
bin i386-linux i386-linux-uclibc include info lib man
这个也很重要，我们制作好的交叉开发工具链。如果你要继续开发程序，这个目录重要性就很高了。

其它目录暂时是空的。


第六章 完善MyLinux
关于进一步的调试，你可以在开发机上使用chroot /mnt/cf /bin/sh这样的命令，以使我们在目标根文件系统上工作。

支持多用户
因为我在编译busybox时，已经将它的多用户那一大堆命令编译了进来。现在关键是的要为其建立相应的文件；
进入原来的开发机，进入rootfs目录，切换根目录
#chroot rootfs/ /bin/sh
A、 建立/etc/passwd文件，我的文件内容如下：
root:x:0:0:root:/root:/bin/bash
B、 建立/etc/group文件，我的文件内容如下：
root:x:0:
bin:x:1:
sys:x:2:
kmem:x:3:
tty:x:4:
tape:x:5:
daemon:x:6:
disk:x:7:
C、 为root建立密码
#passwd root

试试用addgroup/addusr……这堆命令。然后重启，从目标硬盘上启动；从console口，9600登陆试试（因为我在inittab中启用了ttyS0，我未来的目标机，是没有显卡的，需要从console口或SSH进去管理）
MyLinux login: root
Password:

BusyBox v1.00 (2004.10.10-04:43+0000) Built-in shell (ash)
Enter 'help' for a list of built-in commands.

~ #
成功了……

增加WEB Server
Busybox里边有httpd选项，不过我编译时并没有选择，所以还是自己来安装。我使用的软件是thttpd-2.25b.tar.gz，将它移至sysapps目录下。
[root@skynet sysapps]# tar zxvf thttpd-2.25b.tar.gz
[root@skynet sysapps]# cd thttpd-2.25b
//配置
[root@skynet thttpd-2.25b]# CC=i386-linux-gcc ./configure --host=$TARGET
……
i386-linux-gcc -static htpasswd.o -o htpasswd -lcrypt
make[1]: warning: Clock skew detected. Your build may be incomplete.
make[1]: Leaving directory `/home/skynet/sysapps/thttpd-2.25b/extras'
//拷贝至根文件目录
[root@skynet thttpd-2.25b]# cp thttpd ${PRJROOT}/rootfs/usr/sbin
//trip处理
[root@skynet thttpd-2.25b]# i386-linux-strip ${PRJROOT}/rootfs/usr/sbin/thttpd

剩下的，就发挥各人的想像吧……


独孤九贱 2005-11-1 02:34

继续补完

不好意思，最近工作太忙，好久没有来搞这个东东了，加之心爱的手机丢了，心情又不太好，不过一切都过去了，继续来将它补充完整。

修改启动脚本
在前面写rcS启动脚本中。当时只是为了系统能够正常地启动，在启动网卡/路由/服务等时，有如下语句：
——————————————————————————————————————————————
#set lo ip address
ifconfig lo 127.0.0.1

#set eth0 ip address
#当然，这样子做只是权宜之计，最后做的应该是在这一步引导网络启动脚本，像RedHat
#那样，自动读取所有指定的配置文件来启动
ifconfig eth0 192.168.0.68 netmask 255.255.255.0

#set route
#同样的，最终这里应该是运行启动路由的脚本，读取路由配置文件
route add default gw 192.168.0.1
……
———————————————————————————————————————————————
这样配置的最大坏处就是不能根据配置文件自定义，每次开机都定死了，现在来修改它，将这段语句删除之，换成如下语句：
for i in /etc/start/S??* ;do
# Ignore dangling symlinks (if any).
[ ! -f "$i" ] && continue

echo "Running $i ."
case "$i" in
*.sh)
# Source shell script for speed.
(
trap - INT QUIT TSTP
set start
. $i
)
;;
*)
# No sh extension, so fork subprocess.
$i start
;;
esac
echo "Done $i ."
echo
done
解释一下，这段语句的作用，就是启动/etc/start/目录下，所有以S开头的脚本文件，可以启动两类，以sh结尾或没有 sh后缀的。
这样，我们在/etc/目录下再新建一目录start/，这里面就是我们启动时需要的脚本的。先来启动网卡。

修改网卡配置文件
我是根据Red hat的作法，把网卡配置放在/etc/sysconfig/network-scripts目录下，类似于ifcfg-ethXX这样子，它们的语法是：
DEVICE=eth0
BOOTPROTO=static
BROADCAST=88.88.88.255
IPADDR=88.88.88.44
NETMASK=255.255.255.0
NETWORK=88.88.88.0
ONBOOT=yes
好，建立这些目录和文件，我共有两个文件ifcfg-ethXX。回到/etc/start目录，建立网卡的启动脚本S01interface：
#!/bin/sh

. /etc/sysconfig/network
#enable ip_forword
echo >1 /proc/sys/net/ipv4/ip_forward

#enable syn_cookie
echo >1 /proc/sys/net/ipv4/tcp_syncookies

#enable loopback interface
/sbin/ifconfig lo 127.0.0.1

#eanble ethernet interface
/usr/sbin/bootife

#set hostname
if [ -z "$HOSTNAME" -o "$HOSTNAME" = "(none)" ]
then
HOSTNAME=localhost
fi

/bin/hostname ${HOSTNAME}

请注意这个脚本文件，有两个地方：
1、包含了另一个配置文件/etc/sysconfig/network，在这里，我也是照抄了redhat，我的/etc/sysconfig/network这个文件的内容如下：
NETWORKING=yes
HOSTNAME=skynet
GATEWAY=88.88.88.2
2、在启动网卡时，我使用了
#eanble ethernet interface
/usr/sbin/bootife
bootife 是我自己写的一个C程序，作用是读取/etc/sysconfig/network-scripts/下面的ifcfg-ethXX文件，并配置之，本来 这里就该用shell来完成更合适一点，无奈，偶shell功底实在差了一点（刚学几天），就是想从Redhat中照抄过来，反复试了几次也没有成功。所 以被逼无奈用C来完成之，后面我会附上我的C的源码，也希望哪位大哥能够写一段Shell的程序代替它，放上来大家共享之。

修改路由启动文件
同样的，我在/etc/start下，建立新脚本S02route.sh，它的作用是启动所有配置的静态路由：
#!/bin/bash

. /etc/sysconfig/network
# Add non interface-specific static-routes.

if [ -f /etc/sysconfig/static-routes ]
then
grep "eth*" /etc/sysconfig/static-routes | while read ignore args ; do
# echo "/sbin/route add -"$args
/sbin/route add -$args
done
fi

#Add defalut gw
/sbin/route add default gw ${GATEWAY}

OK，启动时读取的配置文件是/etc/sysconfig/static-routes ，它的语法和Redhat是一样的，请参照建立此文件。

启动服务程序
新建启动脚本S03server：
#!/bin/sh
#------------------------------------------------------------------
#-- Source
#-- Author(s) : kendo
#-- Email: [email][e-mail][/email]
#--
#-- 2005/10/31
#------------------------------------------------------------------

. /etc/sysconfig/bootserver

if [ "$enable_httpd" = 1 ] ; then
. /etc/scripts/httpd.sh $1
fi

if [ "$enable_adsl" = 1 ] ; then
……
fi

if [ "$enable_udhcpd" = 1 ] ; then
……
fi

很简单，根据相应变量的值，调用相应的脚本。
1、这些启动标志变量，我定义在了/etc/sysconfig/bootserver当中，其内容如下：
#start server on system boot
#1:yes 0:no
enable_httpd=1
enable_adsl=1
enable_udhcpd=1

2、每种服务对应的脚本，我都放在了/etc/scripts下面。这些脚本，取决于你打算使用哪些服务程序了。脚本的来源，可以自己编写，有可能其源码中自带有，也可以到网上查找……我就不再一一赘述了，

OK，基本上，脚本的修改就完成了，下一步，将是建立RamDisk。

——————————————————————————————————————————————
附，读取网卡配置文件，启动网卡的C源码：
/************************************************************************
** author:kendo
** date:2005/10/26

***********************************************************************/

#include
#include
#include
#include
#include
#include

#define NETCFGDIR "/etc/sysconfig/network-scripts/"

struct _ifcfg{
char device[8];
char bootproto[8];
char br[16];
char netmask[16];
char ip[16];
char network[16];
int onboot;
};

void ParseKey(struct _ifcfg *ifcfg,char *key,char *value)
{
if(!strcmp(key,"DEVICE"))
{
strcpy(ifcfg->device,value);
}
else if(!strcmp(key,"BOOTPROTO"))
{
strcpy(ifcfg->bootproto,value);
}
else if(!strcmp(key,"BROADCAST"))
{
strcpy(ifcfg->br,value);
}
else if(!strcmp(key,"IPADDR"))
{
strcpy(ifcfg->ip,value);
}
else if(!strcmp(key,"NETMASK"))
{
strcpy(ifcfg->netmask,value);
}
else if(!strcmp(key,"NETWORK"))
{
strcpy(ifcfg->network,value);
}
else if(!strcmp(key,"ONBOOT"))
{
ifcfg->onboot=(strcmp(value,"yes") ? 0 : 1);
}
}

int main(int argc,char **argv)
{
FILE *fp;
DIR *dir;
int i;
char filename[50],buf[80];
char *index,*key,*value,*p;
struct _ifcfg *ifcfg;
struct dirent *ptr;

ifcfg=(struct _ifcfg *)malloc(sizeof(struct _ifcfg));
memset(ifcfg,0,sizeof(struct _ifcfg));

dir=opendir(NETCFGDIR); /*打开脚本目录*/
while((ptr=readdir(dir))!=NULL) /*读取所有文件*/
{
if(strncmp(ptr->d_name,"ifcfg-eth",9)) /*这里，只启动了以太网卡^o^*/
{
continue;
}
memset(filename,0,sizeof(filename));
sprintf(filename,"%s%s",NETCFGDIR,ptr->d_name);
if((fp=fopen(filename,"r"))==NULL) /*打开配置文件*/
{
continue;
}

while(!feof(fp))
{
memset(buf,0,sizeof(buf));
if(fgets(buf,80,fp)!=NULL) /*逐行读取分析*/
{
p=strchr(buf,'n');
if(p)
{
*p='';
}
index=buf;
key=strtok(index,"="); /*读取配置变量*/
value=strtok(NULL,"="); /*读取变量的值*/
ParseKey(ifcfg,key,value); /*分析之，存入结构ifcfg中*/
}
}
/*构建相应的命令*/
memset(buf,0,80);
strcpy(buf,"/sbin/ifconfig");

if(ifcfg->onboot)
{
sprintf(buf,"%s %s %s netmask %s broadcast %s",
buf,
ifcfg->device,
ifcfg->ip,
ifcfg->netmask,
ifcfg->br);
/*直接调用system来实现，当然也可以自己通过ioctl来设置，相应源码，我以前在c/c++版发过*/
system(buf);
}
}
free(ife);
return 0;
}

platinum 2005-11-1 02:52

[code]
memset(buf,0,80);
strcpy(buf,"/sbin/ifconfig");

if(ifcfg->onboot)
{
sprintf(buf,"%s %s %s netmask %s broadcast %s",
buf,
ifcfg->device,
ifcfg->ip,
ifcfg->netmask,
ifcfg->br);
/*直接调用system来实现，当然也可以自己通过ioctl来设置，相应源码，我以前在c/c++版发过*/
system(buf);
[/code]
两个问题
1、从这段代码看，实际调用了 /sbin/ifconfig 来完成网卡的设置，那么，这个程序是否必须用 root 来执行？
2、为何不用 system("command") 呢？

独孤九贱 2005-11-1 03:03

回复 19楼 platinum 的帖子

1、 ifconfig本身运行，应该不需要root吧？而至于在shell中的运行权限，要看看相应的权限位了，事实上它已经能够在我的系统中很好的运行了， 测试过很多次的。不过现在我的系统，其实没有用这种方法的，我是自己封装了一个网卡管理的库，也就是重写了ifconfig，不过要把这些代码发上来，太 麻烦了，所以，就用了解system简单了一点。

2、我不是很理解“为何不用 system("command") 呢？”这句话的含义，我用的是system(buf);你说的是不是为什么要去构建一个buf，而不是直接用system("/sbin/ifconfig ethXX……")？清楚一点……^o^


独孤九贱 2005-11-16 01:44

继续工作，交叉编译SNMP

一般系统都会有SNMP的支持，下载了net-snmp-5.1.3.1，先看看INSTALL和FAQ文档（因为以前从来没有碰过这个东东，见笑了……），按照说明，在原生主机上安装了一回，安装完成后，发现在指定安装目录下主要包括了几块文件：
bin：SNMP的一些功能脚本和程序；
sbin:主要的代理程序和trap程序：snmpd和snmptrap
include/lib:自身兼容及第三方开发所需的头文件及库文件；
share：主要是MIB文件；

然后回到安装目录下，运行./configuare --help，仔细查看了其安装编译选项，因为我定位的小型的系统，只需具备基本的SNMP功能即可，所以：
那些bin目录下的功能程序也不需要，对应--disable-applications
bin下的脚本也是不需要的，对应：--disable-scripts
用户手册也不需要：--disable-manuals
关闭ipv6支持：--disable-ipv6
还有一个--enable-mini-agent选项，说明是编译出一个最小化的snmpd，比较有趣，试试先。
对于交叉编译，还需要用--host指明目标平台。

OK，看完了帮助说明，开始编译了：
1、配置，根据以上确定的选项：
[root@skynet root]# CC=i386-linux-gcc ./configure --host=$TARGET --enable-mini-agent --disable-ipv6 --with-endianness=little --disable-applications --disable-manuals --disable-scripts --disable-ucd-snmp-compatibility

CC指明了编译器；--host指明了我的目标平台，这个环境变量在我前面定义的devedaq脚本中。
还算顺利，继续编译它：
[root@skynet net-snmp-5.1.3.1]# make LDFLAGS="-static"

呵呵，因为没有装lib库，所以我用了-static选项，指明是静态编译；

3、安装
安装就需要指明安装路径了，路径可以在.config的时候指定，因为那个时候，那串东东太长了，我在install时指定也不迟：
#make prefix=${TARGET_PREFIX} exec_prefix=${TARGET_PREFIX} install

4、检查一下：
[root@skynet net-snmp-5.1.3.1]# ls -l ${TARGET_PREFIX}/sbin
total 2120
-rwxr-xr-x 1 root root 2164301 Nov 16 09:22 snmpd

snmpd就是我们要的代理主程序了，大约静态编译有2M。

[root@skynet net-snmp-5.1.3.1]# ls -l ${TARGET_PREFIX}/bin
total 4380
-rwxr-xr-x 2 root root 391980 Oct 14 2004 ar
-rwxr-xr-x 2 root root 581228 Oct 14 2004 as
……

呵呵，那堆程序和脚本没有安装，如snmpwalk……

ls ${TARGET_PREFIX}/lib
ls -l ${TARGET_PREFIX}/include


看看我们需要的mib文件：
[root@skynet net-snmp-5.1.3.1]# ls ${TARGET_PREFIX}/share/snmp
mib2c.access_functions.conf mib2c.column_defines.conf mib2c.int_watch.conf mib2c.old-api.conf
mib2c.array-user.conf mib2c.column_enums.conf mib2c.iterate_access.conf mib2c.scalar.conf
mib2c.check_values.conf mib2c.conf mib2c.iterate.conf mibs
mib2c.check_values_local.conf mib2c.create-dataset.conf mib2c.notify.conf snmpconf-data

5、移植
基本完成了，因为snmpd太大了点，对它进行strip处理：
先备个份：
[root@skynet net-snmp-5.1.3.1]# cp ${TARGET_PREFIX}/sbin/snmpd ${TARGET_PREFIX}/sbin/snmpd.bak
[root@skynet net-snmp-5.1.3.1]# i386-linux-strip ${TARGET_PREFIX}/sbin/snmpd
[root@skynet net-snmp-5.1.3.1]# ls -l ${TARGET_PREFIX}/sbin/snmpd
-rwxr-xr-x 1 root root 503300 Nov 16 09:30 /home/skynet/tools/i386-linux/sbin/snmpd

经过处理后，还有近500KB了。

因为只有SNMP agent功能，即snmpd程序，其它的都可以忽略。用了静态编译，lib下边那些libnetsnmp文件都可以不需要了，程序运行
需要MIB库，也就是share下的内容，把这两个东东拷到rootfs相应的目录中去：
[root@skynet net-snmp-5.1.3.1]# cp ${TARGET_PREFIX}/sbin/snmpd ${PRJROOT}/rootfs/usr/sbin
[root@skynet net-snmp-5.1.3.1]# mkdir -p ${PRJROOT}/rootfs/usr/local/share
[root@skynet net-snmp-5.1.3.1]# cp -r ${TARGET_PREFIX}/share/snmp ${PRJROOT}/rootfs/usr/local/share
[root@skynet net-snmp-5.1.3.1]# cp EXAMPLE.conf ${PRJROOT}/rootfs/usr/local/share/snmp/snmpd.conf

最后一步是把安装目录下的配置文件范例拷到snmpd启动时默认的搜索目录中去。

6、测试
打开snmpd.conf看看：
[root@skynet net-snmp-5.1.3.1]# vi ${PRJROOT}/rootfs/usr/local/share/snmp/snmpd.conf
有如下语句：
# sec.name source community
com2sec local localhost COMMUNITY
com2sec mynetwork NETWORK/24 COMMUNITY
定义了两个用户，本地及网络的，以及它们的通读密钥，按自己的需要修改一下，如：
# sec.name source community
com2sec local 127.0.0.1 public
com2sec mynetwork 0.0.0.0 public

后面是定义用户的用户组等一大堆东东，事实上不用修改它们了。运行它：
[root@skynet net-snmp-5.1.3.1]# chroot ${PRJROOT}/rootfs /bin/sh


BusyBox v1.00 (2004.10.13-06:32+0000) Built-in shell (ash)
Enter 'help' for a list of built-in commands.

/ # snmpd
/ # exit
在我们自己的根文件系统环境下运行它，然后退出来。用ps查看：
#ps -aux
……
root 32270 0.0 0.3 1212 936 ? S 09:38 0:00 snmpd

[root@skynet net-snmp-5.1.3.1]# netstat -anu
……
udp 0 0 0.0.0.0:161 0.0.0.0:*

呵呵，已经成功启动了。用一个SNMP管理软件试试，可以成功地获取到信息。OK！

总结一下：
1、主程序+MIB库大了点，共计约2M，不过我确实没有办法再小了，而且一味求小，也不是我的目的。
2、功能稍微简单了些，只有agent，如果需要，可以类似地把其它程序加上去就可以了。
3、第一次玩net-snmp，还是有点生疏，比如我静态编译二进制程序，并不需要include/lib下的文件，但是如何关闭它们呢？我试过--disable-ucd-snmp-compatibility，不过好像不是这个选项……下次改进了……

独孤九贱 2005-11-16 05:38

继续工作，使用ramdisk

前提：内核编译时得选相应的支持选项，前文已有叙述。

1、rootfs中的/boot文件夹删除；
2、建立ramdisk:
使用dd命令建立一个空的文件系统映像：
# dd if=/dev/zero of=images/initrd.img bs=1k count=8192

大小8192K，用/dev/zero对其初始化；

利用刚才的空的文件系统映像，建立文件系统并安装它，使用了mke2fs命令：
# /sbin/mke2fs -F -v -m0 images/initrd.img

新建一个临时文件夹做mount之用：
# mkdir tmp/initrd
把建好的文件系统mount上来：
#mount -o loop images/initrd.img tmp/initrd
把根文件系统拷贝过来：
#cp -av rootfs/* tmp/initrd
# umount tmp/initrd

压缩：
# gzip -9 images/initrd.bin

这样，就得到了images/initrd.bin

把目标盘mount上来：
#mount -t ext2 /dev/hda1 /mnt/cf
新建一个/boot
#mkdir /mnt/cf/boot

把刚才建立的ramdisk镜像拷过来。然后把内核文件bzImage-2.4.27-rmk5也拷进去。
这样，boot文件夹里边有两个文件
initrd.bin
bzImage-2.4.27-rmk5

这个时候还不能安装lilo，因为lilo的配置文件中有/dev/hda……这样的东东，而目标盘上还没有……所以，临时建一个：
#mkdir /mnt/cf/dev
#cp -rf ${PRJROOT}/rootfs/dev/hda* /mnt/cf/dev

修改${PRJROOT}/rootfs/etc/target.lilo.conf，我的配置文件如下：
boot=/dev/hda
disk=/dev/hda
bios=0x80

image=/boot/bzImage-2.4.27-rmk5
initrd=/boot/initrd.bin
root=/dev/hda1
append="root=/dev/hda1"
# label=MyLinux
read-only

相比以前的，只是加了一句：initrd=/boot/initrd.bin，另外把label去掉了，因为否则lilo会报怨说语法错误。

好了，可以安装lilo了。以前我们的语句是：
lilo -r /mnt/cf -C etc/target.lilo.conf
现在我们的目标盘上没有etc这个目录了，更不用说target.lilo.conf，可以借助于工程目录中的了原文件，当然，我在目标硬盘上新建了/dev，然后把target.lilo.conf拷过去，还是用这句命令安装lilo。

这样，整个系统就完成了。

总结：还是想把kernel与文件系统都做到initrd.bin中，不过现在还没有找到可行的办法，大家也可以跟贴讨论如何来做，偶也好学学……