ISO missing ipxe roms package
[apex.git] / build / Makefile
1 ##############################################################################
2 # Copyright (c) 2016 Red Hat Inc.
3 # dradez@redhat.com
4 # All rights reserved. This program and the accompanying materials
5 # are made available under the terms of the Apache License, Version 2.0
6 # which accompanies this distribution, and is available at
7 # http://www.apache.org/licenses/LICENSE-2.0
8 ##############################################################################
9
10 export USE_MASTER = ""
11 export CENTDNLD = http://mirrors.cat.pdx.edu/centos/7.2.1511/isos/x86_64/CentOS-7-x86_64-DVD-1511.iso
12 export CENTISO = $(shell pwd)/$(shell basename $(CENTDNLD))
13 export RELEASE = "0"
14 export ISO = $(shell pwd)/release/OPNFV-CentOS-7-x86_64-${RELEASE}.iso
15 export RPMVERS = $(shell grep Version $(shell pwd)/opnfv-apex.spec | head -n 1 | awk '{ print $$2 }')
16 export RPMCOM = $(shell pwd)/noarch/opnfv-apex-common-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
17 export RPMUDR = $(shell pwd)/noarch/opnfv-apex-undercloud-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
18 export RPMODL = $(shell pwd)/noarch/opnfv-apex-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
19 export RPMONO = $(shell pwd)/noarch/opnfv-apex-onos-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
20 export RPMSFC = $(shell pwd)/noarch/opnfv-apex-opendaylight-sfc-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
21
22 all_networks="admin_network private_network storage_network external_network api_network"
23
24
25
26 .PHONY: all
27 all: iso
28
29 .PHONY: clean
30 clean: images-clean rpms-clean iso-clean
31
32 .PHONY: images
33 images: undercloud overcloud-full overcloud-opendaylight overcloud-onos overcloud-opendaylight-sfc
34
35 .PHONY: images-clean
36 images-clean: undercloud-clean overcloud-full-clean overcloud-opendaylight-clean overcloud-onos-clean overcloud-opendaylight-sfc-clean
37         @rm -rf images/
38
39 .PHONY: rpms
40 rpms: common-rpm undercloud-rpm opendaylight-rpm onos-rpm opendaylight-sfc-rpm
41
42 .PHONY: rpms-check
43 rpms-check: common-rpm-check undercloud-rpm-check opendaylight-rpm-check onos-rpm-check opendaylight-sfc-rpm-check
44
45 .PHONY: rpms-clean
46 rpms-clean: common-rpm-clean undercloud-rpm-clean opendaylight-rpm-clean onos-rpm-clean opendaylight-sfc-rpm-clean
47
48 opnfv-apex-common.tar.gz:
49         pushd ../ && git archive --format=tar.gz --prefix=opnfv-apex-common-$(RPMVERS)/ HEAD > build/opnfv-apex-common.tar.gz
50
51 .PHONY: common-rpm-check
52 common-rpm-check: opnfv-apex-common.tar.gz
53         rpmbuild --clean -bi -bl opnfv-apex-common.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
54
55 .PHONY: common-rpm
56 common-rpm: opnfv-apex-common.tar.gz $(RPMCOM)
57
58 $(RPMCOM):
59         @echo "Building the Apex Common RPM"
60         # build the common RPM
61         rpmbuild --clean -ba opnfv-apex-common.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
62
63 ##################
64 #  PYTHON TESTS  #
65 ##################
66
67 .PHONY: python-tests
68 python-tests:
69         # run nose tests
70         cd ../tests && PYTHONPATH=../lib/python/ nosetests-3.4 . --with-coverage --cover-package apex
71         # generate reports
72         cd ../tests && coverage3 html --include '*lib/python/*'
73         cd ../tests && coverage3 report --include '*lib/python/*' -m
74
75
76 ###############
77 #  UNDERCLOUD #
78 ###############
79
80 .PHONY: undercloud-clean
81 undercloud-clean:
82         @rm -f images/undercloud.*
83
84 .PHONY: undercloud
85 undercloud: images/undercloud.qcow2
86
87 images/undercloud.qcow2:
88         @echo "Building the Apex Undercloud Image"
89         @./undercloud.sh
90
91 opnfv-apex-undercloud.tar.gz: images/undercloud.qcow2
92         @echo "Preparing the Apex Undercloud RPM prerequisites"
93         pushd ../ && git archive --format=tar --prefix=opnfv-apex-undercloud-$(RPMVERS)/ HEAD > build/opnfv-apex-undercloud.tar
94         tar -rf opnfv-apex-undercloud.tar \
95                --xform="s:images/undercloud.qcow2:opnfv-apex-undercloud-$(RPMVERS)/build/undercloud.qcow2:" images/undercloud.qcow2
96         gzip -f opnfv-apex-undercloud.tar
97
98 .PHONY: undercloud-rpm-check
99 undercloud-rpm-check: opnfv-apex-undercloud.tar.gz
100         rpmbuild --clean -bi -bl opnfv-apex-undercloud.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
101
102 .PHONY: undercloud-rpm
103 undercloud-rpm: opnfv-apex-undercloud.tar.gz $(RPMUDR)
104
105 $(RPMUDR):
106         @echo "Building the Apex Undercloud RPM"
107         rpmbuild --clean -ba opnfv-apex-undercloud.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
108
109 ###############
110 #  OVERCLOUD  #
111 ###############
112
113 .PHONY: overcloud-full-clean
114 overcloud-full-clean:
115         @rm -rf images/overcloud-full.d
116         @rm -f images/overcloud-full.*
117
118 .PHONY: overcloud-full
119 overcloud-full: images/overcloud-full.qcow2
120
121 images/overcloud-full.qcow2:
122         @echo "Building the Apex Base Overcloud Image"
123         @./overcloud-full.sh
124
125 ###############
126 #    ODL      #
127 ###############
128
129 .PHONY: overcloud-opendaylight-clean
130 overcloud-opendaylight-clean:
131         @rm -f images/overcloud-full-opendaylight.qcow2
132
133 .PHONY: overcloud-opendaylight
134 overcloud-opendaylight: images/overcloud-full-opendaylight.qcow2
135
136 images/overcloud-full-opendaylight.qcow2: images/overcloud-full.qcow2
137         @echo "Building the Apex OpenDaylight Overcloud Image"
138         @./overcloud-opendaylight.sh
139
140 opnfv-apex.tar.gz: images/overcloud-full-opendaylight.qcow2
141         tar -czf opnfv-apex.tar.gz --xform="s:images/overcloud-full-opendaylight.qcow2:opnfv-apex-$(RPMVERS)/build/images/overcloud-full-opendaylight.qcow2:" images/overcloud-full-opendaylight.qcow2
142
143 .PHONY: opendaylight-rpm-check
144 opendaylight-rpm-check: opnfv-apex.tar.gz
145         rpmbuild --clean -bi -bl opnfv-apex.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
146
147 .PHONY: opendaylight-rpm
148 opendaylight-rpm: opnfv-apex.tar.gz $(RPMODL)
149
150 $(RPMODL):
151         @echo "Building the Apex OpenDaylight RPM"
152         # build the overcloud RPM
153         rpmbuild --clean -ba opnfv-apex.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
154
155 ###############
156 #    ONOS     #
157 ###############
158
159 .PHONY: overcloud-onos-clean
160 overcloud-onos-clean:
161         @rm -f images/overcloud-full-onos.qcow2
162         @rm -rf images/puppet-onos
163         @rm -f images/puppet-onos.tar.gz
164
165 .PHONY: overcloud-onos
166 overcloud-onos: images/overcloud-full-onos.qcow2
167
168 images/overcloud-full-onos.qcow2: images/overcloud-full.qcow2
169         @echo "Building the Apex ONOS Overcloud Image"
170         @./overcloud-onos.sh
171
172 .PHONY: onos-rpm-clean
173 onos-rpm-clean:
174         @rpmbuild --clean opnfv-apex-onos.spec -D "release $(shell echo $RELEASE | tr -d '_-')"
175
176 opnfv-apex-onos.tar.gz: images/overcloud-full-onos.qcow2
177         tar -czf opnfv-apex-onos.tar.gz --xform="s:images/overcloud-full-onos.qcow2:opnfv-apex-onos-$(RPMVERS)/build/images/overcloud-full-onos.qcow2:" images/overcloud-full-onos.qcow2
178
179 .PHONY: onos-rpm-check
180 onos-rpm-check: opnfv-apex-onos.tar.gz
181         rpmbuild --clean -bi -bl opnfv-apex-onos.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
182
183 .PHONY: onos-rpm
184 onos-rpm: opnfv-apex-onos.tar.gz $(RPMONO)
185
186 $(RPMONO):
187         @echo "Building the Apex ONOS RPM"
188         # build the overcloud RPM
189         rpmbuild --clean -ba opnfv-apex-onos.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
190
191 ###############
192 #   ODL-SFC   #
193 ###############
194
195 .PHONY: overcloud-opendaylight-sfc-clean
196 overcloud-opendaylight-sfc-clean:
197         @rm -f images/overcloud-full-opendaylight-sfc.qcow2
198
199 .PHONY: overcloud-opendaylight-sfc
200 overcloud-opendaylight-sfc: images/overcloud-full-opendaylight-sfc.qcow2
201
202 images/overcloud-full-opendaylight-sfc.qcow2: images/overcloud-full-opendaylight.qcow2
203         @echo "Building the Apex OpenDaylight Overcloud Image"
204         @./overcloud-opendaylight-sfc.sh
205
206 opnfv-apex-opendaylight-sfc.tar.gz: images/overcloud-full-opendaylight-sfc.qcow2
207         tar -czf opnfv-apex-opendaylight-sfc.tar.gz --xform="s:images/overcloud-full-opendaylight-sfc.qcow2:opnfv-apex-opendaylight-sfc-$(RPMVERS)/build/images/overcloud-full-opendaylight-sfc.qcow2:" images/overcloud-full-opendaylight-sfc.qcow2
208
209 .PHONY: opendaylight-sfc-rpm-check
210 opendaylight-sfc-rpm-check: opnfv-apex-opendaylight-sfc.tar.gz
211         rpmbuild --clean -bi -bl opnfv-apex-opendaylight-sfc.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
212
213 .PHONY: opendaylight-sfc-rpm
214 opendaylight-sfc-rpm: opnfv-apex-opendaylight-sfc.tar.gz $(RPMSFC)
215
216 $(RPMSFC):
217         @echo "Building the Apex OpenDaylight SFC RPM"
218         rpmbuild --clean -ba opnfv-apex-opendaylight-sfc.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
219
220 ###############
221 #    ISO      #
222 ###############
223
224 $(CENTISO):
225         curl $(CENTDNLD) -z $(CENTISO) -o $(CENTISO) --verbose --silent --location
226
227 .PHONY: iso-clean
228 iso-clean:
229         @rm -Rf centos
230         @rm -Rf release
231         @rm -f $(ISO)
232
233 .PHONY: mount-centiso umount-centiso
234 mount-centiso: $(CENTISO)
235         @echo "Mounting CentOS ISO in $(CENTDIR)"
236         @mkdir -p $(CENTDIR)
237         @fuseiso $(CENTISO) $(CENTDIR)
238
239 umount-centiso:
240         @set +e
241         @echo "Unmounting CentOS ISO from $(CENTDIR)"
242         @fusermount -u $(CENTDIR)
243         @rmdir $(CENTDIR)
244         @set -e
245
246 .PHONY: iso
247 iso:    iso-clean images rpms $(CENTISO)
248         @echo "Building the Apex ISO"
249         @mkdir centos release
250         cd centos && bsdtar -xf ../$(shell basename $(CENTISO))
251         # modify the installer iso's contents
252         @chmod -R u+w centos
253         @cp -f isolinux.cfg centos/isolinux/isolinux.cfg
254         @ln $(RPMCOM) centos/Packages
255         @ln $(RPMUDR) centos/Packages
256         @ln $(RPMODL) centos/Packages
257         @ln $(RPMONO) centos/Packages
258         @ln $(RPMSFC) centos/Packages
259         # add packages to the centos packages
260         cd centos/Packages && yumdownloader openvswitch
261         cd centos/Packages && yumdownloader openstack-tripleo
262         cd centos/Packages && yumdownloader jq
263         cd centos/Packages && yumdownloader python34
264         cd centos/Packages && yumdownloader python34-libs
265         cd centos/Packages && yumdownloader python34-yaml
266         cd centos/Packages && yumdownloader python34-setuptools
267         cd centos/Packages && yumdownloader ipxe-roms-qemu
268         cd centos/Packages && curl -O https://radez.fedorapeople.org/python34-markupsafe-0.23-9.el7.centos.x86_64.rpm
269         cd centos/Packages && curl -O https://radez.fedorapeople.org/python3-jinja2-2.8-5.el7.centos.noarch.rpm
270         # regenerate yum repo data
271         @echo "Generating new yum metadata"
272         createrepo --update -g ../c7-opnfv-x86_64-comps.xml centos
273         # build the iso
274         @echo "Building OPNFV iso"
275         mkisofs -b isolinux/isolinux.bin -no-emul-boot -boot-load-size 4 -boot-info-table -V "OPNFV CentOS 7 x86_64" -R -J -v -T -o $(ISO) centos
276         isohybrid $(ISO)
277         @printf "\n\nISO is built at $(ISO)\n\n"
278
279 ###################
280 #  python3-jinja2  #
281 ###################
282
283 .PHONY: python3-jinja2
284 python3-jinja2: python3-markupsafe python-jinja2-2.8-5.fc24.src.rpm
285         curl -O http://ftp.linux.ncsu.edu/pub/fedora/linux//development/24/Everything/source/tree/Packages/p/python-jinja2-2.8-5.fc24.src.rpm
286         rpm2cpio python-jinja2-2.8-5.fc24.src.rpm | cpio -idmv
287         sed -i 's/python3-devel/python34-devel/' python-jinja2.spec
288         sed -i 's/python3-setuptools/python34-setuptools/' python-jinja2.spec
289         sed -i 's/python3-pytest/python34-pytest/' python-jinja2.spec
290         sed -i 's/python3-markupsafe/python34-markupsafe/' python-jinja2.spec
291         rpmbuild -ba python-jinja2.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "with_python3 1"
292
293 .PHONY: python3-jinja2-clean
294 python3-jinja2-clean:
295         rm -f python-jinja2-2.8-5.fc24.src.rpm
296         rm -f python-jinja2.spec
297         rm -f Jinja2-2.8.tar.gz
298
299 ########################
300 #  python3-markupsafe  #
301 ########################
302
303 .PHONY: python3-markupsafe
304 python3-markupsafe: python-markupsafe-0.23-9.fc24.src.rpm
305         curl -O http://ftp.linux.ncsu.edu/pub/fedora/linux//development/24/Everything/source/tree/Packages/p/python-markupsafe-0.23-9.fc24.src.rpm
306         rpm2cpio python-markupsafe-0.23-9.fc24.src.rpm | cpio -idmv
307         sed -i 's/python3-devel/python34-devel/' python-markupsafe.spec
308         sed -i 's/python3-setuptools/python34-setuptools/' python-markupsafe.spec
309         sed -i 's/python3-pytest/python34-pytest/' python-markupsafe.spec
310         sed -i 's/python3-markupsafe/python34-markupsafe/' python-markupsafe.spec
311         rpmbuild -ba python-markupsafe.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "with_python3 1"
312
313 .PHONY: python3-markupsafe-clean
314 python3-markupsafe-clean:
315         rm -f python-markupsafe-0.23-9.fc24.src.rpm
316         rm -f python-markupsafe.spec
317         rm -f MarkupSafe-0.23.tar.gz