a1089a8401b03440d750f7273353086f2a50f4f3
[apex.git] / build / Makefile
1 ##############################################################################
2 # Copyright (c) 2016 Red Hat Inc.
3 # dradez@redhat.com
4 # All rights reserved. This program and the accompanying materials
5 # are made available under the terms of the Apache License, Version 2.0
6 # which accompanies this distribution, and is available at
7 # http://www.apache.org/licenses/LICENSE-2.0
8 ##############################################################################
9
10 export USE_MASTER = ""
11 export CENTDNLD = http://mirrors.cat.pdx.edu/centos/7.2.1511/isos/x86_64/CentOS-7-x86_64-DVD-1511.iso
12 export CENTISO = $(shell pwd)/$(shell basename $(CENTDNLD))
13 export RELEASE = "0"
14 export ISO = $(shell pwd)/release/OPNFV-CentOS-7-x86_64-${RELEASE}.iso
15 export RPMVERS = $(shell grep Version $(shell pwd)/opnfv-apex.spec | head -n 1 | awk '{ print $$2 }')
16 export RPMCOM = $(shell pwd)/noarch/opnfv-apex-common-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
17 export RPMUDR = $(shell pwd)/noarch/opnfv-apex-undercloud-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
18 export RPMODL = $(shell pwd)/noarch/opnfv-apex-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
19 export RPMONO = $(shell pwd)/noarch/opnfv-apex-onos-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
20 export RPMSFC = $(shell pwd)/noarch/opnfv-apex-opendaylight-sfc-$(RPMVERS)-$(shell echo ${RELEASE} | tr -d '_-').noarch.rpm
21
22 all_networks="admin_network private_network storage_network external_network api_network"
23
24
25
26 .PHONY: all
27 all: iso
28
29 .PHONY: clean
30 clean: images-clean rpms-clean iso-clean tacker-clean
31
32 .PHONY: images
33 images: undercloud overcloud-full overcloud-opendaylight overcloud-onos overcloud-opendaylight-sfc
34
35 .PHONY: images-clean
36 images-clean: undercloud-clean overcloud-full-clean overcloud-opendaylight-clean overcloud-onos-clean overcloud-opendaylight-sfc-clean
37         @rm -rf images/
38
39 .PHONY: rpms
40 rpms: common-rpm undercloud-rpm opendaylight-rpm onos-rpm opendaylight-sfc-rpm
41
42 .PHONY: rpms-check
43 rpms-check: common-rpm-check undercloud-rpm-check opendaylight-rpm-check onos-rpm-check opendaylight-sfc-rpm-check
44
45 .PHONY: rpms-clean
46 rpms-clean: common-rpm-clean undercloud-rpm-clean opendaylight-rpm-clean onos-rpm-clean opendaylight-sfc-rpm-clean
47
48 opnfv-apex-common.tar.gz:
49         pushd ../ && git archive --format=tar.gz --prefix=opnfv-apex-common-$(RPMVERS)/ HEAD > build/opnfv-apex-common.tar.gz
50
51 .PHONY: common-rpm-check
52 common-rpm-check: opnfv-apex-common.tar.gz
53         rpmbuild --clean -bi -bl opnfv-apex-common.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
54
55 .PHONY: common-rpm
56 common-rpm: opnfv-apex-common.tar.gz $(RPMCOM)
57
58 $(RPMCOM):
59         @echo "Building the Apex Common RPM"
60         # build the common RPM
61         rpmbuild --clean -ba opnfv-apex-common.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
62
63 ##################
64 #  PYTHON TESTS  #
65 ##################
66
67 .PHONY: python-tests
68 python-tests:
69         # clean previous coverage data
70         rm -rf ../tests/.coverage
71         rm -rf ../tests/htmlcov
72         # run nose tests
73         cd ../tests && PYTHONPATH=../lib/python/ nosetests-3.4 . --with-coverage --cover-package apex --cover-package apex_python_utils --cover-html --cover-min-percentage 85
74
75         # generate reports
76         cd ../tests && coverage3 report --include '*lib/python/*' -m
77
78 #######################
79 #  PYTHON PEP8 CHECK  #
80 #######################
81
82 .PHONY: python-pep8-check
83 python-pep8-check:
84         pep8 ../lib/python
85         pep8 ../tests
86
87 ###############
88 #  TACKER     #
89 ###############
90
91 .PHONY: tacker-clean
92
93 tacker-clean:
94         @rm -rf openstack-tacker-2015.2
95         @rm -f openstack-tacker.tar.gz
96
97 openstack-tacker.tar.gz:
98         @echo "Preparing the Tacker RPM prerequisites"
99         git clone http://github.com/trozet/tacker -b SFC_colorado openstack-tacker-2015.2
100         tar czf openstack-tacker.tar.gz openstack-tacker-2015.2
101
102 .PHONY: tacker-rpm
103 tacker-rpm: openstack-tacker.tar.gz openstack-tacker-2015.2-1.noarch.rpm
104
105 openstack-tacker-2015.2-1.noarch.rpm:
106         @echo "Building the Tacker RPM"
107         rpmbuild --clean -bb --target noarch openstack-tacker.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)'
108
109 ###############
110 #  UNDERCLOUD #
111 ###############
112
113 .PHONY: undercloud-clean
114 undercloud-clean:
115         @rm -f images/undercloud.*
116
117 .PHONY: undercloud
118 undercloud: images/undercloud.qcow2
119
120 images/undercloud.qcow2:
121         @echo "Building the Apex Undercloud Image"
122         @./undercloud.sh
123
124 opnfv-apex-undercloud.tar.gz: images/undercloud.qcow2
125         @echo "Preparing the Apex Undercloud RPM prerequisites"
126         pushd ../ && git archive --format=tar --prefix=opnfv-apex-undercloud-$(RPMVERS)/ HEAD > build/opnfv-apex-undercloud.tar
127         tar -rf opnfv-apex-undercloud.tar \
128                --xform="s:images/undercloud.qcow2:opnfv-apex-undercloud-$(RPMVERS)/build/undercloud.qcow2:" images/undercloud.qcow2
129         gzip -f opnfv-apex-undercloud.tar
130
131 .PHONY: undercloud-rpm-check
132 undercloud-rpm-check: opnfv-apex-undercloud.tar.gz
133         rpmbuild --clean -bi -bl opnfv-apex-undercloud.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
134
135 .PHONY: undercloud-rpm
136 undercloud-rpm: opnfv-apex-undercloud.tar.gz $(RPMUDR)
137
138 $(RPMUDR):
139         @echo "Building the Apex Undercloud RPM"
140         rpmbuild --clean -ba opnfv-apex-undercloud.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
141
142 ###############
143 #  OVERCLOUD  #
144 ###############
145
146 .PHONY: overcloud-full-clean
147 overcloud-full-clean:
148         @rm -rf images/overcloud-full.d
149         @rm -f images/overcloud-full.*
150
151 .PHONY: overcloud-full
152 overcloud-full: images/overcloud-full.qcow2
153
154 images/overcloud-full.qcow2: tacker-rpm
155         @echo "Building the Apex Base Overcloud Image"
156         @./overcloud-full.sh
157
158 ###############
159 #    ODL      #
160 ###############
161
162 .PHONY: overcloud-opendaylight-clean
163 overcloud-opendaylight-clean:
164         @rm -f images/overcloud-full-opendaylight.qcow2
165
166 .PHONY: overcloud-opendaylight
167 overcloud-opendaylight: images/overcloud-full-opendaylight.qcow2
168
169 images/overcloud-full-opendaylight.qcow2: images/overcloud-full.qcow2
170         @echo "Building the Apex OpenDaylight Overcloud Image"
171         @./overcloud-opendaylight.sh
172
173 opnfv-apex.tar.gz: images/overcloud-full-opendaylight.qcow2
174         tar -czf opnfv-apex.tar.gz --xform="s:images/overcloud-full-opendaylight.qcow2:opnfv-apex-$(RPMVERS)/build/images/overcloud-full-opendaylight.qcow2:" images/overcloud-full-opendaylight.qcow2
175
176 .PHONY: opendaylight-rpm-check
177 opendaylight-rpm-check: opnfv-apex.tar.gz
178         rpmbuild --clean -bi -bl opnfv-apex.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
179
180 .PHONY: opendaylight-rpm
181 opendaylight-rpm: opnfv-apex.tar.gz $(RPMODL)
182
183 $(RPMODL):
184         @echo "Building the Apex OpenDaylight RPM"
185         # build the overcloud RPM
186         rpmbuild --clean -ba opnfv-apex.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
187
188 ###############
189 #    ONOS     #
190 ###############
191
192 .PHONY: overcloud-onos-clean
193 overcloud-onos-clean:
194         @rm -f images/overcloud-full-onos.qcow2
195         @rm -rf images/puppet-onos
196         @rm -f images/puppet-onos.tar.gz
197
198 .PHONY: overcloud-onos
199 overcloud-onos: images/overcloud-full-onos.qcow2
200
201 images/overcloud-full-onos.qcow2: images/overcloud-full.qcow2
202         @echo "Building the Apex ONOS Overcloud Image"
203         @./overcloud-onos.sh
204
205 .PHONY: onos-rpm-clean
206 onos-rpm-clean:
207         @rpmbuild --clean opnfv-apex-onos.spec -D "release $(shell echo $RELEASE | tr -d '_-')"
208
209 opnfv-apex-onos.tar.gz: images/overcloud-full-onos.qcow2
210         tar -czf opnfv-apex-onos.tar.gz --xform="s:images/overcloud-full-onos.qcow2:opnfv-apex-onos-$(RPMVERS)/build/images/overcloud-full-onos.qcow2:" images/overcloud-full-onos.qcow2
211
212 .PHONY: onos-rpm-check
213 onos-rpm-check: opnfv-apex-onos.tar.gz
214         rpmbuild --clean -bi -bl opnfv-apex-onos.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
215
216 .PHONY: onos-rpm
217 onos-rpm: opnfv-apex-onos.tar.gz $(RPMONO)
218
219 $(RPMONO):
220         @echo "Building the Apex ONOS RPM"
221         # build the overcloud RPM
222         rpmbuild --clean -ba opnfv-apex-onos.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
223
224 ###############
225 #   ODL-SFC   #
226 ###############
227
228 .PHONY: overcloud-opendaylight-sfc-clean
229 overcloud-opendaylight-sfc-clean:
230         @rm -f images/overcloud-full-opendaylight-sfc.qcow2
231
232 .PHONY: overcloud-opendaylight-sfc
233 overcloud-opendaylight-sfc: images/overcloud-full-opendaylight-sfc.qcow2
234
235 images/overcloud-full-opendaylight-sfc.qcow2: images/overcloud-full-opendaylight.qcow2
236         @echo "Building the Apex OpenDaylight Overcloud Image"
237         @./overcloud-opendaylight-sfc.sh
238
239 opnfv-apex-opendaylight-sfc.tar.gz: images/overcloud-full-opendaylight-sfc.qcow2
240         tar -czf opnfv-apex-opendaylight-sfc.tar.gz --xform="s:images/overcloud-full-opendaylight-sfc.qcow2:opnfv-apex-opendaylight-sfc-$(RPMVERS)/build/images/overcloud-full-opendaylight-sfc.qcow2:" images/overcloud-full-opendaylight-sfc.qcow2
241
242 .PHONY: opendaylight-sfc-rpm-check
243 opendaylight-sfc-rpm-check: opnfv-apex-opendaylight-sfc.tar.gz
244         rpmbuild --clean -bi -bl opnfv-apex-opendaylight-sfc.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
245
246 .PHONY: opendaylight-sfc-rpm
247 opendaylight-sfc-rpm: opnfv-apex-opendaylight-sfc.tar.gz $(RPMSFC)
248
249 $(RPMSFC):
250         @echo "Building the Apex OpenDaylight SFC RPM"
251         rpmbuild --clean -ba opnfv-apex-opendaylight-sfc.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "release $(shell echo $(RELEASE) | tr -d '_-')"
252
253 ###############
254 #    ISO      #
255 ###############
256
257 $(CENTISO):
258         curl $(CENTDNLD) -z $(CENTISO) -o $(CENTISO) --verbose --silent --location
259
260 .PHONY: iso-clean
261 iso-clean:
262         @rm -Rf centos
263         @rm -Rf release
264         @rm -f $(ISO)
265
266 .PHONY: mount-centiso umount-centiso
267 mount-centiso: $(CENTISO)
268         @echo "Mounting CentOS ISO in $(CENTDIR)"
269         @mkdir -p $(CENTDIR)
270         @fuseiso $(CENTISO) $(CENTDIR)
271
272 umount-centiso:
273         @set +e
274         @echo "Unmounting CentOS ISO from $(CENTDIR)"
275         @fusermount -u $(CENTDIR)
276         @rmdir $(CENTDIR)
277         @set -e
278
279 .PHONY: iso
280 iso:    iso-clean images rpms $(CENTISO)
281         @echo "Building the Apex ISO"
282         @mkdir centos release
283         cd centos && bsdtar -xf ../$(shell basename $(CENTISO))
284         # modify the installer iso's contents
285         @chmod -R u+w centos
286         @cp -f isolinux.cfg centos/isolinux/isolinux.cfg
287         @ln $(RPMCOM) centos/Packages
288         @ln $(RPMUDR) centos/Packages
289         @ln $(RPMODL) centos/Packages
290         @ln $(RPMONO) centos/Packages
291         @ln $(RPMSFC) centos/Packages
292         # add packages to the centos packages
293         cd centos/Packages && yumdownloader openvswitch
294         cd centos/Packages && yumdownloader openstack-tripleo
295         cd centos/Packages && yumdownloader jq
296         cd centos/Packages && yumdownloader python34
297         cd centos/Packages && yumdownloader python34-libs
298         cd centos/Packages && yumdownloader python34-yaml
299         cd centos/Packages && yumdownloader python34-setuptools
300         cd centos/Packages && yumdownloader ipxe-roms-qemu
301         cd centos/Packages && curl -O https://radez.fedorapeople.org/python34-markupsafe-0.23-9.el7.centos.x86_64.rpm
302         cd centos/Packages && curl -O https://radez.fedorapeople.org/python3-jinja2-2.8-5.el7.centos.noarch.rpm
303         # regenerate yum repo data
304         @echo "Generating new yum metadata"
305         createrepo --update -g ../c7-opnfv-x86_64-comps.xml centos
306         # build the iso
307         @echo "Building OPNFV iso"
308         mkisofs -b isolinux/isolinux.bin -no-emul-boot -boot-load-size 4 -boot-info-table -V "OPNFV CentOS 7 x86_64" -R -J -v -T -o $(ISO) centos
309         isohybrid $(ISO)
310         @printf "\n\nISO is built at $(ISO)\n\n"
311
312 ###################
313 #  python3-jinja2  #
314 ###################
315
316 .PHONY: python3-jinja2
317 python3-jinja2: python3-markupsafe python-jinja2-2.8-5.fc24.src.rpm
318         curl -O http://ftp.linux.ncsu.edu/pub/fedora/linux//development/24/Everything/source/tree/Packages/p/python-jinja2-2.8-5.fc24.src.rpm
319         rpm2cpio python-jinja2-2.8-5.fc24.src.rpm | cpio -idmv
320         sed -i 's/python3-devel/python34-devel/' python-jinja2.spec
321         sed -i 's/python3-setuptools/python34-setuptools/' python-jinja2.spec
322         sed -i 's/python3-pytest/python34-pytest/' python-jinja2.spec
323         sed -i 's/python3-markupsafe/python34-markupsafe/' python-jinja2.spec
324         rpmbuild -ba python-jinja2.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "with_python3 1"
325
326 .PHONY: python3-jinja2-clean
327 python3-jinja2-clean:
328         rm -f python-jinja2-2.8-5.fc24.src.rpm
329         rm -f python-jinja2.spec
330         rm -f Jinja2-2.8.tar.gz
331
332 ########################
333 #  python3-markupsafe  #
334 ########################
335
336 .PHONY: python3-markupsafe
337 python3-markupsafe: python-markupsafe-0.23-9.fc24.src.rpm
338         curl -O http://ftp.linux.ncsu.edu/pub/fedora/linux//development/24/Everything/source/tree/Packages/p/python-markupsafe-0.23-9.fc24.src.rpm
339         rpm2cpio python-markupsafe-0.23-9.fc24.src.rpm | cpio -idmv
340         sed -i 's/python3-devel/python34-devel/' python-markupsafe.spec
341         sed -i 's/python3-setuptools/python34-setuptools/' python-markupsafe.spec
342         sed -i 's/python3-pytest/python34-pytest/' python-markupsafe.spec
343         sed -i 's/python3-markupsafe/python34-markupsafe/' python-markupsafe.spec
344         rpmbuild -ba python-markupsafe.spec -D '_topdir %(echo `pwd`)' -D '_builddir %(echo `pwd`)' -D '_sourcedir %(echo `pwd`)' -D '_rpmdir %(echo `pwd`)' -D '_specdir %(echo `pwd`)' -D '_srcrpmdir %(echo `pwd`)' -D "with_python3 1"
345
346 .PHONY: python3-markupsafe-clean
347 python3-markupsafe-clean:
348         rm -f python-markupsafe-0.23-9.fc24.src.rpm
349         rm -f python-markupsafe.spec
350         rm -f MarkupSafe-0.23.tar.gz