These changes are the raw update to linux-4.4.6-rt14. Kernel sources
[kvmfornfv.git] / kernel / drivers / crypto / qat / qat_common / adf_accel_engine.c
1 /*
2   This file is provided under a dual BSD/GPLv2 license.  When using or
3   redistributing this file, you may do so under either license.
4
5   GPL LICENSE SUMMARY
6   Copyright(c) 2014 Intel Corporation.
7   This program is free software; you can redistribute it and/or modify
8   it under the terms of version 2 of the GNU General Public License as
9   published by the Free Software Foundation.
10
11   This program is distributed in the hope that it will be useful, but
12   WITHOUT ANY WARRANTY; without even the implied warranty of
13   MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
14   General Public License for more details.
15
16   Contact Information:
17   qat-linux@intel.com
18
19   BSD LICENSE
20   Copyright(c) 2014 Intel Corporation.
21   Redistribution and use in source and binary forms, with or without
22   modification, are permitted provided that the following conditions
23   are met:
24
25     * Redistributions of source code must retain the above copyright
26       notice, this list of conditions and the following disclaimer.
27     * Redistributions in binary form must reproduce the above copyright
28       notice, this list of conditions and the following disclaimer in
29       the documentation and/or other materials provided with the
30       distribution.
31     * Neither the name of Intel Corporation nor the names of its
32       contributors may be used to endorse or promote products derived
33       from this software without specific prior written permission.
34
35   THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
36   "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
37   LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR
38   A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE COPYRIGHT
39   OWNER OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
40   SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
41   LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF USE,
42   DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED AND ON ANY
43   THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT LIABILITY, OR TORT
44   (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY OUT OF THE USE
45   OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH DAMAGE.
46 */
47 #include <linux/firmware.h>
48 #include <linux/pci.h>
49 #include "adf_cfg.h"
50 #include "adf_accel_devices.h"
51 #include "adf_common_drv.h"
52 #include "icp_qat_uclo.h"
53
54 int adf_ae_fw_load(struct adf_accel_dev *accel_dev)
55 {
56         struct adf_fw_loader_data *loader_data = accel_dev->fw_loader;
57         struct adf_hw_device_data *hw_device = accel_dev->hw_device;
58         void *uof_addr, *mmp_addr;
59         u32 uof_size, mmp_size;
60
61         if (!hw_device->fw_name)
62                 return 0;
63
64         if (request_firmware(&loader_data->mmp_fw, hw_device->fw_mmp_name,
65                              &accel_dev->accel_pci_dev.pci_dev->dev)) {
66                 dev_err(&GET_DEV(accel_dev), "Failed to load MMP firmware %s\n",
67                         hw_device->fw_mmp_name);
68                 return -EFAULT;
69         }
70         if (request_firmware(&loader_data->uof_fw, hw_device->fw_name,
71                              &accel_dev->accel_pci_dev.pci_dev->dev)) {
72                 dev_err(&GET_DEV(accel_dev), "Failed to load UOF firmware %s\n",
73                         hw_device->fw_name);
74                 goto out_err;
75         }
76
77         uof_size = loader_data->uof_fw->size;
78         uof_addr = (void *)loader_data->uof_fw->data;
79         mmp_size = loader_data->mmp_fw->size;
80         mmp_addr = (void *)loader_data->mmp_fw->data;
81         qat_uclo_wr_mimage(loader_data->fw_loader, mmp_addr, mmp_size);
82         if (qat_uclo_map_uof_obj(loader_data->fw_loader, uof_addr, uof_size)) {
83                 dev_err(&GET_DEV(accel_dev), "Failed to map UOF\n");
84                 goto out_err;
85         }
86         if (qat_uclo_wr_all_uimage(loader_data->fw_loader)) {
87                 dev_err(&GET_DEV(accel_dev), "Failed to load UOF\n");
88                 goto out_err;
89         }
90         return 0;
91
92 out_err:
93         adf_ae_fw_release(accel_dev);
94         return -EFAULT;
95 }
96
97 void adf_ae_fw_release(struct adf_accel_dev *accel_dev)
98 {
99         struct adf_fw_loader_data *loader_data = accel_dev->fw_loader;
100         struct adf_hw_device_data *hw_device = accel_dev->hw_device;
101
102         if (!hw_device->fw_name)
103                 return;
104
105         qat_uclo_del_uof_obj(loader_data->fw_loader);
106         qat_hal_deinit(loader_data->fw_loader);
107         release_firmware(loader_data->uof_fw);
108         release_firmware(loader_data->mmp_fw);
109         loader_data->uof_fw = NULL;
110         loader_data->mmp_fw = NULL;
111         loader_data->fw_loader = NULL;
112 }
113
114 int adf_ae_start(struct adf_accel_dev *accel_dev)
115 {
116         struct adf_fw_loader_data *loader_data = accel_dev->fw_loader;
117         struct adf_hw_device_data *hw_data = accel_dev->hw_device;
118         uint32_t ae_ctr, ae, max_aes = GET_MAX_ACCELENGINES(accel_dev);
119
120         if (!hw_data->fw_name)
121                 return 0;
122
123         for (ae = 0, ae_ctr = 0; ae < max_aes; ae++) {
124                 if (hw_data->ae_mask & (1 << ae)) {
125                         qat_hal_start(loader_data->fw_loader, ae, 0xFF);
126                         ae_ctr++;
127                 }
128         }
129         dev_info(&GET_DEV(accel_dev),
130                  "qat_dev%d started %d acceleration engines\n",
131                  accel_dev->accel_id, ae_ctr);
132         return 0;
133 }
134
135 int adf_ae_stop(struct adf_accel_dev *accel_dev)
136 {
137         struct adf_fw_loader_data *loader_data = accel_dev->fw_loader;
138         struct adf_hw_device_data *hw_data = accel_dev->hw_device;
139         uint32_t ae_ctr, ae, max_aes = GET_MAX_ACCELENGINES(accel_dev);
140
141         if (!hw_data->fw_name)
142                 return 0;
143
144         for (ae = 0, ae_ctr = 0; ae < max_aes; ae++) {
145                 if (hw_data->ae_mask & (1 << ae)) {
146                         qat_hal_stop(loader_data->fw_loader, ae, 0xFF);
147                         ae_ctr++;
148                 }
149         }
150         dev_info(&GET_DEV(accel_dev),
151                  "qat_dev%d stopped %d acceleration engines\n",
152                  accel_dev->accel_id, ae_ctr);
153         return 0;
154 }
155
156 static int adf_ae_reset(struct adf_accel_dev *accel_dev, int ae)
157 {
158         struct adf_fw_loader_data *loader_data = accel_dev->fw_loader;
159
160         qat_hal_reset(loader_data->fw_loader);
161         if (qat_hal_clr_reset(loader_data->fw_loader))
162                 return -EFAULT;
163
164         return 0;
165 }
166
167 int adf_ae_init(struct adf_accel_dev *accel_dev)
168 {
169         struct adf_fw_loader_data *loader_data;
170         struct adf_hw_device_data *hw_device = accel_dev->hw_device;
171
172         if (!hw_device->fw_name)
173                 return 0;
174
175         loader_data = kzalloc(sizeof(*loader_data), GFP_KERNEL);
176         if (!loader_data)
177                 return -ENOMEM;
178
179         accel_dev->fw_loader = loader_data;
180         if (qat_hal_init(accel_dev)) {
181                 dev_err(&GET_DEV(accel_dev), "Failed to init the AEs\n");
182                 kfree(loader_data);
183                 return -EFAULT;
184         }
185         if (adf_ae_reset(accel_dev, 0)) {
186                 dev_err(&GET_DEV(accel_dev), "Failed to reset the AEs\n");
187                 qat_hal_deinit(loader_data->fw_loader);
188                 kfree(loader_data);
189                 return -EFAULT;
190         }
191         return 0;
192 }
193
194 int adf_ae_shutdown(struct adf_accel_dev *accel_dev)
195 {
196         struct adf_fw_loader_data *loader_data = accel_dev->fw_loader;
197         struct adf_hw_device_data *hw_device = accel_dev->hw_device;
198
199         if (!hw_device->fw_name)
200                 return 0;
201
202         qat_hal_deinit(loader_data->fw_loader);
203         kfree(accel_dev->fw_loader);
204         accel_dev->fw_loader = NULL;
205         return 0;
206 }