altos/test: Adjust CRC error rate after FEC fix
[fw/altos] / ao-tools / lib / ao-ms5607-convert.c
1 /*
2  * Copyright © 2012 Keith Packard <keithp@keithp.com>
3  *
4  * This program is free software; you can redistribute it and/or modify
5  * it under the terms of the GNU General Public License as published by
6  * the Free Software Foundation; either version 2 of the License, or
7  * (at your option) any later version.
8  *
9  * This program is distributed in the hope that it will be useful, but
10  * WITHOUT ANY WARRANTY; without even the implied warranty of
11  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
12  * General Public License for more details.
13  *
14  * You should have received a copy of the GNU General Public License along
15  * with this program; if not, write to the Free Software Foundation, Inc.,
16  * 59 Temple Place, Suite 330, Boston, MA 02111-1307 USA.
17  */
18
19 #include <ao-ms5607.h>
20
21 void
22 ao_ms5607_convert(struct ao_ms5607_sample *sample, struct ao_ms5607_value *value,
23                   struct ao_ms5607_prom *prom, bool is_ms5611)
24 {
25         int32_t dT;
26         int32_t TEMP;
27         int64_t OFF;
28         int64_t SENS;
29
30         dT = sample->temp - ((int32_t) prom->tref << 8);
31
32         TEMP = 2000 + (((int64_t) dT * prom->tempsens) >> 23);
33
34         if (is_ms5611) {
35                 OFF = ((int64_t) prom->off << 16) + (((int64_t) prom->tco * dT) >> 7);
36                 SENS = ((int64_t) prom->sens << 15) + (((int64_t) prom->tcs * dT) >> 8);
37         } else {
38                 OFF = ((int64_t) prom->off << 17) + (((int64_t) prom->tco * dT) >> 6);
39                 SENS = ((int64_t) prom->sens << 16) + (((int64_t) prom->tcs * dT) >> 7);
40         }
41
42         if (TEMP < 2000) {
43                 int32_t T2 = ((int64_t) dT * (int64_t) dT) >> 31;
44                 int32_t TEMPM = TEMP - 2000;
45                 int64_t OFF2 = (61 * (int64_t) TEMPM * (int64_t) TEMPM) >> 4;
46                 int64_t SENS2 = 2 * (int64_t) TEMPM * (int64_t) TEMPM;
47                 if (TEMP < -1500) {
48                         int32_t TEMPP = TEMP + 1500;
49                         /* You'd think this would need a 64-bit int, but
50                          * that would imply a temperature below -327.67°C...
51                          */
52                         int32_t TEMPP2 = TEMPP * TEMPP;
53                         OFF2 = OFF2 + (int64_t) 15 * TEMPP2;
54                         SENS2 = SENS2 + (int64_t) 8 * TEMPP2;
55                 }
56                 TEMP -= T2;
57                 OFF -= OFF2;
58                 SENS -= SENS2;
59         }
60
61         value->pres = ((((int64_t) sample->pres * SENS) >> 21) - OFF) >> 15;
62         value->temp = TEMP;
63 }