# Diff of /branches/doubleplusgood/dudley/src/Assemble_PDE_Single2_1D.cpp

revision 3184 by jfenwick, Wed Sep 15 00:23:42 2010 UTC revision 3187 by jfenwick, Thu Sep 16 02:57:17 2010 UTC
# Line 11  Line 11
11  *  *
12  *******************************************************/  *******************************************************/
13

14  /**************************************************************/  /**************************************************************/
15
16  /*    assembles the system of numEq PDEs into the stiffness matrix S right hand side F  */  /*    assembles the system of numEq PDEs into the stiffness matrix S right hand side F  */
17  /*    the shape functions for test and solution must be identical */  /*    the shape functions for test and solution must be identical */
18

19  /*      -(A_{i,j} u_,j)_i-(B_{i} u)_i+C_{j} u_,j-D u_m  and -(X_,i)_i + Y */  /*      -(A_{i,j} u_,j)_i-(B_{i} u)_i+C_{j} u_,j-D u_m  and -(X_,i)_i + Y */
20
21  /*    in a 1D domain. The shape functions for test and solution must be identical  */  /*    in a 1D domain. The shape functions for test and solution must be identical  */
# Line 32  Line 30
30  /*      X = 1  */  /*      X = 1  */
31  /*      Y = scalar   */  /*      Y = scalar   */
32

33  /**************************************************************/  /**************************************************************/
34

35  #include "Assemble.h"  #include "Assemble.h"
36  #include "Util.h"  #include "Util.h"
37  #ifdef _OPENMP  #ifdef _OPENMP
38  #include <omp.h>  #include <omp.h>
39  #endif  #endif
40

41  /**************************************************************/  /**************************************************************/
42
43  void  Dudley_Assemble_PDE_Single2_1D(Assemble_Parameters p, Dudley_ElementFile* elements,  void Dudley_Assemble_PDE_Single2_1D(Assemble_Parameters p, Dudley_ElementFile * elements,
44                                       Paso_SystemMatrix* Mat, escriptDataC* F,                      Paso_SystemMatrix * Mat, escriptDataC * F,
45                                       escriptDataC* A, escriptDataC* B, escriptDataC* C, escriptDataC* D, escriptDataC* X, escriptDataC* Y) {                      escriptDataC * A, escriptDataC * B, escriptDataC * C, escriptDataC * D,
46                        escriptDataC * X, escriptDataC * Y)
47    {
48
49      #define DIM 1  #define DIM 1
50      index_t color;      index_t color;
51      dim_t e;      dim_t e;
52      __const double *A_p, *B_p, *C_p, *D_p, *X_p, *Y_p, *A_q, *B_q, *C_q, *D_q, *X_q, *Y_q;      __const double *A_p, *B_p, *C_p, *D_p, *X_p, *Y_p, *A_q, *B_q, *C_q, *D_q, *X_q, *Y_q;
53      double *EM_S, *EM_F, *DSDX;      double *EM_S, *EM_F, *DSDX;
54      index_t *row_index;      index_t *row_index;
55      register dim_t q, s,r;      register dim_t q, s, r;
56      register double rtmp;      register double rtmp;
58
59      bool_t extendedA=isExpanded(A);      bool_t extendedA = isExpanded(A);
60      bool_t extendedB=isExpanded(B);      bool_t extendedB = isExpanded(B);
61      bool_t extendedC=isExpanded(C);      bool_t extendedC = isExpanded(C);
62      bool_t extendedD=isExpanded(D);      bool_t extendedD = isExpanded(D);
63      bool_t extendedX=isExpanded(X);      bool_t extendedX = isExpanded(X);
64      bool_t extendedY=isExpanded(Y);      bool_t extendedY = isExpanded(Y);
65      double *F_p=(requireWrite(F), getSampleDataRW(F,0));    /* use comma, to get around the mixed code and declarations thing */      double *F_p = (requireWrite(F), getSampleDataRW(F, 0)); /* use comma, to get around the mixed code and declarations thing */
66      double *S=p.row_jac->BasisFunctions->S;      double *S = p.row_jac->BasisFunctions->S;
67      dim_t len_EM_S=p.row_numShapesTotal*p.col_numShapesTotal;      dim_t len_EM_S = p.row_numShapesTotal * p.col_numShapesTotal;
68      dim_t len_EM_F=p.row_numShapesTotal;      dim_t len_EM_F = p.row_numShapesTotal;
69
70      #pragma omp parallel private(color, EM_S, EM_F, Vol, DSDX, A_p, B_p, C_p, D_p, X_p, Y_p, A_q, B_q, C_q, D_q, X_q, Y_q, row_index, q, s,r,rtmp,add_EM_F, add_EM_S)  #pragma omp parallel private(color, EM_S, EM_F, Vol, DSDX, A_p, B_p, C_p, D_p, X_p, Y_p, A_q, B_q, C_q, D_q, X_q, Y_q, row_index, q, s,r,rtmp,add_EM_F, add_EM_S)
71      {      {
75
76        if (!Dudley_checkPtr(EM_S) && !Dudley_checkPtr(EM_F) && !Dudley_checkPtr(row_index))
77         if (!Dudley_checkPtr(EM_S) && !Dudley_checkPtr(EM_F) && !Dudley_checkPtr(row_index) ) {      {
78
79            for (color=elements->minColor;color<=elements->maxColor;color++) {          for (color = elements->minColor; color <= elements->maxColor; color++)
80               /*  open loop over all elements: */          {
81               #pragma omp for private(e) schedule(static)          /*  open loop over all elements: */
82               for(e=0;e<elements->numElements;e++){  #pragma omp for private(e) schedule(static)
83                  if (elements->Color[e]==color) {          for (e = 0; e < elements->numElements; e++)
84            {
85                    A_p=getSampleDataRO(A,e);              if (elements->Color[e] == color)
86                    C_p=getSampleDataRO(C,e);              {
87                    B_p=getSampleDataRO(B,e);
88                    D_p=getSampleDataRO(D,e);              A_p = getSampleDataRO(A, e);
89                    X_p=getSampleDataRO(X,e);              C_p = getSampleDataRO(C, e);
90                    Y_p=getSampleDataRO(Y,e);              B_p = getSampleDataRO(B, e);
91                D_p = getSampleDataRO(D, e);
92                X_p = getSampleDataRO(X, e);
93                Y_p = getSampleDataRO(Y, e);
94
95            double vol=p.row_jac->absD[e]*p.row_jac->quadweight;              double vol = p.row_jac->absD[e] * p.row_jac->quadweight;
96  //                      Vol=&(p.row_jac->volume[INDEX3(0,0,e, p.numQuadTotal,1)]);  //                      Vol=&(p.row_jac->volume[INDEX3(0,0,e, p.numQuadTotal,1)]);
97                        DSDX=&(p.row_jac->DSDX[INDEX5(0,0,0,0,e, p.row_numShapesTotal,DIM,p.numQuadTotal,1)]);              DSDX = &(p.row_jac->DSDX[INDEX5(0, 0, 0, 0, e, p.row_numShapesTotal, DIM, p.numQuadTotal, 1)]);
98                        for (q=0;q<len_EM_S;++q) EM_S[q]=0;              for (q = 0; q < len_EM_S; ++q)
99                        for (q=0;q<len_EM_F;++q) EM_F[q]=0;                  EM_S[q] = 0;
100                        add_EM_F=FALSE;              for (q = 0; q < len_EM_F; ++q)
101                        add_EM_S=FALSE;                  EM_F[q] = 0;
102                        /**************************************************************/              add_EM_F = FALSE;
103                        /*   process A: */              add_EM_S = FALSE;
104                        /**************************************************************/                /**************************************************************/
105                        if (NULL!=A_p) {              /*   process A: */
107                           if (extendedA) {              if (NULL != A_p)
108                  A_q=&(A_p[INDEX4(0,0,0,0, DIM,DIM,p.numQuadTotal)]);              {
109                              for (s=0;s<p.row_numShapes;s++) {                  add_EM_S = TRUE;
110                                for (r=0;r<p.col_numShapes;r++) {                  if (extendedA)
111                                   rtmp=0;                  {
112                                   for (q=0;q<p.numQuadTotal;q++) {                  A_q = &(A_p[INDEX4(0, 0, 0, 0, DIM, DIM, p.numQuadTotal)]);
113                                      rtmp+=vol*DSDX[INDEX3(s,0,q,p.row_numShapesTotal,DIM)]*A_q[INDEX3(0,0,q,DIM,DIM)]*DSDX[INDEX3(r,0,q,p.row_numShapesTotal,DIM)];                  for (s = 0; s < p.row_numShapes; s++)
114                                  }                  {
115                                  EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp;                      for (r = 0; r < p.col_numShapes; r++)
116                                }                      {
117                              }                      rtmp = 0;
118                           } else {                      for (q = 0; q < p.numQuadTotal; q++)
119                              for (s=0;s<p.row_numShapes;s++) {                      {
120                                for (r=0;r<p.col_numShapes;r++) {                          rtmp +=
121                                    rtmp=0;                          vol * DSDX[INDEX3(s, 0, q, p.row_numShapesTotal, DIM)] *
122                                    for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*DSDX[INDEX3(s,0,q,p.row_numShapesTotal,DIM)]*DSDX[INDEX3(r,0,q,p.row_numShapesTotal,DIM)];                          A_q[INDEX3(0, 0, q, DIM, DIM)] *
123                                    EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp*A_p[INDEX2(0,0,DIM)];                          DSDX[INDEX3(r, 0, q, p.row_numShapesTotal, DIM)];
124                                }                      }
125                              }                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] += rtmp;
126                            }                      }
127                        }                  }
128                        /**************************************************************/                  } else
129                        /*   process B: */                  {
130                        /**************************************************************/                  for (s = 0; s < p.row_numShapes; s++)
131                        if (NULL!=B_p) {                  {
132                           add_EM_S=TRUE;                      for (r = 0; r < p.col_numShapes; r++)
133                           if (extendedB) {                      {
134                  B_q=&(B_p[INDEX3(0,0,0, DIM, p.numQuadTotal)]);                      rtmp = 0;
135                              for (s=0;s<p.row_numShapes;s++) {                      for (q = 0; q < p.numQuadTotal; q++)
136                                for (r=0;r<p.col_numShapes;r++) {                          rtmp +=
137                                  rtmp=0;                          vol * DSDX[INDEX3(s, 0, q, p.row_numShapesTotal, DIM)] *
138                                  for (q=0;q<p.numQuadTotal;q++) {                          DSDX[INDEX3(r, 0, q, p.row_numShapesTotal, DIM)];
139                                     rtmp+=vol*DSDX[INDEX3(s,0,q,p.row_numShapesTotal,DIM)]*B_q[INDEX2(0,q,DIM)]*S[INDEX2(r,q,p.row_numShapes)];                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] +=
140                                  }                          rtmp * A_p[INDEX2(0, 0, DIM)];
141                                  EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp;                      }
142                                }                  }
143                              }                  }
144                           } else {              }
145                              for (s=0;s<p.row_numShapes;s++) {                /**************************************************************/
146                                for (r=0;r<p.col_numShapes;r++) {              /*   process B: */
147                                    rtmp=0;                /**************************************************************/
148                                    for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*DSDX[INDEX3(s,0,q,p.row_numShapesTotal,DIM)]*S[INDEX2(r,q,p.row_numShapes)];              if (NULL != B_p)
149                                    EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp*B_p[0];              {
150                                }                  add_EM_S = TRUE;
151                              }                  if (extendedB)
152                           }                  {
153                        }                  B_q = &(B_p[INDEX3(0, 0, 0, DIM, p.numQuadTotal)]);
154                        /**************************************************************/                  for (s = 0; s < p.row_numShapes; s++)
155                        /*   process C: */                  {
156                        /**************************************************************/                      for (r = 0; r < p.col_numShapes; r++)
157                        if (NULL!=C_p) {                      {
158                           add_EM_S=TRUE;                      rtmp = 0;
159                          if (extendedC) {                      for (q = 0; q < p.numQuadTotal; q++)
160                  C_q=&(C_p[INDEX3(0,0,0, DIM, p.numQuadTotal)]);                      {
161                              for (s=0;s<p.row_numShapes;s++) {                          rtmp +=
162                                for (r=0;r<p.col_numShapes;r++) {                          vol * DSDX[INDEX3(s, 0, q, p.row_numShapesTotal, DIM)] *
163                                  rtmp=0;                          B_q[INDEX2(0, q, DIM)] * S[INDEX2(r, q, p.row_numShapes)];
164                                  for (q=0;q<p.numQuadTotal;q++) {                      }
165                                     rtmp+=vol*S[INDEX2(s,q,p.row_numShapes)]*C_q[INDEX2(0,q,DIM)]*DSDX[INDEX3(r,0,q,p.row_numShapesTotal,DIM)];                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] += rtmp;
166                                  }                      }
167                                  EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp;                  }
168                                }                  } else
169                              }                  {
170                          } else {                  for (s = 0; s < p.row_numShapes; s++)
171                              for (s=0;s<p.row_numShapes;s++) {                  {
172                                for (r=0;r<p.col_numShapes;r++) {                      for (r = 0; r < p.col_numShapes; r++)
173                                   rtmp=0;                      {
174                                   for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*S[INDEX2(s,q,p.row_numShapes)]*DSDX[INDEX3(r,0,q,p.row_numShapesTotal,DIM)];                      rtmp = 0;
175                                   EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp*C_p[0];                      for (q = 0; q < p.numQuadTotal; q++)
176                                }                          rtmp +=
177                              }                          vol * DSDX[INDEX3(s, 0, q, p.row_numShapesTotal, DIM)] *
178                          }                          S[INDEX2(r, q, p.row_numShapes)];
179                        }                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] +=
180                        /************************************************************* */                          rtmp * B_p[0];
181                        /* process D */                      }
182                        /**************************************************************/                  }
183                        if (NULL!=D_p) {                  }
185                          if (extendedD) {                /**************************************************************/
186                  D_q=&(D_p[INDEX2(0,0, p.numQuadTotal)]);              /*   process C: */
187                              for (s=0;s<p.row_numShapes;s++) {                /**************************************************************/
188                                for (r=0;r<p.col_numShapes;r++) {              if (NULL != C_p)
189                                   rtmp=0;              {
190                                   for (q=0;q<p.numQuadTotal;q++) {                  add_EM_S = TRUE;
191                                      rtmp+=vol*S[INDEX2(s,q,p.row_numShapes)]*D_q[q]*S[INDEX2(r,q,p.row_numShapes)];                  if (extendedC)
192                                  }                  {
193                                  EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp;                  C_q = &(C_p[INDEX3(0, 0, 0, DIM, p.numQuadTotal)]);
194                                }                  for (s = 0; s < p.row_numShapes; s++)
195                              }                  {
196                          } else {                      for (r = 0; r < p.col_numShapes; r++)
197                              for (s=0;s<p.row_numShapes;s++) {                      {
198                                for (r=0;r<p.col_numShapes;r++) {                      rtmp = 0;
199                                    rtmp=0;                      for (q = 0; q < p.numQuadTotal; q++)
200                                    for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*S[INDEX2(s,q,p.row_numShapes)]*S[INDEX2(r,q,p.row_numShapes)];                      {
201                                    EM_S[INDEX4(0,0,s,r,p.numEqu,p.numComp,p.row_numShapesTotal)]+=rtmp*D_p[0];                          rtmp +=
202                                }                          vol * S[INDEX2(s, q, p.row_numShapes)] * C_q[INDEX2(0, q, DIM)] *
203                              }                          DSDX[INDEX3(r, 0, q, p.row_numShapesTotal, DIM)];
204                          }                      }
205                        }                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] += rtmp;
206                        /**************************************************************/                      }
207                        /*   process X: */                  }
208                        /**************************************************************/                  } else
209                        if (NULL!=X_p) {                  {
210                          add_EM_F=TRUE;                  for (s = 0; s < p.row_numShapes; s++)
211                          if (extendedX) {                  {
212                     X_q=&(X_p[INDEX3(0,0,0, DIM,p.numQuadTotal)]);                      for (r = 0; r < p.col_numShapes; r++)
213                             for (s=0;s<p.row_numShapes;s++) {                      {
214                               rtmp=0;                      rtmp = 0;
215                               for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*DSDX[INDEX3(s,0,q,p.row_numShapesTotal,DIM)]*X_q[INDEX2(0,q,DIM)];                      for (q = 0; q < p.numQuadTotal; q++)
216                               EM_F[INDEX2(0,s,p.numEqu)]+=rtmp;                          rtmp +=
217                             }                          vol * S[INDEX2(s, q, p.row_numShapes)] *
218                          } else {                          DSDX[INDEX3(r, 0, q, p.row_numShapesTotal, DIM)];
219                             for (s=0;s<p.row_numShapes;s++) {                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] +=
220                               rtmp=0;                          rtmp * C_p[0];
221                               for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*DSDX[INDEX3(s,0,q, p.row_numShapesTotal,DIM)];                      }
222                               EM_F[INDEX2(0,s,p.numEqu)]+=rtmp*X_p[0];                  }
223                             }                  }
224                          }              }
225                       }                /************************************************************* */
226                       /**************************************************************/              /* process D */
227                       /*   process Y: */                /**************************************************************/
228                       /**************************************************************/              if (NULL != D_p)
229                        if (NULL!=Y_p) {              {
231                          if (extendedY) {                  if (extendedD)
232                 Y_q=&(Y_p[INDEX2(0,0, p.numQuadTotal)]);                  {
233                             for (s=0;s<p.row_numShapes;s++) {                  D_q = &(D_p[INDEX2(0, 0, p.numQuadTotal)]);
234                                rtmp=0;                  for (s = 0; s < p.row_numShapes; s++)
235                                for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*S[INDEX2(s,q,p.row_numShapes)]*Y_q[q];                  {
236                                EM_F[INDEX2(0,s,p.numEqu)]+=rtmp;                      for (r = 0; r < p.col_numShapes; r++)
237                             }                      {
238                           } else {                      rtmp = 0;
239                             for (s=0;s<p.row_numShapes;s++) {                      for (q = 0; q < p.numQuadTotal; q++)
240                                 rtmp=0;                      {
241                                 for (q=0;q<p.numQuadTotal;q++) rtmp+=vol*S[INDEX2(s,q,p.row_numShapes)];                          rtmp +=
242                                 EM_F[INDEX2(0,s,p.numEqu)]+=rtmp*Y_p[0];                          vol * S[INDEX2(s, q, p.row_numShapes)] * D_q[q] *
243                             }                          S[INDEX2(r, q, p.row_numShapes)];
244                           }                      }
245                         }                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] += rtmp;
246                         /***********************************************************************************************/                      }
247                         /* add the element matrices onto the matrix and right hand side                                */                  }
248                         /***********************************************************************************************/                  } else
249                         for (q=0;q<p.row_numShapesTotal;q++) row_index[q]=p.row_DOF[elements->Nodes[INDEX2(q,e,p.NN)]];                  {
250                                  for (s = 0; s < p.row_numShapes; s++)
252                         if (add_EM_S) Dudley_Assemble_addToSystemMatrix(Mat,p.row_numShapesTotal,row_index,p.numEqu,p.col_numShapesTotal,row_index,p.numComp,EM_S);                      for (r = 0; r < p.col_numShapes; r++)
253                          {
254                  } /* end color check */                      rtmp = 0;
255               } /* end element loop */                      for (q = 0; q < p.numQuadTotal; q++)
256           } /* end color loop */                          rtmp +=
257                                      vol * S[INDEX2(s, q, p.row_numShapes)] *
258           THREAD_MEMFREE(EM_S);      /* these FREEs appear to be inside the if because if any of the allocs */                          S[INDEX2(r, q, p.row_numShapes)];
259           THREAD_MEMFREE(EM_F);      /* failed it means an out of memory (which is not recoverable anyway) */                      EM_S[INDEX4(0, 0, s, r, p.numEqu, p.numComp, p.row_numShapesTotal)] +=
260           THREAD_MEMFREE(row_index);                          rtmp * D_p[0];
261                        }
262                    }
263                    }
264                }
265                  /**************************************************************/
266                /*   process X: */
267                  /**************************************************************/
268                if (NULL != X_p)
269                {
270                    add_EM_F = TRUE;
271                    if (extendedX)
272                    {
273                    X_q = &(X_p[INDEX3(0, 0, 0, DIM, p.numQuadTotal)]);
274                    for (s = 0; s < p.row_numShapes; s++)
275                    {
276                        rtmp = 0;
277                        for (q = 0; q < p.numQuadTotal; q++)
278                        rtmp +=
279                            vol * DSDX[INDEX3(s, 0, q, p.row_numShapesTotal, DIM)] *
280                            X_q[INDEX2(0, q, DIM)];
281                        EM_F[INDEX2(0, s, p.numEqu)] += rtmp;
282                    }
283                    } else
284                    {
285                    for (s = 0; s < p.row_numShapes; s++)
286                    {
287                        rtmp = 0;
288                        for (q = 0; q < p.numQuadTotal; q++)
289                        rtmp += vol * DSDX[INDEX3(s, 0, q, p.row_numShapesTotal, DIM)];
290                        EM_F[INDEX2(0, s, p.numEqu)] += rtmp * X_p[0];
291                    }
292                    }
293                }
294                 /**************************************************************/
295                /*   process Y: */
296                 /**************************************************************/
297                if (NULL != Y_p)
298                {
299                    add_EM_F = TRUE;
300                    if (extendedY)
301                    {
302                    Y_q = &(Y_p[INDEX2(0, 0, p.numQuadTotal)]);
303                    for (s = 0; s < p.row_numShapes; s++)
304                    {
305                        rtmp = 0;
306                        for (q = 0; q < p.numQuadTotal; q++)
307                        rtmp += vol * S[INDEX2(s, q, p.row_numShapes)] * Y_q[q];
308                        EM_F[INDEX2(0, s, p.numEqu)] += rtmp;
309                    }
310                    } else
311                    {
312                    for (s = 0; s < p.row_numShapes; s++)
313                    {
314                        rtmp = 0;
315                        for (q = 0; q < p.numQuadTotal; q++)
316                        rtmp += vol * S[INDEX2(s, q, p.row_numShapes)];
317                        EM_F[INDEX2(0, s, p.numEqu)] += rtmp * Y_p[0];
318                    }
319                    }
320                }
321                   /***********************************************************************************************/
322                /* add the element matrices onto the matrix and right hand side                                */
323                   /***********************************************************************************************/
324                for (q = 0; q < p.row_numShapesTotal; q++)
325                    row_index[q] = p.row_DOF[elements->Nodes[INDEX2(q, e, p.NN)]];
326
328                    Dudley_Util_AddScatter(p.row_numShapesTotal, row_index, p.numEqu, EM_F, F_p,
329                               p.row_DOF_UpperBound);
331                    Dudley_Assemble_addToSystemMatrix(Mat, p.row_numShapesTotal, row_index, p.numEqu,
332                                      p.col_numShapesTotal, row_index, p.numComp, EM_S);
333
334                }       /* end color check */
335            }       /* end element loop */
336            }           /* end color loop */
337
338            THREAD_MEMFREE(EM_S);   /* these FREEs appear to be inside the if because if any of the allocs */
339            THREAD_MEMFREE(EM_F);   /* failed it means an out of memory (which is not recoverable anyway) */