153022affSStefano Zampini static char help[] = "Tests MATH2OPUS\n\n"; 2c4fb69feSStefano Zampini 3c4fb69feSStefano Zampini #include <petscmat.h> 4c4fb69feSStefano Zampini #include <petscsf.h> 5c4fb69feSStefano Zampini 69371c9d4SSatish Balay static PetscScalar GenEntry_Symm(PetscInt sdim, PetscReal x[], PetscReal y[], void *ctx) { 7c4fb69feSStefano Zampini PetscInt d; 8c4fb69feSStefano Zampini PetscReal clength = sdim == 3 ? 0.2 : 0.1; 9c4fb69feSStefano Zampini PetscReal dist, diff = 0.0; 10c4fb69feSStefano Zampini 11c4fb69feSStefano Zampini for (d = 0; d < sdim; d++) { diff += (x[d] - y[d]) * (x[d] - y[d]); } 12c4fb69feSStefano Zampini dist = PetscSqrtReal(diff); 13c4fb69feSStefano Zampini return PetscExpReal(-dist / clength); 14c4fb69feSStefano Zampini } 15c4fb69feSStefano Zampini 169371c9d4SSatish Balay static PetscScalar GenEntry_Unsymm(PetscInt sdim, PetscReal x[], PetscReal y[], void *ctx) { 17c4fb69feSStefano Zampini PetscInt d; 18c4fb69feSStefano Zampini PetscReal clength = sdim == 3 ? 0.2 : 0.1; 19c4fb69feSStefano Zampini PetscReal dist, diff = 0.0, nx = 0.0, ny = 0.0; 20c4fb69feSStefano Zampini 21c4fb69feSStefano Zampini for (d = 0; d < sdim; d++) { nx += x[d] * x[d]; } 22c4fb69feSStefano Zampini for (d = 0; d < sdim; d++) { ny += y[d] * y[d]; } 23c4fb69feSStefano Zampini for (d = 0; d < sdim; d++) { diff += (x[d] - y[d]) * (x[d] - y[d]); } 24c4fb69feSStefano Zampini dist = PetscSqrtReal(diff); 25c4fb69feSStefano Zampini return nx > ny ? PetscExpReal(-dist / clength) : PetscExpReal(-dist / clength) + 1.; 26c4fb69feSStefano Zampini } 27c4fb69feSStefano Zampini 289371c9d4SSatish Balay int main(int argc, char **argv) { 29c4fb69feSStefano Zampini Mat A, B, C, D; 30c4fb69feSStefano Zampini Vec v, x, y, Ax, Ay, Bx, By; 31c4fb69feSStefano Zampini PetscRandom r; 32c4fb69feSStefano Zampini PetscLayout map; 33c4fb69feSStefano Zampini PetscScalar *Adata = NULL, *Cdata = NULL, scale = 1.0; 34c4fb69feSStefano Zampini PetscReal *coords, nA, nD, nB, err, nX, norms[3]; 35300d917bSStefano Zampini PetscInt N, n = 64, dim = 1, i, j, nrhs = 11, lda = 0, ldc = 0, ldu = 0, nlr = 7, nt, ntrials = 2; 36c4fb69feSStefano Zampini PetscMPIInt size, rank; 37c4fb69feSStefano Zampini PetscBool testlayout = PETSC_FALSE, flg, symm = PETSC_FALSE, Asymm = PETSC_TRUE, kernel = PETSC_TRUE; 3853022affSStefano Zampini PetscBool checkexpl = PETSC_FALSE, agpu = PETSC_FALSE, bgpu = PETSC_FALSE, cgpu = PETSC_FALSE, flgglob; 39300d917bSStefano Zampini PetscBool testtrans, testnorm, randommat = PETSC_TRUE, testorthog, testcompress, testhlru; 40c4fb69feSStefano Zampini void (*approxnormfunc)(void); 41c4fb69feSStefano Zampini void (*Anormfunc)(void); 42c4fb69feSStefano Zampini 4353022affSStefano Zampini #if defined(PETSC_HAVE_MPI_INIT_THREAD) 44c4fb69feSStefano Zampini PETSC_MPI_THREAD_REQUIRED = MPI_THREAD_MULTIPLE; 4553022affSStefano Zampini #endif 46327415f7SBarry Smith PetscFunctionBeginUser; 479566063dSJacob Faibussowitsch PetscCall(PetscInitialize(&argc, &argv, (char *)0, help)); 489566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-ng", &N, &flgglob)); 499566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-n", &n, NULL)); 509566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-nrhs", &nrhs, NULL)); 519566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-dim", &dim, NULL)); 529566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-lda", &lda, NULL)); 539566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-ldc", &ldc, NULL)); 549566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-nlr", &nlr, NULL)); 559566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-ldu", &ldu, NULL)); 569566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetInt(NULL, NULL, "-matmattrials", &ntrials, NULL)); 579566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-randommat", &randommat, NULL)); 589566063dSJacob Faibussowitsch if (!flgglob) PetscCall(PetscOptionsGetBool(NULL, NULL, "-testlayout", &testlayout, NULL)); 599566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-Asymm", &Asymm, NULL)); 609566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-symm", &symm, NULL)); 619566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-kernel", &kernel, NULL)); 629566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-checkexpl", &checkexpl, NULL)); 639566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-agpu", &agpu, NULL)); 649566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-bgpu", &bgpu, NULL)); 659566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetBool(NULL, NULL, "-cgpu", &cgpu, NULL)); 669566063dSJacob Faibussowitsch PetscCall(PetscOptionsGetScalar(NULL, NULL, "-scale", &scale, NULL)); 67c4fb69feSStefano Zampini if (!Asymm) symm = PETSC_FALSE; 68c4fb69feSStefano Zampini 699566063dSJacob Faibussowitsch PetscCallMPI(MPI_Comm_size(PETSC_COMM_WORLD, &size)); 70300d917bSStefano Zampini 71300d917bSStefano Zampini /* Disable tests for unimplemented variants */ 72c4fb69feSStefano Zampini testtrans = (PetscBool)(size == 1 || symm); 73c4fb69feSStefano Zampini testnorm = (PetscBool)(size == 1 || symm); 7453022affSStefano Zampini testorthog = (PetscBool)(size == 1 || symm); 7553022affSStefano Zampini testcompress = (PetscBool)(size == 1 || symm); 76300d917bSStefano Zampini testhlru = (PetscBool)(size == 1); 77c4fb69feSStefano Zampini 789566063dSJacob Faibussowitsch PetscCallMPI(MPI_Comm_rank(PETSC_COMM_WORLD, &rank)); 799566063dSJacob Faibussowitsch PetscCall(PetscLayoutCreate(PETSC_COMM_WORLD, &map)); 80c4fb69feSStefano Zampini if (testlayout) { 81c4fb69feSStefano Zampini if (rank % 2) n = PetscMax(2 * n - 5 * rank, 0); 82c4fb69feSStefano Zampini else n = 2 * n + rank; 83c4fb69feSStefano Zampini } 8453022affSStefano Zampini if (!flgglob) { 859566063dSJacob Faibussowitsch PetscCall(PetscLayoutSetLocalSize(map, n)); 869566063dSJacob Faibussowitsch PetscCall(PetscLayoutSetUp(map)); 879566063dSJacob Faibussowitsch PetscCall(PetscLayoutGetSize(map, &N)); 8853022affSStefano Zampini } else { 899566063dSJacob Faibussowitsch PetscCall(PetscLayoutSetSize(map, N)); 909566063dSJacob Faibussowitsch PetscCall(PetscLayoutSetUp(map)); 919566063dSJacob Faibussowitsch PetscCall(PetscLayoutGetLocalSize(map, &n)); 9253022affSStefano Zampini } 939566063dSJacob Faibussowitsch PetscCall(PetscLayoutDestroy(&map)); 94c4fb69feSStefano Zampini 95*48a46eb9SPierre Jolivet if (lda) PetscCall(PetscMalloc1(N * (n + lda), &Adata)); 969566063dSJacob Faibussowitsch PetscCall(MatCreateDense(PETSC_COMM_WORLD, n, n, N, N, Adata, &A)); 979566063dSJacob Faibussowitsch PetscCall(MatDenseSetLDA(A, n + lda)); 98c4fb69feSStefano Zampini 9953022affSStefano Zampini /* Create random points; these are replicated in order to populate a dense matrix and to compare sequential and dense runs 10053022affSStefano Zampini The constructor for MATH2OPUS can take as input the distributed coordinates and replicates them internally in case 10153022affSStefano Zampini a kernel construction is requested */ 1029566063dSJacob Faibussowitsch PetscCall(PetscRandomCreate(PETSC_COMM_WORLD, &r)); 1039566063dSJacob Faibussowitsch PetscCall(PetscRandomSetFromOptions(r)); 1049566063dSJacob Faibussowitsch PetscCall(PetscRandomSetSeed(r, 123456)); 1059566063dSJacob Faibussowitsch PetscCall(PetscRandomSeed(r)); 1069566063dSJacob Faibussowitsch PetscCall(PetscMalloc1(N * dim, &coords)); 1079566063dSJacob Faibussowitsch PetscCall(PetscRandomGetValuesReal(r, N * dim, coords)); 1089566063dSJacob Faibussowitsch PetscCall(PetscRandomDestroy(&r)); 10953022affSStefano Zampini 110c4fb69feSStefano Zampini if (kernel || !randommat) { 11153022affSStefano Zampini MatH2OpusKernel k = Asymm ? GenEntry_Symm : GenEntry_Unsymm; 112c4fb69feSStefano Zampini PetscInt ist, ien; 113c4fb69feSStefano Zampini 1149566063dSJacob Faibussowitsch PetscCall(MatGetOwnershipRange(A, &ist, &ien)); 115c4fb69feSStefano Zampini for (i = ist; i < ien; i++) { 116*48a46eb9SPierre Jolivet for (j = 0; j < N; j++) PetscCall(MatSetValue(A, i, j, (*k)(dim, coords + i * dim, coords + j * dim, NULL), INSERT_VALUES)); 117c4fb69feSStefano Zampini } 1189566063dSJacob Faibussowitsch PetscCall(MatAssemblyBegin(A, MAT_FINAL_ASSEMBLY)); 1199566063dSJacob Faibussowitsch PetscCall(MatAssemblyEnd(A, MAT_FINAL_ASSEMBLY)); 120c4fb69feSStefano Zampini if (kernel) { 1219566063dSJacob Faibussowitsch PetscCall(MatCreateH2OpusFromKernel(PETSC_COMM_WORLD, n, n, N, N, dim, coords + ist * dim, PETSC_TRUE, k, NULL, PETSC_DECIDE, PETSC_DECIDE, PETSC_DECIDE, &B)); 122c4fb69feSStefano Zampini } else { 1239566063dSJacob Faibussowitsch PetscCall(MatCreateH2OpusFromMat(A, dim, coords + ist * dim, PETSC_TRUE, PETSC_DECIDE, PETSC_DECIDE, PETSC_DECIDE, PETSC_DECIDE, PETSC_DECIDE, &B)); 124c4fb69feSStefano Zampini } 125c4fb69feSStefano Zampini } else { 12653022affSStefano Zampini PetscInt ist; 12753022affSStefano Zampini 1289566063dSJacob Faibussowitsch PetscCall(MatGetOwnershipRange(A, &ist, NULL)); 1299566063dSJacob Faibussowitsch PetscCall(MatSetRandom(A, NULL)); 130c4fb69feSStefano Zampini if (Asymm) { 1319566063dSJacob Faibussowitsch PetscCall(MatTranspose(A, MAT_INITIAL_MATRIX, &B)); 1329566063dSJacob Faibussowitsch PetscCall(MatAXPY(A, 1.0, B, SAME_NONZERO_PATTERN)); 1339566063dSJacob Faibussowitsch PetscCall(MatDestroy(&B)); 1349566063dSJacob Faibussowitsch PetscCall(MatSetOption(A, MAT_SYMMETRIC, PETSC_TRUE)); 135c4fb69feSStefano Zampini } 1369566063dSJacob Faibussowitsch PetscCall(MatCreateH2OpusFromMat(A, dim, coords + ist * dim, PETSC_TRUE, PETSC_DECIDE, PETSC_DECIDE, PETSC_DECIDE, PETSC_DECIDE, PETSC_DECIDE, &B)); 137c4fb69feSStefano Zampini } 1389566063dSJacob Faibussowitsch PetscCall(PetscFree(coords)); 139*48a46eb9SPierre Jolivet if (agpu) PetscCall(MatConvert(A, MATDENSECUDA, MAT_INPLACE_MATRIX, &A)); 1409566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(A, NULL, "-A_view")); 141c4fb69feSStefano Zampini 1429566063dSJacob Faibussowitsch PetscCall(MatSetOption(B, MAT_SYMMETRIC, symm)); 143c4fb69feSStefano Zampini 144c4fb69feSStefano Zampini /* assemble the H-matrix */ 1459566063dSJacob Faibussowitsch PetscCall(MatBindToCPU(B, (PetscBool)!bgpu)); 1469566063dSJacob Faibussowitsch PetscCall(MatSetFromOptions(B)); 1479566063dSJacob Faibussowitsch PetscCall(MatAssemblyBegin(B, MAT_FINAL_ASSEMBLY)); 1489566063dSJacob Faibussowitsch PetscCall(MatAssemblyEnd(B, MAT_FINAL_ASSEMBLY)); 1499566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(B, NULL, "-B_view")); 150c4fb69feSStefano Zampini 151c4fb69feSStefano Zampini /* Test MatScale */ 1529566063dSJacob Faibussowitsch PetscCall(MatScale(A, scale)); 1539566063dSJacob Faibussowitsch PetscCall(MatScale(B, scale)); 154c4fb69feSStefano Zampini 155c4fb69feSStefano Zampini /* Test MatMult */ 1569566063dSJacob Faibussowitsch PetscCall(MatCreateVecs(A, &Ax, &Ay)); 1579566063dSJacob Faibussowitsch PetscCall(MatCreateVecs(B, &Bx, &By)); 1589566063dSJacob Faibussowitsch PetscCall(VecSetRandom(Ax, NULL)); 1599566063dSJacob Faibussowitsch PetscCall(VecCopy(Ax, Bx)); 1609566063dSJacob Faibussowitsch PetscCall(MatMult(A, Ax, Ay)); 1619566063dSJacob Faibussowitsch PetscCall(MatMult(B, Bx, By)); 1629566063dSJacob Faibussowitsch PetscCall(VecViewFromOptions(Ay, NULL, "-mult_vec_view")); 1639566063dSJacob Faibussowitsch PetscCall(VecViewFromOptions(By, NULL, "-mult_vec_view")); 1649566063dSJacob Faibussowitsch PetscCall(VecNorm(Ay, NORM_INFINITY, &nX)); 1659566063dSJacob Faibussowitsch PetscCall(VecAXPY(Ay, -1.0, By)); 1669566063dSJacob Faibussowitsch PetscCall(VecViewFromOptions(Ay, NULL, "-mult_vec_view")); 1679566063dSJacob Faibussowitsch PetscCall(VecNorm(Ay, NORM_INFINITY, &err)); 1689566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMult err %g\n", err / nX)); 1699566063dSJacob Faibussowitsch PetscCall(VecScale(By, -1.0)); 1709566063dSJacob Faibussowitsch PetscCall(MatMultAdd(B, Bx, By, By)); 1719566063dSJacob Faibussowitsch PetscCall(VecNorm(By, NORM_INFINITY, &err)); 1729566063dSJacob Faibussowitsch PetscCall(VecViewFromOptions(By, NULL, "-mult_vec_view")); 173*48a46eb9SPierre Jolivet if (err > 10. * PETSC_SMALL) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMultAdd err %g\n", err)); 174c4fb69feSStefano Zampini 175c4fb69feSStefano Zampini /* Test MatNorm */ 1769566063dSJacob Faibussowitsch PetscCall(MatNorm(A, NORM_INFINITY, &norms[0])); 1779566063dSJacob Faibussowitsch PetscCall(MatNorm(A, NORM_1, &norms[1])); 178c4fb69feSStefano Zampini norms[2] = -1.; /* NORM_2 not supported */ 1799566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "A Matrix norms: infty=%g, norm_1=%g, norm_2=%g\n", (double)norms[0], (double)norms[1], (double)norms[2])); 1809566063dSJacob Faibussowitsch PetscCall(MatGetOperation(A, MATOP_NORM, &Anormfunc)); 1819566063dSJacob Faibussowitsch PetscCall(MatGetOperation(B, MATOP_NORM, &approxnormfunc)); 1829566063dSJacob Faibussowitsch PetscCall(MatSetOperation(A, MATOP_NORM, approxnormfunc)); 1839566063dSJacob Faibussowitsch PetscCall(MatNorm(A, NORM_INFINITY, &norms[0])); 1849566063dSJacob Faibussowitsch PetscCall(MatNorm(A, NORM_1, &norms[1])); 1859566063dSJacob Faibussowitsch PetscCall(MatNorm(A, NORM_2, &norms[2])); 1869566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "A Approx Matrix norms: infty=%g, norm_1=%g, norm_2=%g\n", (double)norms[0], (double)norms[1], (double)norms[2])); 187c4fb69feSStefano Zampini if (testnorm) { 1889566063dSJacob Faibussowitsch PetscCall(MatNorm(B, NORM_INFINITY, &norms[0])); 1899566063dSJacob Faibussowitsch PetscCall(MatNorm(B, NORM_1, &norms[1])); 1909566063dSJacob Faibussowitsch PetscCall(MatNorm(B, NORM_2, &norms[2])); 191c4fb69feSStefano Zampini } else { 192c4fb69feSStefano Zampini norms[0] = -1.; 193c4fb69feSStefano Zampini norms[1] = -1.; 194c4fb69feSStefano Zampini norms[2] = -1.; 195c4fb69feSStefano Zampini } 1969566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "B Approx Matrix norms: infty=%g, norm_1=%g, norm_2=%g\n", (double)norms[0], (double)norms[1], (double)norms[2])); 1979566063dSJacob Faibussowitsch PetscCall(MatSetOperation(A, MATOP_NORM, Anormfunc)); 198c4fb69feSStefano Zampini 199c4fb69feSStefano Zampini /* Test MatDuplicate */ 2009566063dSJacob Faibussowitsch PetscCall(MatDuplicate(B, MAT_COPY_VALUES, &D)); 2019566063dSJacob Faibussowitsch PetscCall(MatSetOption(D, MAT_SYMMETRIC, symm)); 2029566063dSJacob Faibussowitsch PetscCall(MatMultEqual(B, D, 10, &flg)); 203*48a46eb9SPierre Jolivet if (!flg) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMult error after MatDuplicate\n")); 204c4fb69feSStefano Zampini if (testtrans) { 2059566063dSJacob Faibussowitsch PetscCall(MatMultTransposeEqual(B, D, 10, &flg)); 206*48a46eb9SPierre Jolivet if (!flg) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMultTranspose error after MatDuplicate\n")); 207c4fb69feSStefano Zampini } 2089566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 209c4fb69feSStefano Zampini 210c4fb69feSStefano Zampini if (testtrans) { /* MatMultTranspose for nonsymmetric matrices not implemented */ 2119566063dSJacob Faibussowitsch PetscCall(VecSetRandom(Ay, NULL)); 2129566063dSJacob Faibussowitsch PetscCall(VecCopy(Ay, By)); 2139566063dSJacob Faibussowitsch PetscCall(MatMultTranspose(A, Ay, Ax)); 2149566063dSJacob Faibussowitsch PetscCall(MatMultTranspose(B, By, Bx)); 2159566063dSJacob Faibussowitsch PetscCall(VecViewFromOptions(Ax, NULL, "-multtrans_vec_view")); 2169566063dSJacob Faibussowitsch PetscCall(VecViewFromOptions(Bx, NULL, "-multtrans_vec_view")); 2179566063dSJacob Faibussowitsch PetscCall(VecNorm(Ax, NORM_INFINITY, &nX)); 2189566063dSJacob Faibussowitsch PetscCall(VecAXPY(Ax, -1.0, Bx)); 2199566063dSJacob Faibussowitsch PetscCall(VecViewFromOptions(Ax, NULL, "-multtrans_vec_view")); 2209566063dSJacob Faibussowitsch PetscCall(VecNorm(Ax, NORM_INFINITY, &err)); 2219566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMultTranspose err %g\n", err / nX)); 2229566063dSJacob Faibussowitsch PetscCall(VecScale(Bx, -1.0)); 2239566063dSJacob Faibussowitsch PetscCall(MatMultTransposeAdd(B, By, Bx, Bx)); 2249566063dSJacob Faibussowitsch PetscCall(VecNorm(Bx, NORM_INFINITY, &err)); 225*48a46eb9SPierre Jolivet if (err > 10. * PETSC_SMALL) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMultTransposeAdd err %g\n", err)); 226c4fb69feSStefano Zampini } 2279566063dSJacob Faibussowitsch PetscCall(VecDestroy(&Ax)); 2289566063dSJacob Faibussowitsch PetscCall(VecDestroy(&Ay)); 2299566063dSJacob Faibussowitsch PetscCall(VecDestroy(&Bx)); 2309566063dSJacob Faibussowitsch PetscCall(VecDestroy(&By)); 231c4fb69feSStefano Zampini 232c4fb69feSStefano Zampini /* Test MatMatMult */ 233*48a46eb9SPierre Jolivet if (ldc) PetscCall(PetscMalloc1(nrhs * (n + ldc), &Cdata)); 2349566063dSJacob Faibussowitsch PetscCall(MatCreateDense(PETSC_COMM_WORLD, n, PETSC_DECIDE, N, nrhs, Cdata, &C)); 2359566063dSJacob Faibussowitsch PetscCall(MatDenseSetLDA(C, n + ldc)); 2369566063dSJacob Faibussowitsch PetscCall(MatSetRandom(C, NULL)); 237*48a46eb9SPierre Jolivet if (cgpu) PetscCall(MatConvert(C, MATDENSECUDA, MAT_INPLACE_MATRIX, &C)); 238c4fb69feSStefano Zampini for (nt = 0; nt < ntrials; nt++) { 2399566063dSJacob Faibussowitsch PetscCall(MatMatMult(B, C, nt ? MAT_REUSE_MATRIX : MAT_INITIAL_MATRIX, PETSC_DEFAULT, &D)); 2409566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(D, NULL, "-bc_view")); 2419566063dSJacob Faibussowitsch PetscCall(PetscObjectBaseTypeCompareAny((PetscObject)D, &flg, MATSEQDENSE, MATMPIDENSE, "")); 242c4fb69feSStefano Zampini if (flg) { 2439566063dSJacob Faibussowitsch PetscCall(MatCreateVecs(B, &x, &y)); 2449566063dSJacob Faibussowitsch PetscCall(MatCreateVecs(D, NULL, &v)); 245c4fb69feSStefano Zampini for (i = 0; i < nrhs; i++) { 2469566063dSJacob Faibussowitsch PetscCall(MatGetColumnVector(D, v, i)); 2479566063dSJacob Faibussowitsch PetscCall(MatGetColumnVector(C, x, i)); 2489566063dSJacob Faibussowitsch PetscCall(MatMult(B, x, y)); 2499566063dSJacob Faibussowitsch PetscCall(VecAXPY(y, -1.0, v)); 2509566063dSJacob Faibussowitsch PetscCall(VecNorm(y, NORM_INFINITY, &err)); 2519566063dSJacob Faibussowitsch if (err > 10. * PETSC_SMALL) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMat err %" PetscInt_FMT " %g\n", i, err)); 252c4fb69feSStefano Zampini } 2539566063dSJacob Faibussowitsch PetscCall(VecDestroy(&y)); 2549566063dSJacob Faibussowitsch PetscCall(VecDestroy(&x)); 2559566063dSJacob Faibussowitsch PetscCall(VecDestroy(&v)); 256c4fb69feSStefano Zampini } 257c4fb69feSStefano Zampini } 2589566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 259c4fb69feSStefano Zampini 260c4fb69feSStefano Zampini /* Test MatTransposeMatMult */ 261c4fb69feSStefano Zampini if (testtrans) { /* MatMultTranspose for nonsymmetric matrices not implemented */ 262c4fb69feSStefano Zampini for (nt = 0; nt < ntrials; nt++) { 2639566063dSJacob Faibussowitsch PetscCall(MatTransposeMatMult(B, C, nt ? MAT_REUSE_MATRIX : MAT_INITIAL_MATRIX, PETSC_DEFAULT, &D)); 2649566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(D, NULL, "-btc_view")); 2659566063dSJacob Faibussowitsch PetscCall(PetscObjectBaseTypeCompareAny((PetscObject)D, &flg, MATSEQDENSE, MATMPIDENSE, "")); 266c4fb69feSStefano Zampini if (flg) { 2679566063dSJacob Faibussowitsch PetscCall(MatCreateVecs(B, &y, &x)); 2689566063dSJacob Faibussowitsch PetscCall(MatCreateVecs(D, NULL, &v)); 269c4fb69feSStefano Zampini for (i = 0; i < nrhs; i++) { 2709566063dSJacob Faibussowitsch PetscCall(MatGetColumnVector(D, v, i)); 2719566063dSJacob Faibussowitsch PetscCall(MatGetColumnVector(C, x, i)); 2729566063dSJacob Faibussowitsch PetscCall(MatMultTranspose(B, x, y)); 2739566063dSJacob Faibussowitsch PetscCall(VecAXPY(y, -1.0, v)); 2749566063dSJacob Faibussowitsch PetscCall(VecNorm(y, NORM_INFINITY, &err)); 2759566063dSJacob Faibussowitsch if (err > 10. * PETSC_SMALL) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatTransMat err %" PetscInt_FMT " %g\n", i, err)); 276c4fb69feSStefano Zampini } 2779566063dSJacob Faibussowitsch PetscCall(VecDestroy(&y)); 2789566063dSJacob Faibussowitsch PetscCall(VecDestroy(&x)); 2799566063dSJacob Faibussowitsch PetscCall(VecDestroy(&v)); 280c4fb69feSStefano Zampini } 281c4fb69feSStefano Zampini } 2829566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 283c4fb69feSStefano Zampini } 284c4fb69feSStefano Zampini 285300d917bSStefano Zampini /* Test basis orthogonalization */ 28653022affSStefano Zampini if (testorthog) { 2879566063dSJacob Faibussowitsch PetscCall(MatDuplicate(B, MAT_COPY_VALUES, &D)); 2889566063dSJacob Faibussowitsch PetscCall(MatSetOption(D, MAT_SYMMETRIC, symm)); 2899566063dSJacob Faibussowitsch PetscCall(MatH2OpusOrthogonalize(D)); 2909566063dSJacob Faibussowitsch PetscCall(MatMultEqual(B, D, 10, &flg)); 291*48a46eb9SPierre Jolivet if (!flg) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMult error after basis ortogonalization\n")); 2929566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 29353022affSStefano Zampini } 29453022affSStefano Zampini 295300d917bSStefano Zampini /* Test matrix compression */ 29653022affSStefano Zampini if (testcompress) { 2979566063dSJacob Faibussowitsch PetscCall(MatDuplicate(B, MAT_COPY_VALUES, &D)); 2989566063dSJacob Faibussowitsch PetscCall(MatSetOption(D, MAT_SYMMETRIC, symm)); 2999566063dSJacob Faibussowitsch PetscCall(MatH2OpusCompress(D, PETSC_SMALL)); 3009566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 30153022affSStefano Zampini } 30253022affSStefano Zampini 303300d917bSStefano Zampini /* Test low-rank update */ 304300d917bSStefano Zampini if (testhlru) { 305300d917bSStefano Zampini Mat U, V; 306300d917bSStefano Zampini PetscScalar *Udata = NULL, *Vdata = NULL; 307300d917bSStefano Zampini 308300d917bSStefano Zampini if (ldu) { 3099566063dSJacob Faibussowitsch PetscCall(PetscMalloc1(nlr * (n + ldu), &Udata)); 3109566063dSJacob Faibussowitsch PetscCall(PetscMalloc1(nlr * (n + ldu + 2), &Vdata)); 311300d917bSStefano Zampini } 3129566063dSJacob Faibussowitsch PetscCall(MatDuplicate(B, MAT_COPY_VALUES, &D)); 3139566063dSJacob Faibussowitsch PetscCall(MatCreateDense(PetscObjectComm((PetscObject)D), n, PETSC_DECIDE, N, nlr, Udata, &U)); 3149566063dSJacob Faibussowitsch PetscCall(MatDenseSetLDA(U, n + ldu)); 3159566063dSJacob Faibussowitsch PetscCall(MatCreateDense(PetscObjectComm((PetscObject)D), n, PETSC_DECIDE, N, nlr, Vdata, &V)); 3169566063dSJacob Faibussowitsch if (ldu) PetscCall(MatDenseSetLDA(V, n + ldu + 2)); 3179566063dSJacob Faibussowitsch PetscCall(MatSetRandom(U, NULL)); 3189566063dSJacob Faibussowitsch PetscCall(MatSetRandom(V, NULL)); 3199566063dSJacob Faibussowitsch PetscCall(MatH2OpusLowRankUpdate(D, U, V, 0.5)); 3209566063dSJacob Faibussowitsch PetscCall(MatH2OpusLowRankUpdate(D, U, V, -0.5)); 3219566063dSJacob Faibussowitsch PetscCall(MatMultEqual(B, D, 10, &flg)); 322*48a46eb9SPierre Jolivet if (!flg) PetscCall(PetscPrintf(PETSC_COMM_WORLD, "MatMult error after low-rank update\n")); 3239566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 3249566063dSJacob Faibussowitsch PetscCall(MatDestroy(&U)); 3259566063dSJacob Faibussowitsch PetscCall(PetscFree(Udata)); 3269566063dSJacob Faibussowitsch PetscCall(MatDestroy(&V)); 3279566063dSJacob Faibussowitsch PetscCall(PetscFree(Vdata)); 328300d917bSStefano Zampini } 329300d917bSStefano Zampini 330c4fb69feSStefano Zampini /* check explicit operator */ 331c4fb69feSStefano Zampini if (checkexpl) { 332c4fb69feSStefano Zampini Mat Be, Bet; 333c4fb69feSStefano Zampini 3349566063dSJacob Faibussowitsch PetscCall(MatComputeOperator(B, MATDENSE, &D)); 3359566063dSJacob Faibussowitsch PetscCall(MatDuplicate(D, MAT_COPY_VALUES, &Be)); 3369566063dSJacob Faibussowitsch PetscCall(MatNorm(D, NORM_FROBENIUS, &nB)); 3379566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(D, NULL, "-expl_view")); 3389566063dSJacob Faibussowitsch PetscCall(MatAXPY(D, -1.0, A, SAME_NONZERO_PATTERN)); 3399566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(D, NULL, "-diff_view")); 3409566063dSJacob Faibussowitsch PetscCall(MatNorm(D, NORM_FROBENIUS, &nD)); 3419566063dSJacob Faibussowitsch PetscCall(MatNorm(A, NORM_FROBENIUS, &nA)); 3429566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "Approximation error %g (%g / %g, %g)\n", nD / nA, nD, nA, nB)); 3439566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 344c4fb69feSStefano Zampini 345c4fb69feSStefano Zampini if (testtrans) { /* MatMultTranspose for nonsymmetric matrices not implemented */ 3469566063dSJacob Faibussowitsch PetscCall(MatTranspose(A, MAT_INPLACE_MATRIX, &A)); 3479566063dSJacob Faibussowitsch PetscCall(MatComputeOperatorTranspose(B, MATDENSE, &D)); 3489566063dSJacob Faibussowitsch PetscCall(MatDuplicate(D, MAT_COPY_VALUES, &Bet)); 3499566063dSJacob Faibussowitsch PetscCall(MatNorm(D, NORM_FROBENIUS, &nB)); 3509566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(D, NULL, "-expl_trans_view")); 3519566063dSJacob Faibussowitsch PetscCall(MatAXPY(D, -1.0, A, SAME_NONZERO_PATTERN)); 3529566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(D, NULL, "-diff_trans_view")); 3539566063dSJacob Faibussowitsch PetscCall(MatNorm(D, NORM_FROBENIUS, &nD)); 3549566063dSJacob Faibussowitsch PetscCall(MatNorm(A, NORM_FROBENIUS, &nA)); 3559566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "Approximation error transpose %g (%g / %g, %g)\n", nD / nA, nD, nA, nB)); 3569566063dSJacob Faibussowitsch PetscCall(MatDestroy(&D)); 357c4fb69feSStefano Zampini 3589566063dSJacob Faibussowitsch PetscCall(MatTranspose(Bet, MAT_INPLACE_MATRIX, &Bet)); 3599566063dSJacob Faibussowitsch PetscCall(MatAXPY(Be, -1.0, Bet, SAME_NONZERO_PATTERN)); 3609566063dSJacob Faibussowitsch PetscCall(MatViewFromOptions(Be, NULL, "-diff_expl_view")); 3619566063dSJacob Faibussowitsch PetscCall(MatNorm(Be, NORM_FROBENIUS, &nB)); 3629566063dSJacob Faibussowitsch PetscCall(PetscPrintf(PETSC_COMM_WORLD, "Approximation error B - (B^T)^T %g\n", nB)); 3639566063dSJacob Faibussowitsch PetscCall(MatDestroy(&Be)); 3649566063dSJacob Faibussowitsch PetscCall(MatDestroy(&Bet)); 365c4fb69feSStefano Zampini } 366c4fb69feSStefano Zampini } 3679566063dSJacob Faibussowitsch PetscCall(MatDestroy(&A)); 3689566063dSJacob Faibussowitsch PetscCall(MatDestroy(&B)); 3699566063dSJacob Faibussowitsch PetscCall(MatDestroy(&C)); 3709566063dSJacob Faibussowitsch PetscCall(PetscFree(Cdata)); 3719566063dSJacob Faibussowitsch PetscCall(PetscFree(Adata)); 3729566063dSJacob Faibussowitsch PetscCall(PetscFinalize()); 373b122ec5aSJacob Faibussowitsch return 0; 374c4fb69feSStefano Zampini } 375c4fb69feSStefano Zampini 376c4fb69feSStefano Zampini /*TEST 377c4fb69feSStefano Zampini 378c4fb69feSStefano Zampini build: 37953022affSStefano Zampini requires: h2opus 380c4fb69feSStefano Zampini 381c4fb69feSStefano Zampini #tests from kernel 382c4fb69feSStefano Zampini test: 38353022affSStefano Zampini requires: h2opus 384c4fb69feSStefano Zampini nsize: 1 385c4fb69feSStefano Zampini suffix: 1 386c4fb69feSStefano Zampini args: -n {{17 33}} -kernel 1 -dim {{1 2 3}} -symm {{0 1}} -checkexpl -bgpu 0 387c4fb69feSStefano Zampini 388c4fb69feSStefano Zampini test: 38953022affSStefano Zampini requires: h2opus 390c4fb69feSStefano Zampini nsize: 1 391c4fb69feSStefano Zampini suffix: 1_ld 392c4fb69feSStefano Zampini output_file: output/ex66_1.out 393300d917bSStefano Zampini args: -n 33 -kernel 1 -dim 1 -lda 13 -ldc 11 -ldu 17 -symm 0 -checkexpl -bgpu 0 394c4fb69feSStefano Zampini 395c4fb69feSStefano Zampini test: 39653022affSStefano Zampini requires: h2opus cuda 397c4fb69feSStefano Zampini nsize: 1 398c4fb69feSStefano Zampini suffix: 1_cuda 399c4fb69feSStefano Zampini output_file: output/ex66_1.out 400c4fb69feSStefano Zampini args: -n {{17 33}} -kernel 1 -dim {{1 2 3}} -symm {{0 1}} -checkexpl -bgpu 1 401c4fb69feSStefano Zampini 402c4fb69feSStefano Zampini test: 40353022affSStefano Zampini requires: h2opus cuda 404c4fb69feSStefano Zampini nsize: 1 405c4fb69feSStefano Zampini suffix: 1_cuda_ld 406c4fb69feSStefano Zampini output_file: output/ex66_1.out 407300d917bSStefano Zampini args: -n 33 -kernel 1 -dim 1 -lda 13 -ldc 11 -ldu 17 -symm 0 -checkexpl -bgpu 1 408c4fb69feSStefano Zampini 409c4fb69feSStefano Zampini test: 41053022affSStefano Zampini requires: h2opus 41153022affSStefano Zampini nsize: {{2 3}} 412c4fb69feSStefano Zampini suffix: 1_par 41353022affSStefano Zampini args: -n 64 -symm -kernel 1 -dim 1 -ldc 12 -testlayout {{0 1}} -bgpu 0 -cgpu 0 414c4fb69feSStefano Zampini 415c4fb69feSStefano Zampini test: 41653022affSStefano Zampini requires: h2opus cuda 41753022affSStefano Zampini nsize: {{2 3}} 418c4fb69feSStefano Zampini suffix: 1_par_cuda 41953022affSStefano Zampini args: -n 64 -symm -kernel 1 -dim 1 -ldc 12 -testlayout {{0 1}} -bgpu {{0 1}} -cgpu {{0 1}} 420c4fb69feSStefano Zampini output_file: output/ex66_1_par.out 421c4fb69feSStefano Zampini 422c4fb69feSStefano Zampini #tests from matrix sampling (parallel or unsymmetric not supported) 423c4fb69feSStefano Zampini test: 42453022affSStefano Zampini requires: h2opus 425c4fb69feSStefano Zampini nsize: 1 426c4fb69feSStefano Zampini suffix: 2 427c4fb69feSStefano Zampini args: -n {{17 33}} -kernel 0 -dim 2 -symm 1 -checkexpl -bgpu 0 428c4fb69feSStefano Zampini 429c4fb69feSStefano Zampini test: 43053022affSStefano Zampini requires: h2opus cuda 431c4fb69feSStefano Zampini nsize: 1 432c4fb69feSStefano Zampini suffix: 2_cuda 433c4fb69feSStefano Zampini output_file: output/ex66_2.out 434c4fb69feSStefano Zampini args: -n {{17 33}} -kernel 0 -dim 2 -symm 1 -checkexpl -bgpu {{0 1}} -agpu {{0 1}} 435c4fb69feSStefano Zampini 43653022affSStefano Zampini #tests view operation 43753022affSStefano Zampini test: 43853022affSStefano Zampini requires: h2opus !cuda 4398cc725e6SPierre Jolivet filter: grep -v " MPI process" | grep -v "\[" | grep -v "\]" 44053022affSStefano Zampini nsize: {{1 2 3}} 44153022affSStefano Zampini suffix: view 44253022affSStefano Zampini args: -ng 64 -kernel 1 -dim 2 -symm 1 -checkexpl -B_view -mat_h2opus_leafsize 17 -mat_h2opus_normsamples 13 -mat_h2opus_indexmap_view ::ascii_matlab -mat_approximate_norm_samples 2 -mat_h2opus_normsamples 2 44353022affSStefano Zampini 44453022affSStefano Zampini test: 44553022affSStefano Zampini requires: h2opus cuda 4468cc725e6SPierre Jolivet filter: grep -v " MPI process" | grep -v "\[" | grep -v "\]" 44753022affSStefano Zampini nsize: {{1 2 3}} 44853022affSStefano Zampini suffix: view_cuda 44953022affSStefano Zampini args: -ng 64 -kernel 1 -dim 2 -symm 1 -checkexpl -bgpu -B_view -mat_h2opus_leafsize 17 -mat_h2opus_normsamples 13 -mat_h2opus_indexmap_view ::ascii_matlab -mat_approximate_norm_samples 2 -mat_h2opus_normsamples 2 45053022affSStefano Zampini 451c4fb69feSStefano Zampini TEST*/ 452