<div dir="ltr">Hi everyone,<div><br></div><div>Chris, Michael and I had a productive meeting this morning with the team that will be working on the GPU-DiFX project, which will commence in around 5 weeks and run through to the end of the year.  During that time, I may put out periodic requests to the community for actions in support of the project, which will hopefully lead to benefits for everyone.  Here is the first one!</div><div><br></div><div>The ADACS team are rightly concerned that they don't break any existing functionality while re-factoring code and porting GPU kernels in.  To that end, they are very keen to have a test suite with as much coverage as possible, that they can run to show that nothing has broken.  This is a massive opportunity for the DiFX community, because historically we've always wanted to do better on regression testing prior to putting out releases, and indeed upon general commits to trunk.  I expect that on the completion of this project we will have something like the continuous integration setup that we've long desired.</div><div><br></div><div>So: can I please ask the communities assistance with putting together a more extensive test suite?  I have space to store the data (up to a few GB per test set, maybe 10 GB max) on the Swinburne supercomputer ozstar.  The ideal situation would be if you can provide me with a complete set including vex, v2d, baseband data files, and an already-correlated .difx output.  I'm happy to liaise to help flesh out v2d files where needed, though, and we can of course produce the reference output from scratch if necessary.</div><div><br></div><div>As can be seen on <a href="https://www.atnf.csiro.au/vlbi/dokuwiki/doku.php/difx/datasets">https://www.atnf.csiro.au/vlbi/dokuwiki/doku.php/difx/datasets</a>, the currently available test sets cover the following data arrangements:</div><div><br></div><div>* real-sampled USB</div><div>* real-sampled LSB</div><div><br></div><div>I also have access to CODIF 2+2 bit complex DSB (lower).  At a minimum, it would be nice to add:<br></div><div><br></div><div>* Complex sampled USB<br></div><div>* Complex sampled LSB</div><div>* Complex sampled DSB (positive)</div><div><br></div><div>For the GPU project the choice of format is less important, but still it would be nice for general purposes to get coverage of VDIF, CODIF, Mark4, Mark5B, and LBA.</div><div><div><br></div><div>These of course don't have to be all separate tests, if there are single scans that have a mix of multiple record types on different antennas that would be perfect to cut down on the issues.</div><div><br></div><div>As well as a "vanilla" setup corresponding to each test, it would then be good to add additional configurations (v2ds) covering zoom bands, output bands, multiple field centres, and pulsar processing.</div><div><br></div><div>This is obviously quite the list, so I don't expect to fill it out before the project starts.  But if we could continue to add to it during the remainder of 2020 that would be great.  I will soon have access to a google drive folder where we'll be storing documentation related to the GPU-DIFX project, so one of the first pages I'll create will be a test set listing. I will share that around (along with any other relevant info) as soon as it is available.</div><div><br></div><div>Cheers,</div><div>Adam</div><div><br></div>-- <br><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr" style="font-size:12.8px"><div dir="ltr" style="font-size:12.8px"><div dir="ltr" style="font-size:12.8px"><div dir="ltr" style="font-size:12.8px"><div dir="ltr" style="font-size:12.8px">!=============================================================!<br><div dir="ltr" style="font-size:12.8px">A/Prof. Adam Deller         </div><div dir="ltr" style="font-size:12.8px">ARC Future Fellow</div></div><div style="font-size:12.8px">Centre for Astrophysics & Supercomputing </div><div dir="ltr" style="font-size:12.8px">Swinburne University of Technology    <br>John St, Hawthorn VIC 3122 Australia</div><div style="font-size:12.8px">phone: +61 3 9214 5307</div><div style="font-size:12.8px">fax: +61 3 9214 8797</div><div style="font-size:12.8px"><br></div><div style="font-size:12.8px">office days (usually): Mon-Thu<br>!=============================================================!</div></div></div></div></div></div></div></div></div></div></div></div></div></div></div></div></div>