<p><span style="padding: 3px 10px; border-radius: 5px; color: #ffffff; font-weight: bold; display: inline-block; background-color: #ff0000;">&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;External Email - Use Caution&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;</span></p><p></p>Ok that‘s what I predicted. Good to have it confirmed. For other BTI data that we have dealt with it was not an issue as those must have been recorded with some patient id or so as we do not see nans there. I guess we can just look for nans and replace them.<br><br>Denis<br><div class="gmail_quote"><div dir="ltr">On Thu 27 Sep 2018 at 19:23, Bear, Joshua &lt;<a href="mailto:JOSHUA.BEAR@ucdenver.edu">JOSHUA.BEAR@ucdenver.edu</a>&gt; wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div style="word-wrap:break-word;line-break:after-white-space"><div>Hi Eric and Alex,</div><div><br></div><div>I heard back from Eugene Kronberg, our MEG physicist, who confirmed that this transformation matrix will contain nans with any empty room recordings (unless you chose to record with the head frame system in place despite the absence of a head, I suppose). I’ve attached his response below. </div><div><br></div><div>Regards,</div><div>Josh</div><div><br></div><div><br></div><div><br></div><div><br></div><div><blockquote type="cite">Hi Josh,<br><br>Well, the empty room is an empty room, there is no patient and there is no head frame system of coordinates. Transformation matrix in the config file is for rotation and translation between sensor frame and head frame system of coordinates. That&#39;s why there are nan(s) in the transformation.<br><br>The right thing would be not to use transformation matrix for the empty room recordings. Otherwise, you could try to replace nan(s) with something else.<br><br>Good luck,<br>Eugene</blockquote></div></div><div style="word-wrap:break-word;line-break:after-white-space"><div><br></div><div><br></div><div><br></div><div><br></div><div><br></div><br><div>
<div style="color:rgb(0,0,0);font-family:Helvetica;font-size:12px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">Joshua Bear, MD, MA | Assistant Professor, Pediatric Neurology and Epilepsy<br>13123 East 16th Avenue, Box B-155 | Aurora, CO 80045 | Phone: 720-777-6138 | Fax: 720-777-7285 <br> <br></div><br></div>
<div><br><blockquote type="cite"><div>On Sep 27, 2018, at 9:23 AM, Eric Larson &lt;<a href="mailto:larson.eric.d@gmail.com" target="_blank">larson.eric.d@gmail.com</a>&gt; wrote:</div><br class="m_-6523675199008138914Apple-interchange-newline"><div><p><span style="padding:3px 10px;border-radius:5px;color:#ffffff;font-weight:bold;display:inline-block;background-color:#ff0000">        External Email - Use Caution        </span></p><div><br class="m_-6523675199008138914webkit-block-placeholder"></div><div dir="ltr">If this is a standard output of the BTi system (for example if all your empty-room recordis are thsi way) and we can figure out the correct way to deal with it, then yes it shouldn&#39;t be too difficult to fix the reader to deal with this case.<div><br></div><div>Eric</div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr">On Thu, Sep 27, 2018 at 11:21 AM Bear, Joshua &lt;<a href="mailto:JOSHUA.BEAR@ucdenver.edu" target="_blank">JOSHUA.BEAR@ucdenver.edu</a>&gt; wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div style="word-wrap:break-word;line-break:after-white-space"><div>Hi Alex, <div><br></div><div>Thank you for looking into this! </div><div><br></div><div>I also don’t know why BTI does that but could ask our MEG physicist. I wonder if it is linked to the head shape information and, since this had no subject, it uses nans to show that. </div><div><br></div><div>Would it be relatively trivial to hack the reader? My FieldTrip workaround is effective but a bit clunky and cumbersome, and it would be great to keep everything in python. </div><div><br></div><div>Thanks,</div><div>Josh</div><div><br></div></div><div><br></div><div><br></div><br><div>
<div style="font-family:Helvetica;font-size:12px;font-style:normal;font-variant-caps:normal;font-weight:normal;letter-spacing:normal;text-align:start;text-indent:0px;text-transform:none;white-space:normal;word-spacing:0px;text-decoration:none">Joshua Bear, MD, MA | Assistant Professor, Pediatric Neurology and Epilepsy<br>13123 East 16th Avenue, Box B-155 | Aurora, CO 80045 | Phone: 720-777-6138 | Fax: 720-777-7285 <br> <br></div><br></div>
<div><br><blockquote type="cite"><div>On Sep 27, 2018, at 6:53 AM, Alexandre Gramfort &lt;<a href="mailto:alexandre.gramfort@inria.fr" target="_blank">alexandre.gramfort@inria.fr</a>&gt; wrote:</div><br class="m_-6523675199008138914m_-8566560899522673812Apple-interchange-newline"><div><div>        External Email - Use Caution        <br><br>hi Josh,<br><br>we can replicate the problem with Denis. For some reason your config file<br>has a transform matrix (dev_ctf_t) that contains NaN:<br><br> bti_info[&#39;bti_transform&#39;][0]<br>array([[ 1.        ,  0.        ,  0.        ,         nan],<br>      [-0.        ,  0.70710678,  0.70710678,         nan],<br>      [ 0.        , -0.70710678,  0.70710678,         nan],<br>      [ 1.        ,  1.        ,  1.        ,  1.        ]])<br><br>this pops up when reading the bytes from your config file. You can<br>also use the follow<br>lines to debug:<br><br>------<br>from mne.io.bti.read import read_char, read_uint32, read_transform, read_float<br>from mne.io.bti.read import read_int16, read_str, read_int32<br><br><br>with open(&#39;config&#39;, &#39;rb&#39;) as fid:<br><br>    cfg = dict()<br>    cfg[&#39;hdr&#39;] = {&#39;version&#39;: read_int16(fid),<br>                  &#39;site_name&#39;: read_str(fid, 32),<br>                  &#39;dap_hostname&#39;: read_str(fid, 16),<br>                  &#39;sys_type&#39;: read_int16(fid),<br>                  &#39;sys_options&#39;: read_int32(fid),<br>                  &#39;supply_freq&#39;: read_int16(fid),<br>                  &#39;total_chans&#39;: read_int16(fid),<br>                  &#39;system_fixed_gain&#39;: read_float(fid),<br>                  &#39;volts_per_bit&#39;: read_float(fid),<br>                  &#39;total_sensors&#39;: read_int16(fid),<br>                  &#39;total_user_blocks&#39;: read_int16(fid),<br>                  &#39;next_der_chan_no&#39;: read_int16(fid)}<br><br>    fid.seek(2, 1)<br>    cfg[&#39;checksum&#39;] = read_uint32(fid)<br>    cfg[&#39;reserved&#39;] = read_char(fid, 32)<br>    cfg[&#39;transforms&#39;] = [read_transform(fid) for t in<br>                         range(cfg[&#39;hdr&#39;][&#39;total_sensors&#39;])]<br>    print(cfg[&#39;transforms&#39;])<br>------<br><br>I don&#39;t know enough about BTi system to have a clue of how to fix this<br>besides hacking the reader to replace NaNs by zeros.<br><br>Alex<br>On Wed, Sep 26, 2018 at 9:31 PM Bear, Joshua &lt;<a href="mailto:JOSHUA.BEAR@ucdenver.edu" target="_blank">JOSHUA.BEAR@ucdenver.edu</a>&gt; wrote:<br><blockquote type="cite"><br>Alex, thank you for the response. I’ve sent another email with files.<br><br>Denis, yes, I just checked the empty room recordings for the other subjects in this study as well as a recording I obtained some months ago. I am able to open them in Brainstorm but get the same error across all files in MNE-python. I thought I had previously pulled the older empty room recording into a prior version of MNE-Python, but I can’t remember with certainty.<br><br>Cheers,<br>Josh<br><br><br><br><br>Joshua Bear, MD, MA | Assistant Professor, Pediatric Neurology and Epilepsy<br>13123 East 16th Avenue, Box B-155 | Aurora, CO 80045 | Phone: 720-777-6138 | Fax: 720-777-7285<br><br><br><br>On Sep 26, 2018, at 1:25 PM, Denis-Alexander Engemann &lt;<a href="mailto:denis.engemann@gmail.com" target="_blank">denis.engemann@gmail.com</a>&gt; wrote:<br><br>        External Email - Use Caution<br><br><br>Keep me in the loop. I may be able to help. Can you btw. exclude that it is an issue for that particular file?<br>On Wed 26 Sep 2018 at 21:02, Alexandre Gramfort &lt;<a href="mailto:alexandre.gramfort@inria.fr" target="_blank">alexandre.gramfort@inria.fr</a>&gt; wrote:<br><blockquote type="cite"><br>        External Email - Use Caution<br><br>hi Josh,<br><br>can you share the empty room data with a script crashes?<br><br>thanks<br>Alex<br><br><br>On Wed, Sep 26, 2018 at 7:57 PM Bear, Joshua &lt;<a href="mailto:JOSHUA.BEAR@ucdenver.edu" target="_blank">JOSHUA.BEAR@ucdenver.edu</a>&gt; wrote:<br><blockquote type="cite"><br>Hello everyone,<br><br>I’m working with some BTI data and would like to include empty room recordings done prior to the patient recordings for my noise covariance. When importing the data using mne.io.read_raw_bti() I have to set convert=False or I get an error. Then, when trying to save the data to the FIF format, I will get the same error, presumably because it is now trying to perform the conversion function that I had previously avoided.<br><br>I do not have any problems with the actual subject recordings, only the empty room one.<br><br>I’ve included the error message below. Has anyone seen this before and/or have suggestions on how to get my empty room data converted to FIF?<br><br>Thank you for your help,<br>Josh<br><br><br><br><br>This is the error that appears to occur during BTI to FIF conversion:<br><br>Reading 4D PDF file /mystudy/06%29%18@13:28/1/c,rfhp0.1Hz...<br>Creating Neuromag info structure ...<br>... Setting channel info structure.<br>... putting coil transforms in Neuromag coordinates<br>Traceback (most recent call last):<br>  File &quot;&lt;stdin&gt;&quot;, line 1, in &lt;module&gt;<br>  File &quot;&lt;string&gt;&quot;, line 2, in read_raw_bti<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/mne/utils.py&quot;, line 729, in verbose<br>    return function(*args, **kwargs)<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/mne/io/bti/bti.py&quot;, line 1398, in read_raw_bti<br>    eog_ch=eog_ch, preload=preload, verbose=verbose)<br>  File &quot;&lt;string&gt;&quot;, line 2, in __init__<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/mne/utils.py&quot;, line 729, in verbose<br>    return function(*args, **kwargs)<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/mne/io/bti/bti.py&quot;, line 1031, in __init__<br>    sort_by_ch_name=sort_by_ch_name, eog_ch=eog_ch)<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/mne/io/bti/bti.py&quot;, line 1209, in _get_bti_info<br>    t = _convert_coil_trans(t, dev_ctf_t, bti_dev_t)<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/mne/io/bti/bti.py&quot;, line 250, in _convert_coil_trans<br>    t = combine_transforms(invert_transform(dev_ctf_t), bti_dev_t,<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/mne/transforms.py&quot;, line 576, in invert_transform<br>    return Transform(trans[&#39;to&#39;], trans[&#39;from&#39;], linalg.inv(trans[&#39;trans&#39;]))<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/scipy/linalg/basic.py&quot;, line 946, in inv<br>    a1 = _asarray_validated(a, check_finite=check_finite)<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/scipy/_lib/_util.py&quot;, line 238, in _asarray_validated<br>    a = toarray(a)<br>  File &quot;/Users/joshbear/bin/anaconda3/envs/mne/lib/python3.6/site-packages/numpy/lib/function_base.py&quot;, line 1233, in asarray_chkfinite<br>    &quot;array must not contain infs or NaNs&quot;)<br>ValueError: array must not contain infs or NaNs<br><br><br><br><br><br>Joshua Bear, MD, MA | Assistant Professor, Pediatric Neurology and Epilepsy<br>13123 East 16th Avenue, Box B-155 | Aurora, CO 80045 | Phone: 720-777-6138 | Fax: 720-777-7285<br><br>        External Email - Use Caution<br><br>_______________________________________________<br>Mne_analysis mailing list<br><a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br><a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a><br></blockquote><br>_______________________________________________<br>Mne_analysis mailing list<br><a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br><a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a><br></blockquote><br>_______________________________________________<br>Mne_analysis mailing list<br><a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br><a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a><br><br><br>        External Email - Use Caution<br><br>_______________________________________________<br>Mne_analysis mailing list<br><a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br><a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a><br></blockquote><br>_______________________________________________<br>Mne_analysis mailing list<br><a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br><a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a></div></div></blockquote></div><br></div><p><span style="padding:3px 10px;border-radius:5px;color:#ffffff;font-weight:bold;display:inline-block;background-color:#ff0000">        External Email - Use Caution        </span></p><div><br class="m_-6523675199008138914webkit-block-placeholder"></div>_______________________________________________<br>
Mne_analysis mailing list<br>
<a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br>
<a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" rel="noreferrer" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a></blockquote></div>
_______________________________________________<br>Mne_analysis mailing list<br><a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br><a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a></div></blockquote></div><br></div><p><span style="padding:3px 10px;border-radius:5px;color:#ffffff;font-weight:bold;display:inline-block;background-color:#ff0000">        External Email - Use Caution        </span></p><p></p>_______________________________________________<br>
Mne_analysis mailing list<br>
<a href="mailto:Mne_analysis@nmr.mgh.harvard.edu" target="_blank">Mne_analysis@nmr.mgh.harvard.edu</a><br>
<a href="https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis" rel="noreferrer" target="_blank">https://mail.nmr.mgh.harvard.edu/mailman/listinfo/mne_analysis</a></blockquote></div>