40m QIL Cryo_Lab CTN SUS_Lab TCS_Lab OMC_Lab CRIME_Lab FEA ENG_Labs OptContFac Mariner WBEEShop
  40m Log, Page 271 of 344  Not logged in ELOG logo
    Reply  Thu Dec 1 02:19:13 2016, gautam, Update, LSC, Binary output breakout box restored MC1_glitch_fast.pngITMY_testerGlitch.pngITMYsatbox.pngULcomparison.pdf
As we suspected, the binary breakout board (D080478, no drawing available) is simply a bunch of tracks printed on the PCB to route the DB37 connector
pins to two IDE50 connectors. There was no visible damage to any of the tracks (some photos uploaded to the 40m
picasa). Further, I checked the continuity between pins that should be connected using a DMM.
    Reply  Thu Dec 1 08:02:57 2016, Steve, Update, LSC, glitching ITMY_UL_LL ITMY_UL_LL.png

Entry  Thu Dec 1 20:20:15 2016, gautam, Update, IMC, IMC loss measurement plan IMG_3471.JPG
We want to measure the IMC round-trip loss using the Isogai et. al. ringdown technique. I spent some
time looking at the various bits and pieces needed to make this measurement today, this elog is meant to be a summary of my thoughts.


AOM (in its new mount to have the right polarization) has been installed
    Reply  Fri Dec 2 10:57:08 2016, steve, Update, PEM, door seal replaced 1_year_PEM.png
The south end door leaky weather seals replaced.

The aim is here to get some overpressure inside / outside so the lab partical count would not depend on outside condition.

    Reply  Fri Dec 2 11:56:42 2016, gautam, Update, LSC, MC1 LEMO jiggled IMG_3474.JPGMC1_LR_dead.png
I noticed 2 periods of frequent IMC locklosses on the StripTool trace, and so checked the MC1 PD readout channels to see if there were any coincident
glitches. Turns out there wasnt  BUT - the LR and UR signals had changed significantly over the last couple of days, which is when I've been working at 1X5. The fast
    Reply  Fri Dec 2 16:21:12 2016, gautam, Update, General, repaired projector, new mixer arrived and installed 
The most recent power outage took out our projector and mixer. The projector was sent for repair while we ordered a new mixer. Both arrived today. Steve
is working on re-installing the projector right now, and I installed the mixer which was verified to be working with our DAFI system (although the 60Hz
issue still remains to be sorted out). The current channel configuration is:
    Reply  Fri Dec 2 16:40:29 2016, gautam, Update, IMC, 24V fuse pulled out 
I've pulled out the 24V fuse block which supplies power to the AOM RF driver. The way things are set up on the PSL table, this same voltage source
powers the RF amplifiers which amplify the green beatnote signals before sending them to the LSC rack. So I turned off the green beat PDs before pulling
out the fuse. I then disconnected the input to the RF driver (it was plugged into a DS345 function generator on the PSL table) and terminated it with a
    Reply  Fri Dec 2 18:02:37 2016, Koji, Update, IOO, IMC WFS Demod board measurement & analysis WFS_demod_noise_orig.pdfWFS_demod_noise_mod.pdf
ELOG of the Wednesday work.

It turned out that the IMC WFS demod boards have the PCB board that has a different pattern for each of 8ch.
In addition, AD831 has a quite narrow leg pitch with legs that are not easily accessible.
    Reply  Sat Dec 3 13:27:35 2016, Koji, Update, IOO, IMC WFS Demod board measurement & analysis WFS_demod_noise.pdfdemod.pdf
ELOG of the work on Thursday

Gautam suggested looking at the preamplifier noise by shorting the input to the first stage. I thought it was a great idea.

To my surprise, the noise of the 2nd stage was really high compared to the model. I proceeded to investigate what was wrong.
    Reply  Mon Dec 5 01:58:16 2016, gautam, Update, IMC, IMC ringdowns IMCringdown.pdfIMCringdown_2.pdf
Over the weekend, I worked a bit on getting these ringdowns going. I will post a more detailed elog tomorrow but here is a quick summary of the changes
I made hardware-wise in case anyone sees something unfamiliar in the lab...

PDA10CF PD installed on PSL table in the beam path that was previously used for the 3f cancellation trials
PDA255 installed
    Reply  Mon Dec 5 15:05:37 2016, gautam, Update, LSC, MC1 glitches are back Mc1glitches.png
For no apparent reason, the MC1 glitches are back. Nothing has been touched near the PD whitening chassis today, and the trend suggests the glitching
started about 3 hours ago.. I had disabled the MC1 watchdog for a while to avoid the damping loop kicking the suspension around when these glitches occur,
but have re-enabled it now. IMC is holding lock for some minutes... I was hoping to do another round of ringdowns tonight, but if this persists, its going
    Reply  Mon Dec 5 15:55:25 2016, gautam, Update, IMC, IMC ringdowns 7x
As promised, here is the more detailed elog.

Part 1: AOM alignment and diffraction efficiency optimization

I started out by plugging in the input to the AOM driver back to the DS345 on the PSL table, after which I re-inserted the 24V fuse that was
    Reply  Mon Dec 5 19:29:52 2016, gautam, Update, IMC, IMC ringdowns REFLanomaly.pdf
The MC1 suspension troubles vanished as they came - but the IMC was remaining locked stably so I decided to do another round of ringdowns, and investigate
this feature in the reflected light a bit more closely. Over 9 ringdowns, as seen in the below figure, the feature doesn't quite remain the same, but
qualitatively the behaviour is similar.
    Reply  Tue Dec 6 00:43:41 2016, gautam, Update, IMC, more IMC ringdowns 
In an effor to see if I could narrow down the cause of the 100kHz ringing seen in the reflected PD signal, I tried a few things.

Changed the PD - there was a PDA 255 sitting on the PSL table by the RefCav. Since it wasn't being used, I swapped the PD I was using
with this. Unfortunately, this did not solve the problem.
Used a different channel on the oscilloscope - ringing persisted
    Reply  Tue Dec 6 13:37:02 2016, Koji, Update, IOO, IMC WFS Demod board measurement & analysis demod.pdfWFS_error_noise.pdf
I have implemented the modification to the demod boards (Attachment 1).
Now, I am looking at the noise in the whitening board. Attachment 2 shows the comparison of the error signal with the input of the whitening filter
shorted and with the 50ohm terminator on the demodulator board. The message is that the whitening filter dominates the noise below 3Hz.
    Reply  Tue Dec 6 16:47:40 2016, Koji, Update, IOO, IMC WFS whitening filter investigation D990196-C.pdf
The whitening board saids it is Rev B, but the actual component values are more like Rev. C.

The input stage (AD602) has an input resistor of 909 Ohm.
This is causing a big attenuation of the signal (x1/10) because the input impedance of AD602 is not high. And this screws up the logarithm of the
    Reply  Tue Dec 6 17:54:08 2016, Koji, Update, IOO, IMC WFS whitening filter investigation 34.png
The input resistor 909Ohm of AD602 was shorted. I've confirmed that the gain (= attenuation
by voltage division) was increased by a factor of 10.
This modification was done for WFS2-I1 and WFS2-Q1. Also the thick film resistors for the WFS2-I1 channel was all replaced with thin film resistors.
    Reply  Tue Dec 6 22:41:49 2016, Koji, Update, IOO, IMC WFS whitening filter investigation 
I have implemented the same modification (shorting the input resistor of AD602) to the two whitening boards.
    Reply  Wed Dec 7 11:52:48 2016, ericq, Update, IMC, Partial IMC ringdowns IMCpartial.pngIMCpartial.zip
The transients are likely due to doppler interference due to the input laser frequency sloshing due to errant control signals after the IMC unlock.
I performed a few "partial" ringdowns by reducing the power by about 80% while keeping the IMC servo locked. (Function generator at 0.5Vpp square
wave, 0.25V offet. Turned IMC boosts off to increase the stable range of the servo).
    Reply  Thu Dec 8 07:56:05 2016, Steve, Update, PEM, EQ6.5m Northen CA eq6.5FerndaleCA.png16d_glitching-_trend.pngEQ6.5_&4.7mFerndaleCa.png
No damage. ITMY is glitching, so it has not been damped.

    Reply  Thu Dec 8 10:13:43 2016, Steve, Update, LSC, glitching ITMY_UL has a history glitching__ITMY-UL_2007.png

    Reply  Thu Dec 8 19:01:21 2016, rana, Update, IMC, Partial IMC ringdowns 
Mach Zucker on howto do Ringdowns:  https://dcc.ligo.org/LIGO-T900007
    Reply  Tue Dec 13 17:26:42 2016, Koji, Update, IOO, IMC WFS whitening filter investigation 
Rana pointed out that this modification (removal of 900Ohm) leave the input impedance as low as 100Ohm.
As OP284 can drive up to 10mA, the input can span only +/-1V with some nonlinearity.

Rather than reinstalling the 900Ohms, Rana will investigate the old-days fix for the whitening filter that may involve the removal of AD602s.
    Reply  Wed Dec 14 19:16:57 2016, Lydia, Update, CDS, Acromag Binary I/O testing 
I looked into converting the QPD whitening switches for the X end to Acromag.

To test this out and be able to freely toggle filters without messing anything up, I added a temporary dummy cdsFiltCtrl module (ACROMAG_BIO_TEST)
to the c1scx model.
The filters can be toggled from the automatically generated medm screen medm/c1scx/C1SCX_ACROMAG_BIO_TEST.adl
    Reply  Thu Dec 15 03:46:19 2016, rana, Update, IOO, IMC WFS whitening filter investigation 

As it turns out, its not so old as I thought. Jenne and I reworked these in 2014-2015. The QPD whitening is the same as the IMC WFS whitening
so we can just repeat those fixes here for the IMC.
    Reply  Thu Dec 22 09:37:20 2016, Steve, Update, VAC, RGA scan at day 63 pd80-d63.pngpd80-580Hz-d63.png
Valve configuration: vacuum normal

RGA head temp: 43.5 C

Vac envelope temp: 23 C
    Reply  Thu Dec 29 10:24:56 2016, Steve, Update, PEM, EQ5.7mHawthorn NV eq5.7HawthorneNV.png
Sus damping restored.

Entry  Thu Dec 29 21:48:32 2016, rana, Update, IOO, MC AutoLocker hung because c1iool0 asleep again 
MC unlocked, Autolocker waiting for c1iool0 EPICS channels to respond. c1iool0 was responding to ping, but not to telnet. Keyed the crate and its coming
back now.

There's many mentions of c1iool0 in the recent past, so it seems like its demise must be imminent. Good thing we have an Acromag team on
    Reply  Fri Dec 30 10:27:46 2016, rana, Update, DetChar, summary pages dead again 
Dead again. No outputs for the past month. We really need a cron job to check this out rather than wait for someone
to look at the web page.
    Reply  Thu Jan 5 21:43:16 2017, rana, Update, DetChar, summary pages dead again 
Max tells us that soem conf files were bad and that he did something and now some pages are being made. But the PEM and MEDM pages are bank. Also the
ASC tab looks bogus to me.
Entry  Sun Jan 8 12:47:06 2017, rana, Update, General, Optical Layout in DCC 
Manasa pointed me to the CAD drawings in the 40m SVN and I've now uploaded them to the 40m DCC Tree
so that EricG and SteveV can convert them into SolidWorks.
    Reply  Mon Jan 9 09:18:47 2017, Steve, Update, PEM, power glitch MondayMorning.png
There was a power glitch last night around 1:15am

The vacuum was not effected.

PSL laser turned on, PMC locked, PSL shutter opened and MC locked.
    Reply  Mon Jan 9 16:12:30 2017, Steve, Update, General, Optical Layout in DCC drawings_on_paper.jpg
Caltech Facilities promissed to email the 40m facility drawings in Cad format.

I organized the old of optical , vacuum and facility layout drawings on paper in the old cabinet. 

    Reply  Tue Jan 10 14:24:09 2017, Steve, Update, VAC, RGA scan at day 82 pd80VNd82.png
Valve configuration: vacuum normal

Vacuum envelope: 23C

Rga head: 44C
    Reply  Tue Jan 10 16:20:11 2017, Steve, Update, CDS, power glitch......Raid is rebuilding rebuilding_in_progress.png
Jamie started the fm40m Raid rebuilding. It has been beeping since the power outage.

Summary pages have no reading since power glitch.

    Reply  Tue Jan 10 21:47:00 2017, rana, Update, CDS, power glitch 
Does "done" mean they are OK or they are somehow damaged? Do you mean the workstations or the front end machines?

computers are all done.
    Reply  Tue Jan 10 22:55:43 2017, gautam, Update, CDS, power glitch - recovery steps 
Here is a link to an elog with the steps I had to follow the last time there was a similar
power glitch.

The RAID array restart was also done not too long ago, we should also do a data consistency check as detailed here,
    Reply  Wed Jan 11 16:35:03 2017, gautam, Update, CDS, power glitch - recovery progress powerGlitchRecoveryJan2017.png
[lydia, ericq, gautam]

We set about following the instructions linked in the previous elog. A few notes/remarks:

It is important to run the ntpdate commands before restarting the models. Sometimes, multiple restarts of the models were required to
Entry  Wed Jan 11 19:20:23 2017, Max Isi, Update, Summary Pages, December outage 
The summary pages were not successfully generated for a long period of time at the end of 2016 due to syntax errors in the PEM and Weather configuration

These errors caused the INI parser to crash and brought down the whole gwsumm system. It seems that changes in the configuration of the Condor
    Reply  Thu Jan 12 02:45:53 2017, Johannes, Update, General, Next armloss steps ass_illustration.pdf
As stated in elog 12618, using an oscilloscope to average the reflected powers and thus circumventing
all filtering yielded much better results than before:

XARM: 21 +/- 35 ppm
    Reply  Thu Jan 12 17:31:51 2017, gautam, Update, CDS, DC errors DCerror.png
The IFO is more or less back to an operational state. Some details:

The IMC mirror excess motion alluded to in the previous elog was due to some timing issues on c1sus. The "DAC" and "DK"
blocks in the c1x02 diag word were red instead of green. Restarting all the models on c1sus fixed the problem
When c1ioo was restarted, all
    Reply  Thu Jan 12 23:22:34 2017, rana, Update, Summary Pages, December outage 
Pages still not working: PEM and MEDM blank.

Committed existing MEDM grabbing scripts to SVN. Ran the cron job on megatron by hand. It grabs PNG files, but somehow its not getting
into the summary pages.
Changed the MEDM grabbing scripts to use '/usr/bin/env'.
GW summary log files were numbering in the
    Reply  Fri Jan 13 08:54:32 2017, Johannes, Update, General, DC PD installed ASDCPD_up.jpgASDCPD_down.jpgscrambled_osci.jpg
I installed a DC PD (Thorlabs PDA 520) in the beam path to AS55. I placed a
2" 90/10 BS on a flip mount that picks of enough light for the PD to spit out ~8V when the port is bright. Single arm continuous signal will be ~2V. While most of the light still continues towards AS55, the displacement from the
    Reply  Fri Jan 13 10:53:03 2017, Steve, Update, PEM, doors are fixed 
Control room to outside door was realigned. 

                                 It is self closing now. 
    Reply  Fri Jan 13 14:18:28 2017, Steve, Update, PEM, air condition fixed PEM_120d.png
The old control room AC  has been stick in heating mode for about 2 months. It's thermostate and fan belt  was
finally replaced. It was calibrated and set to 71 F ( just behind 1X6 on west wall ) around 1pm.

Out belt; sad inside 
    Reply  Fri Jan 13 14:33:00 2017, MAX (not Rana), Update, Summary Pages, December outage 
PEM config file was also lacking a section named "summary", which is necessary for all parent tabs; this has now been solved. I have deactivated
the MEDM pages because Praful's screencap script seemed to be broken (I should have logged this, I apologize).

    Reply  Fri Jan 13 21:41:23 2017, Koji, Update, CDS, DC errors 
I think I fixed the DC error issue

1. I added the leap second (leapsecond ?) entry for 2016/12/31, 23:60:00 UTC to daqdrc

Entry  Fri Jan 13 23:39:46 2017, gautam, Update, General, ETMX suspension electronics problems? 

After Koji's leap second fix, we were playing around with the X arm locking. In particular, we were playing around with the limit value on
the X arm LSC filter bank - the nominal value is 4000, we wanted to see if we could increase this without kicking the optic while acquiring arm lock. We
    Reply  Sat Jan 14 12:12:03 2017, rana, Update, DAQ, minute trends missing 
Did we turn off minute trend writing in one of the recent FrameBuilder debug sessions? Seems we only have second trends in 2016. Maybe this explains
why its so slow to get minute trends? Dataviewer has to rebuild it from second trend.

controls@nodus|frames > l
    Reply  Sat Jan 14 12:36:57 2017, ericq, Update, DAQ, minute trends missing 
Yes, writing minute trends causes hourly FB crashes in the current state of things. The "raw" minute trending is turned on, but I think
that these are unknown to nds.
ELOG V3.1.3-