40m QIL Cryo_Lab CTN SUS_Lab TCS_Lab OMC_Lab CRIME_Lab FEA ENG_Labs OptContFac Mariner WBEEShop
  40m Log, Page 333 of 339  Not logged in ELOG logo
    Reply  Fri Jan 21 14:51:00 2022, Koji, Update, BHD, V6-704/705 Mirror now @Downs M1.PNGM1_30mm.PNGM2.PNGM2_30mm.PNG
Camille@Downs measured the surface of these M1 and M2 using Zygo.

Result of the ROC measurements:M1: ROC=2076m (convex)M2: ROC=2118m (convex)
    Reply  Fri Jan 21 16:40:10 2022, Anchal, Update, BHD, AS4 Input Matrix Diagonalization performed.  AS4_SUS_InpMat_Diagnolization_20220121.pdfAS4_FreeSwingData_PeakFitting_20220121.pdf
The free swinging test was successful. I ran the input matrix diagonalization code (/opt/rtcds/caltech/c1/Git/40m/scripts/SUS/InMAtCalc/sus_diagonalization.py)
on the AS4 free-swinging data collected last night. The logfile and results are stored in /opt/rtcds/caltech/c1/Git/40m/scripts/SUS/InMAtCalc/AS4
directory. Attachment 1 shows the power spectral density of the DOF basis data (POS, PIT, YAW, SIDE) before and after the diagonalization. Attachment 2
    Reply  Mon Jan 24 17:12:27 2022, rana, Update, BHD, AS4 Input Matrix Diagonalization performed.  
I think our suspension input matrix diagonalization is not so robust usually because we only choose
a inverting matrix which gives the best separation for a single suspension alignment.

i.e. we have seen in the past that adjusting the bias for the alignment makes the matrix inversion not work well. Sometime people turn OFF the
    Reply  Mon Jan 24 17:58:21 2022, Yehonathan, Update, BHD, PR2 Suspension 
I picked up the PR2 mirrors (labeled M1, M2) from Anchel's table and took them to the cleanroom. By inspection, I spotted some dust particles on
M1. I wasn't able to remove them with clean air so I decided to use M2 which looked much cleaner. I wasn't able to discern any wedge angle on the
optic. I inserted the optic into a thin optic adapter. The optic is thicker than I expected so I use long screws for the mirror clamping. I expect that
    Reply  Mon Jan 24 20:48:48 2022, Anchal, Update, BHD, AS4 Input Matrix Diagonalization performed.  
I agree. That's an interesting idea. But does that mean that there is an always working inverse matrix solution or that any solution will be vulnerable
to the alignment biases.

I think we can also calculate the matrix rotation required as a function of dc biases and do that rotation in the simulimk model.
    Reply  Tue Jan 25 18:37:12 2022, TYehonathan, Update, BHD, PR2 Suspension PR2_magnet_height.pngPR2_roll_balance.pngFreeSwingingSpectra_div_50mV.pdf
PR2's side magnet height was adjusted and its roll was balanced (attachment 1,2). I verified that the OpLev beam is still aligned. The pitch was
balanced: First, using an iris for rough adjustment. Then, with the QPD. I locked the counterweight setscrew.

I turned off the HEPAs, damped PR2, and measured the QPD spectra (attachment 3). Major peaks are at 690mHz, 953mHz, and 1.05Hz. I screwed back
Entry  Mon Jan 31 10:39:19 2022, Jordan, Update, VAC, TP1 and Manual Gate Valve Removal 20220131_100637.jpg20220131_102807.jpg20220131_102818.jpg20220131_100647.jpg
Jordan, Chub

Today, Chub and I removed TP1 and the failed manual gate valve off of the pumping spool.

First, P2 needed to be vented in order to remove TP1. TP1 has a purge valve on the side of the pump which we slowly opened bringing the P2 volume
    Reply  Tue Feb 1 20:16:09 2022, Tega, Update, BHD, PR2 candidate mirror analysis PR2_M2_data.pngPR2_M2_recon_FoV_10mm.pngPR2_M2_residual_FoV_10mm.png
git repo: git@git.ligo.org:tega-edo/charmirrormap.git

The analysis code takes in a set of raw images, 10 in our case,  for each mirror and calculates the zernike aberration coefficients for
each image, then takes their average. This average value is used to reconstruct the mirror height map.  Finally, the residual error between the reconstructed
Entry  Thu Feb 3 10:25:59 2022, Jordan, Update, VAC, TP1 and Manual Gate Valve Install 20220203_101455.jpg20220203_094831.jpg20220203_094823.jpg
Jordan, Chub

Chub and I installed the new manual gate valve (Nor-Cal GVM-6002-CF-K79) and reinstalled TP1. The new gate valave was placed with the sealing
side towards the main 40m volume, then TP1 was installed on top and the foreline reattched to TP1.
Entry  Thu Feb 3 14:47:12 2022, Chub, Update, Electronics, new UPS in place 
Received the new 1100VA APC UPS today and placed it at the bottom of the valve rack.  I'd connected the battery and plugged the unit into the
AC outlet, but did not turn it on due to the power outage this weekend.
Entry  Fri Feb 4 10:04:47 2022, Chub, Update, General, dish soap and clean scrub sponges! 40m_supplies.jpg
Bought dish soap and scrub sponges today and placed them under the sink with the other dish supplies.
Entry  Mon Feb 7 09:00:26 2022, Paco, Update, General, Scheduled power outage recovery 
[Paco]

Started recovering from scheduled (Feb 05) power outage. Basically, time-reversing through this
list.
    Reply  Mon Feb 7 15:32:48 2022, Yehonathan, Update, General, Y End laser controller 
I went to the Y end. The AUX laser was on Standby. I pushed the Standby button. The laser turned on and there was some green light. However, the controller
displayed the message "CABLE?" which according to the manual means that the laser head is powered but there is no control over the laser (e.g.
the control cable is disconnected). I turned off the controller and disconnected both the power and control cables. I put them back and turned the controller
Entry  Mon Feb 7 16:14:37 2022, Tega, Update, Computers, realtime system reboot problem 
I was looking into plotting temperature sensor data trend and why we currently do not have frame data written to file (on /frames) since Friday, and
noticed that the FE models were not running. So I spoke to Anchal about it and he mentioned that we are currently unable to ssh into the FE machines, therefore
we have been unable to start the models. I recalled the last time we enountered this problem Koji resolved it on Chiara, so I search the elog for Koji's
    Reply  Mon Feb 7 16:53:02 2022, Koji, Update, General, Scheduled power outage recovery PXL_20220208_001646282.jpgPXL_20220208_001657871.jpg
I went to the X end and found it was warm. Turned out that not all the A/Cs were on. They were turned on now.
    Reply  Wed Feb 9 11:56:24 2022, Anchal, Update, General, Bringing back CDS Screenshot_2022-02-09_12-11-33.png
[Anchal, Paco]

Bringing back CDS took a lot of work yesterday. I'm gonna try to summarize the main points here.


mx_start_stop

For some reason, fb1 was not able to mount mx devices automatically on system boot. This was
    Reply  Wed Feb 9 13:55:05 2022, Koji, Update, General, Bringing back CDS 
Great recovery work and cleaning of the rebooting process.

I'm just curious: Did you observe that the c1sus2 cards have different numbering order than the previous along with the power outage/cycling?
    Reply  Wed Feb 9 16:43:35 2022, Paco, Update, General, Scheduled power outage recovery - Locking mode cleaner(s) 
[Paco, Anchal]


We went in and measured the power after the power splitting HWP at the PSL table. Almost right before the PSL shutter (which was closed),
when the PMC was locked we saw ~ 598 mW (!!)
Checking back on ESP300, it seems the channel was not enabled even though the right angle was punched
    Reply  Thu Feb 10 15:41:00 2022, Anchal, Update, General, Scheduled power outage recovery - Locking mode cleaner(s) 
I found out that the ESP300 service needs to be run in root mode for it to be able to connect to the USB port of HWP motor controller. While doing this
change, I noticed that the channels hosted by c1psl might have a duplication conflict with some other channel hosting computer, because a lot of them show
the Warning: "Identical process variable names on multiple servers" which is not good. Someone should look into this conflict.
    Reply  Thu Feb 10 17:57:48 2022, Anchal, Update, General, Scheduled power outage recovery - Locking mode cleaner(s) PXL_20220211_021509819.jpg
Something is wrong with the Video MUX. The system did not turn back on with full functionality. Even though we see the screens as they were before the
power shutdown, we have lost control on switching any of the videos. I went to check the wiki
page about Video MUX which told be we should be able to see the configuration screen on this link, but the page
    Reply  Thu Feb 10 19:03:23 2022, Koji, Update, General, Scheduled power outage recovery - Locking mode cleaner(s) 
I came back to the 40m and started the investigation.

If I ping 192.168.113.92, it responds. But telnet (port 23) was rejected. I somehow tried ssh and it responds! I even could login to the host
using usual password. Here is the prompt.
    Reply  Thu Feb 10 19:46:37 2022, Koji, Update, General, Scheduled power outage recovery - Locking mode cleaner(s) 
== Assign new IP address to c1sus2 ==

cf: [40m ELOG 16398] [40m
ELOG 16396]
    Reply  Thu Feb 10 21:10:43 2022, Koji, Update, General, Video Mux setting reset Screenshot_2022-02-10_21-11-21.pngScreenshot_2022-02-10_21-11-54.png
Now the video matrix is responding correctly and the web interface shows up. (Attachment 1)

Also the video buttons respond as usual. I pushed Locking Template button to bring the setting back to nominal. (Attachment 2)
Entry  Thu Feb 10 21:51:02 2022, Koji, Update, CDS, [Solved] Huge random numbers flowing into ETMX/ETMY ASC PIT/YAW Screenshot_2022-02-10_21-46-02.pngScreen_Shot_2022-02-10_at_21.54.21.pngScreen_Shot_2022-02-10_at_22.14.23.png
Huge random numbers are flowing into ETMX/ETMY ASC PIT/YAW. Because of this, I could not damp the ETMX/ETMY suspension at the beginning during the recovery
from rebooting. (Attachment 1)
By turning off the output of the ASC filters, the mirrors were successfully damped.
    Reply  Fri Feb 11 10:56:38 2022, Anchal, Update, CDS, [Solved] Huge random numbers flowing into ETMX/ETMY ASC PIT/YAW 
Yeah, this is a known issue actually. We go to ASC screen and manually swich off all the outputs after every reboot. We haven't been able to find
a way to set default so that when the model comes online, these outputs remain switched off. We should find a way for this.

 
    Reply  Fri Feb 11 11:17:00 2022, Anchal, Update, General, Scheduled power outage recovery 
I found that two computers are not powering up in the control room, Ottavia and Allegra. Allegra was important for us as it had the current version of
LIGO CDS workstation installed on, providing us with options to use latest packages written by LIGO CDS team. I think the power issue should be resolvable
if someone opens it and knows what thye are doing. Do we have any way of getting fuse repairs on such computers? Both these computers are Dell XPS 420.
    Reply  Fri Feb 11 12:22:19 2022, rana, Update, CDS, [Solved] Huge random numbers flowing into ETMX/ETMY ASC PIT/YAW 
you can hand edit the autoBurt file which the FE uses to set the values after boot up. Just
make a python script that amends all of the OFF or ZERO that are needed to make things safe. This would be the autoBurt snap used on boot up only, and
not the hourly snaps.
    Reply  Fri Feb 11 16:09:11 2022, Anchal, Update, General, Scheduled power outage recovery - Input power increased 
We increased the input power to IMC by replacing the 98% transmission BS by a 10% transmission BS on the detection table (reverse of what mentioned in
40m/16408 see attachment 8-9). We then realigned the BS so that MC RFPD is centered. Then we realigned two steering mirrors to get the beam centered on
    Reply  Fri Feb 11 17:07:19 2022, Anchal, Update, CDS, [Solved] Huge random numbers flowing into ETMX/ETMY ASC PIT/YAW 
The autoBurt file for FE already has the C1:ASC-ETMX_PIT_SW2 (and other channels for ETMY, ITMX, ITMY, BS and for YAW) present, and I checked the last
snapshot file from Feb 7th, 2022, which has 0 for these channels. So I'm not sure why when FE boots up, it does not follow the switch configuration.
Fr safety, I changed all the gains of these filter modules, named like C1:ASC-XXXX_YYY_GAIN (where XXXX is ETMX, ETMY, ITMX, ITMY, or BS , and YYY is PIT
    Reply  Mon Feb 14 18:31:50 2022, Paco, Update, General, Scheduled power outage recovery - IMC recovery progress 
[Paco, Anchal, Tega]

We have been realigning the IMC as of last Friday (02/11). Today we made some significant progress (still at high input power), but the IMC autolocker
is unable to engage a stable mode lock. We have made some changes to reach this point, including re-centering of the MC1 REFL beam on the ccd, centering
    Reply  Mon Feb 14 21:03:25 2022, Koji, Update, General, Scheduled power outage recovery PXL_20220215_025325118.jpg
I opened the boxes. Allegra has obvious vent of at least 4 caps. And the power supply did not respond even a paper clip test was performed. https://www.silverstonetek.com/downloads/QA/PSU/PSU-Paper%20Clip-EN.pdf
(Paper Clip Test)
=> The mother board and the PSU are dead.
    Reply  Tue Feb 15 19:32:50 2022, Koji, Update, General, Scheduled power outage recovery - IMC recovery progress PXL_20220216_001731377.jpgScreen_Shot_2022-02-15_at_16.18.16.pngPXL_20220216_001727465.jpgScreen_Shot_2022-02-15_at_16.22.16.pngPXL_20220216_002229572.jpg
Reduced the IMC power to 100mW

Setup: The power meter was placed right before the final aperture (Attachment 1)

Before the adjustment: Initial position of the HWP was 37.29deg and the input power was 987mW (Attachments 2/3)
    Reply  Tue Feb 15 19:40:02 2022, Koji, Update, General, IMC locking 
IMC is locking now. There was nothing wrong: just a careful alignment + proper gain adj

=== Primary Alignment ===

- I used WFS error signals as the indicator of the PDH error signals. Checked C1:IOO-WFS1_(I/Q)n_ERR and ended up C1:IOO-WFS1_I4_ERR
    Reply  Wed Feb 16 15:19:41 2022, Anchal, Update, General, Reconfigured MC reflection path for low power 
I reconfigured the MC reflection path for low power. This meant the following changes:


Replaced the 10% reflection BS by 98% reflection beam splitter
Realigned the BS angle to get maximum on C1:IOO-MC_RFPD_DCMON
when cavity is unlocked.
Then realigned the steering mirrors for WFS1 and WFS2.
I tried to align the light for MC reflection CCD
Entry  Tue Feb 22 18:47:51 2022, Ian MacMillan, Update, SUS, ETMY SUS Electronics Replacement ALL_TF_Graph.pdf20220222_SUSElectronicsReplacement.7z
[Ian, Koji]

In preparation for the replacement of the suspension electronics that control the ETMY, I took measurments of the system excluding the CDS System.
I took transfer functions from the input to the coil drivers to the output of the OSEMs for each sensor: UL, UR, LL, LR,  and SIDE. These graphs are
    Reply  Wed Feb 23 15:08:57 2022, Anchal, Update, General, Removed extra beamsplitter in MC WFS path 
As discussed in the meeting, I removed the extra beam splitter that dumps most of the beam going towards WFS photodiodes. This beam splitter needs to be placed back in position before increasing the input power to IMC at nominal level. This is to get sufficient light on the WFS photodiodes so that we can keep IMC locked for more than 3 days. Currently IMC is unlocked
    Reply  Thu Feb 24 14:32:57 2022, Anchal, Update, General, MC RFPD DCMON channel got stuck to 0 
I found a peculiar issue today. The C1:IOO-MC_RFPD_DCMON remains constantly 0. I wonder if the RFPF output is being read properly. I opened the table
and used an oscilloscope to confirm that the DC output from the MC REFL photodiode is coming consistently but our EPICs channel is not reading it. I tried
restarting the modbusIOC service but that did not affect anything. I power cycled the acromag chassis while keeping the modbusIOC service off, and then
    Reply  Thu Feb 24 18:05:58 2022, Yehonathan, Update, BHD, Re-susspension of AS1 signal-2022-02-24-173933_003.jpegsignal-2022-02-24-173933_002.jpeg
{Yehonathan, Anchal, Paco}

Yesterday, Anchal and Paco removed AS1 from the vacuum chamber and moved it into the cleanroom. The suspension wires were cut and the AS1 optic
was put on the table.
    Reply  Thu Feb 24 19:26:32 2022, Anchal, Update, General, IMC Locking 
I think I have aligned the cavity, including MC1 such that we are seeing flashing of fundamental mode and significant transmission sum value as well.However,
I'm unable to catch lock following Koji's method in 40m/16673. Autolocker could not
catch lock either. Maybe I am doing something wrong, I'll pickup again tomorrow, hopefully the cavity won't drift too much in this time.
    Reply  Fri Feb 25 14:00:08 2022, Ian MacMillan, Update, SUS, ETMY SUS Electronics Replacement IMG_0853.jpgIMG_0852.jpg
[Koji, Ian]

We looked at a few power supplies and we found one that was marked "CHECK IF THIS WORKS" in yellow. We found that the power supply
worked but the indicator light didn't work. I tried a two other lights from other power supplies that did not work but they did not work. Koji ordered
    Reply  Fri Feb 25 14:48:53 2022, Ian MacMillan, Update, SUS, ETMY SUS Electronics Replacement Before.jpgAfter.jpg
I moved the network-enabled power strip from above the power supplies on rack 1y4 to below. Nothing was powered through the strip when I unplugged everything
and I connected everything to the same port after.
Entry  Sat Feb 26 01:01:40 2022, Tega, Update, VAC, Ongoing work to get the FRG gauges readouts to EPICs channels 
I will make a detailed elog later today giving a detailed outline of the connection from the Agilent gauge controller to the vacuum subnet and the
work I have been doing over the past two days to get data from the unit to EPICs channels. I just want to mention that I have plugged the XGS-600 gauge
controller into the serial server on the vacuum subnet. I check the vacuum medm screen and I can confirm that the other sensors did not experience and
    Reply  Sat Feb 26 15:45:14 2022, Tega, Update, VAC, Ongoing work to get the FRG gauges readouts to EPICs channels Vac-gauges-flow-diagram.png
I have attached a flow diagram of my understanding of how the gauges are connected to the network.

Earlier today, I connected the XGS-600 gauge controller to the IOLAN Serial Device Server on port 192.168.114.22 .

The plan is a follows:
    Reply  Sat Feb 26 23:48:14 2022, Koji, Update, SUS, ETMY SUS Electronics Replacement PXL_20220226_023111179_2.jpg
[Ian, Koji] - Activity on 25th (Fri)

We continued working on the ETMY electronics replacement.

- The units were fixed on the rack along with the rack plan.
    Reply  Sun Feb 27 00:37:00 2022, Koji, Update, General, IMC Locking Recovery PXL_20220226_093809056.jpgPXL_20220226_093854857.jpgPXL_20220226_100859871.jpgScreenshot_2022-02-26_01-56-31.pngScreenshot_2022-02-26_01-56-47.png
Summary:

- IMC was locked.
- Some alignment change in the output optics.
    Reply  Sun Feb 27 01:12:46 2022, Koji, Update, General, IMC manual alignment procedure PXL_20220226_100859871.jpg
We expect that the MC sus are susceptible to the temperature change and the alignment drifts away with time.

Here is the proper alignment procedure.

0) Assume there is no TEM00 flash or locking, but the IMC is still flashing with higher-order modes.
    Reply  Mon Feb 28 15:51:07 2022, Ian MacMillan, Update, SUS, ETMY 1Y4 Electronics Replacement IMG_0865.jpgIMG_0867.jpgIMG_0868.jpgIMG_0866.jpg
[Paco, Ian]

paco helped me wire the ETMY 1Y4 rack. We wired the following (copied from Koji's email):


Use DB9-DB9 to complete the wiring between

16bit DAC AI Chassis - End DAC Adapter (4 cables)
End DAC Adapter
    Reply  Mon Feb 28 19:15:10 2022, Tega, Update, VAC, Ongoing work to get the FRG gauges readouts to EPICs channels 
I decided to create an independent service for the XGS data readout so we can get this to work first before trying to integrate into current system.
After starting the service, I noticed that the EPICS channel were not updating as expected. So I started to debug the problem and managed to track it down
to an ip socket connect() error, i.e. we get a connection error for the ip address assigned to the LAN port to which the XGS box was connected. After trying
Entry  Tue Mar 1 16:01:14 2022, Paco, Update, Electronics, RFSoC 2x2 board -- setup for remote work & BALUN saga balun_adc1.pngPXL_20220302_001734121.jpg
[Tommy, Paco]

Since last week I've worked with tommy on getting the RFSoC 2x2 board to get some TFs from simple minicircuits type filters. The first thing
I did was set up the board (which is in the office area) for remote access. I hooked up the TCP/IP port to a wall ethernet socket (LIGO-04) and the caltech
    Reply  Tue Mar 1 19:26:24 2022, Koji, Update, SUS, ETMY SUS Electronics Replacement PXL_20220302_025723651.jpgPXL_20220302_030102033.MP.jpg
The replacement key switches and Ne Indicators came in. They were replaced and work fine now.

The power supply units were tested with the X end HeNe display. It turned out that one unit has the supply module for 1350V 4.9mA while the other
two do 1700V 4.9mA.
ELOG V3.1.3-