40m QIL Cryo_Lab CTN SUS_Lab CAML OMC_Lab CRIME_Lab FEA ENG_Labs OptContFac Mariner WBEEShop
  40m elog, Page 128 of 357  Not logged in ELOG logo
    Reply  Thu Jun 22 00:47:00 2023, Koji, Update, , IFO working after ETMX electronics upgrade PXL_20230621_235639337.jpg
[Mayank, Koji]

ETMX Sat amp (D080276) CH3 PD receiver circuit fixed.

At today's meeting, Yuta reported that ETMX LL OSEM had no response.
    Reply  Thu Jun 22 01:04:42 2023, Koji, Update, , IFO recovery 
I wanted to check the oplev functionality but the IFO was not well aligned. So started the CDS recovery.

Here is the procedure

- Played a CDS restarting whack-a-mole: a host suffered from DACKILL (DK), so reboot the machine. And this made the other
    Reply  Thu Jun 22 22:34:43 2023, Koji, Update, , IFO recovery 
[Hiroki, Mayank, Koji]

The X end PZT driver for green alignment:

The driver module was inserted to the Eurocard crate. Turned on the 100V HV supply. There was nothing dramatic seemed to happen.
Entry  Thu Jun 22 23:09:32 2023, Koji, Update, ALS, X end green beam alignment 
[Hiroki, Mayank, Ruben, Koji]

As we expected that the X-end PZT steerers takes more times to be recovered, we decided to align the X-end beam with the PZTs not energized.

Because of some green alignment effort by the cavity mirrors earlier today (no elog seen yet), the Xarm IR alignment was found to be completely
Entry  Mon Jun 26 10:21:44 2023, Koji, Update, CDS, Deleted harmful script link on the IFO ALIGN screen Screenshot_2023-06-26_10-20-19.png
There were a few scripts linked on the IFO ALIGN screen. These silently ran ASS and leave (possible) offsets in ASS. When the script was run secondtime,
the manual alignment was destroyed.
I deleted them from the screen as they were harmful.  
Entry  Mon Jun 26 13:11:18 2023, Koji, Update, VAC, N2 Vent Screenshot_2023-06-26_12-57-01.pngOSEMs_log.tar.gzScreenshot_2023-06-26_16-51-53.pngScreenshot_2023-06-26_16-52-15.png
[Yehonathan, Mayank, Hiroki, JC, Koji]

Vent prep from 10AM

IMC/arms are flashing / PRM / SRM aligned / BHD LO visible on the BHD camera
Oplevs aligned (Attachment 1)
Entry  Mon Jun 26 18:37:35 2023, Koji, Update, safety, 40m Lab Laser Safe 
40m Lab is now Laser Safe

- The PSL NPRO (Innolight) was turned off with the OFF switch and the key. The LD set current was 2.100A. The crytsal temp setpoint was 30.61degC.
  The PSL AUX NPRO (LWE) was already off.
Entry  Tue Jun 27 19:19:17 2023, Koji, Summary, General, 5ft x 12 ft x 2ft optical table removal 8x

The large optical table (5ft x 12ft x 2ft, previously called SP table) was moved from the 40m lab. (Attachment 1)
The contractor did a professional job and successfully transported the optical plate to the Synchrotron building without damaging the 40m facility.
    Reply  Tue Jun 27 19:49:37 2023, Koji, Update, VAC, Pumping down attemp 
[Mayank, Hiroki, Yuta, JC, Koji]

After JC came back from the optical table placement at Synchrotron, we tried to pump down the 40m vacuum.
However, we were unable to change the gate valves.
Entry  Wed Jun 28 11:54:23 2023, Koji, Update, General, 40m LASER HAZARD 
40m has been transitioned to LASER HAZARD now.

PSL/ETMX/ETMY NPROs were turned on.
Radhika can turn on the PSL AUX laser.
Entry  Thu Jun 29 01:52:26 2023, Koji, Summary, General, IFO back in operation 
[Mayank, Hiroki, Koji]

Once we reached 1~2mtorr, we opened the PSL shutter.

The IMC was immediately locked and aligned with the WFS.
    Reply  Thu Jun 29 20:10:17 2023, Koji, Update, VAC, Pumping down 
Towards Vacuum Normal

Closed V7 (Main volume pumped by TP1/TP2)
Opened VA6 (Annuli pumped by TP3)

I kept having trouble controlling
TP2 from EPICS. So, temporarily the controller was set to "FRONT" (PANEL) mode rather than "SERIAL" mode. This problem should be fixed.
    Reply  Fri Jul 7 15:24:38 2023, Koji, Configuration, Daily Progress, Alignment and restoring the IFO 
The incompleteness of burtrestore is a critical issue. We need to track down what is the issue.

    Reply  Fri Jul 7 20:09:53 2023, Koji, Summary, ASC, IFO alignment is in a strange state 
Before any trial at the ETMX suspension, ETMX coil driver "Run" mode (a sort of dewhitened mode) is ON at the coil driver. The "Binary
Input" short plugs should be modified to turn them to "Run" mode.
    Reply  Tue Jul 11 17:21:58 2023, Koji, Update, VAC, Pumping down 
Manually switched TP2 to "Low Speed (LS)" mode (aka "Stand by")

    Reply  Thu Jul 13 17:05:10 2023, Koji, Update, General, Green laser at Y-End 
The LED blinking on the head is normal. We can ignore that.

It is likely that the controller is the issue. I brought the PSL AUX laser controller to the Y End, and the laser turned on / the green
light was visible.
    Reply  Thu Jul 13 19:34:08 2023, Koji, Update, General, Green laser at Y-End PXL_20230714_022929454.jpgPXL_20230714_020316857.jpgPXL_20230714_022359718.jpgPXL_20230714_022412011.jpg
Borrowed an NPRO controller from Liyuan @ Downs B138

Model M125/6-OPN-PA
SN 359M
    Reply  Tue Jul 18 14:47:03 2023, Koji, Update, Daily Progress, T&R measurement setup for PR2 
What's the nominal AOI for the mirror and the T value at that angle in a number? We will need that later.

Entry  Thu Jul 20 17:28:03 2023, Koji, Update, BHD, BHD Platform OMC cables image001.png
Dean made the OMC cables for the BHD Platform. They are going through the C&B process.

From left to right: QPD cable, PZT cable with Picomotor etc, DCPD cables
    Reply  Mon Jul 24 17:25:41 2023, Koji, Update, PEM, ADC/DAC setup of the temp sensor / heater for the X End Seismometer enclosure Screenshot_2023-07-24_23-41-21.pngScreenshot_2023-07-24_23-42-50.png
[Koji, Advait]


Spare ADC/DAC channels were prepared for Advait's experiment.
    Reply  Mon Jul 24 23:01:10 2023, Koji, Summary, CDS, FIXED: rossa can't boot 
Compared the network settings between some of the machines.

It seemed that we can write network settings into /etc/network/interfaces. (Comment lines omitted)

source /etc/network/interfaces.d/*
    Reply  Tue Jul 25 10:22:09 2023, Koji, Update, PEM, Remarks on the IFO recovery after CDS restart. 
Yesterday during the recovery work from the CDS restart, I found ASS was not working for both arms. Both arms were flashing and locking, but their alignment
seemed suboptimal.

Also, something seemed wrong: For example, the ITMX was too excited when the OPLEV servos were on. The arm locking was achieved when the ITMX
    Reply  Thu Jul 27 10:43:58 2023, Koji, Update, ALS, OLTFS of digital controller 
Wow, this is awesome. Can you plot the comparison between the measured and expected OLTFs for both (or either) Moku cases?
At low freq, the measurement of OLTFs gets difficult due to high loop suppression and the estimation will give us an idea of how the loop can be
Entry  Thu Jul 27 17:03:57 2023, Koji, Summary, CDS, c1psl spare channel situation PXL_20230727_022827086.jpg
I looked at the Acromag situation of c1psl to prepare for the PSL air flow speed sensor.
Someone clever did a great job of binding all the spare channels into DB37s.

The pin-outs and channel assignments are all listed in a Google spreadsheet. The link can be found on the following wiki page.
    Reply  Thu Jul 27 18:21:33 2023, Koji, Update, ALS, OLTFS of digital controller OLTF_Comparison2.pdf
Here is the OLTF from the model of the system I made in Python. https://github.com/CaltechExperimentalGravity/LaserStabilization/blob/main/code/PlantSim/plant_model.py

With this model, I should be able to plug in potential optimal controllers and see how the OLTF might improve. The green line shows the OLTF
    Reply  Fri Jul 28 00:27:17 2023, Koji, Update, PEM, ITMX issue continues 
Even though the noise issue of an OSEM was resolved, the issue with ITMX still continues.
OPLEV pitch servo can't be turned on as it induces the suspension running. So there is something systematically wrong with the suspension.

This requires some checking of the whitening / dewhitening situation, or even other unknown cause.
    Reply  Sat Jul 29 00:44:57 2023, Koji, Update, PEM, Remarks on the IFO recovery after CDS restart. ITMX_TF.pdfITMY_TF.pdfETMX_TF.pdfETMY_TF.pdf
I had a suspicion that some of the ITMX coils were not properly working. So individual coils of the 4 test masses were excited while the arm-locking
servo output was observed.

The servo output of the arm locking (denoted as 
    Reply  Mon Jul 31 22:25:07 2023, Koji, Update, PEM, FIXED: Strange behavior of ITMX and ITMY probably due to DAC issue PXL_20230731_233855623.MP.jpgPXL_20230731_235323818.jpgPXL_20230801_033401354.MP.jpgPXL_20230801_033332906.MP.jpg
[Hiroki, Yehonathan, Yuta, Koji]


The c1sus DAC0 issue seemed to be the driving capability of the DAC card.
    Reply  Wed Aug 2 14:50:22 2023, Koji, Update, PSL, FIXED: Remote switching of PSL shutter is not working 
[JC Koji]
c1vac was hard rebooted. This fixed the PSL shutter issue.

Checked the Unibritz Shutter Controller for the PSL shutter. It seems that it responds to the NO/NC switch no matter how the
    Reply  Wed Aug 2 17:17:37 2023, Koji, Update, PSL, IMC Locking (FIXED: Remote switching of PSL shutter is not working) 
After the exploration of c1psl, the IMC locking was not functioning well. It looked like the MC autolocker issue.

Now I remember that the autolocker was running on docker. I followed the instruction on the wiki page. https://wiki-40m.ligo.caltech.edu/Computers_andScripts/AlwaysRunningScripts

Remember: Docker is running on optimus / systemctl is running on megatron!
Entry  Thu Aug 3 17:27:07 2023, Koji, Update, CDS, Slow machine target folder clean up 
I went to /cvs/cds/caltech/target and found some folders for apparently old targets.
Entry  Thu Aug 3 21:35:50 2023, Koji, Configuration, PEM, PSL Flow speed sensor channels added 
As the preparation of the flow sensor installation, I added two slow channels via c1psl (Acromag IOC).
Entry  Fri Aug 4 20:50:13 2023, Koji, Summary, CDS, The location where the wiper script is running 
The raw frame file is stored in /frames at fb. Before the disk space is flooded, the wiper script deletes the old raw frame files.
I wonder what the state of the wiper script is.

There are wiper scripts (wiper.pl) in /opt/rtcds/caltech/c1/target/fb and /opt/rtcds/caltech/c1/target/daqd, but they no longer seemed to be
    Reply  Sat Aug 5 01:42:19 2023, Koji, Update, PEM, c1sus DAC1/DAC2 negative side DAC outputs were isolated from the downstream chain 9x
As reported already, we resolved the c1sus DAC0 issue by introducing the differential receivers for the DAC output CHs.

The issue remained in DAC1 (SRM/MC2/MC1/MC3) and DAC2 (All 8 vertex side OSEMs). Their outputs were still received by the single-ended AI boards.
This meant that DAC1 and DAC2 negative side outputs were shorted to ground. This was not great.
Entry  Sat Aug 5 01:46:01 2023, Koji, Update, Optical Levers, BS/PRM/SRM Oplev dead Screenshot_2023-08-05_08-52-18.pngScreenshot_2023-08-05_08-56-26.png
[Koij Hiroki]

While KA was working on the DAC issue, BS/PRM/SRM Oplev died.

It seems that the BS/PRM/SRM HeNe died and was replaced in 2019 (4yrs + 200 days ago) and 2021 Jan (2yrs + 209 days ago).
Entry  Fri Aug 11 20:44:00 2023, Koji, Update, PSL, CDS crash / PMC recovery and mystery / IFO recovery Screenshot_2023-08-11_22-04-41.pngScreenshot_2023-08-11_at_23.09.49.png
[JC, Koji]

In the morning, JC came in and found that c1sus had crashed. JC tried to save the situation by rebooting the host, inevitably, all the CDS machines
needed to be rebooted.
    Reply  Mon Aug 14 15:16:40 2023, Koji, Update, IOO, PMC offset voltage issue fixed. IMC WFS recentered and offsets zeroed.  
1. Well, it seems that the PMC error offset issue still remains.

2. The IMC transmon QPD had been aligned for some reference e.g. Max transmission, Center of the MC2 mirror,
lowest noise, or else. It's not arbitrary.
    Reply  Tue Aug 15 00:41:17 2023, Koji, Update, IOO, PMC issue cont'd Screenshot_2023-08-15_07-40-32.pngScreenshot_2023-08-15_07-40-39.png
I went down to the IFO hall and checked the PMC situation. The freq mixer fixed on the rack 1X1 had BNC-T, so the raw error was checked while the PMC
was swept around the resonance.
The error signal was ~1mVpp while there is ~1mV offset. 
Entry  Tue Aug 15 00:44:29 2023, Koji, Update, General, ELOG slowness fixed 
Elog was continuously accessed by net crawlers or something similar. They continuously retrieve random logs and also randomly hits the entries with invalid
attachments. The invalid attachments call "convert" to make thumbnails, but fail. Because the crawlers fail to obtain the thumbnails, they try
the same URL again, and again.
    Reply  Tue Aug 15 17:11:17 2023, Koji, Update, IOO, FIXED: PMC issue 7x

The problem in the PMC Frequency Reference Card (35.5MHz) was fixed.
The last opamp stage of the attenuator control (LT1125) had the negative rail, and the EOM drive level was maximally attenuated.
Entry  Wed Aug 16 17:16:13 2023, Koji, Update, General, BHD / Misc Inventory 11x
== BHD Components ==

We still have a spare BHD BS @South end optics cabinet. (Attachment 1)
    Reply  Tue Aug 22 15:56:53 2023, Koji, Update, General, BHD / Misc Inventory 
Photodiode inventory: [OMC ELOG 615]
Entry  Wed Aug 23 19:47:53 2023, Koji, Update, CDS, Dolphin Fencing Investigation / Full CDS crash / nodus reboot / recovered all 
Dolphin Investigation

- I made a basic description on a wiki page: https://wiki-40m.ligo.caltech.edu/CDS/DolphinSwitch

- Investigation crashed c1lsc/c1sus/c1iscex/c1sus2. Well, it's time to test the dolphin fencing. It
Entry  Thu Aug 24 02:54:19 2023, Koji, Update, BHD, OMC Interface Aligner / BHD OFI arrangement Screenshot_2023-08-24_at_02.50.23.pngScreenshot_2023-08-24_at_02.51.53.pngScreenshot_2023-08-24_at_02.52.32.png
OMC Interface Aligner - (It's upside down...)

BHD OFI arrangement
    Reply  Thu Aug 24 17:08:38 2023, Koji, Update, General, Excess noise on YALS BEAT 
Paco took the data which means he already had the beat note.

There is some chance that the beat was recovered after some mode "jumps" but usually the temp gap for the same beat frequency is ~2degC.
So my speculation is that there is a big temp gradient in the crystal now and had to compensate it with the struggle of the crystal TEC.
    Reply  Fri Aug 25 20:27:33 2023, Koji, Update, BHD, OMC Interface Aligner Screenshot_2023-08-25_at_20.26.46.png
A bit improved the design of OMC Interface Aligner

The idea is...The OMC I/F aligner covers the OMC for aligning the kinematic mounts (3 pairs of a V-groove and a ball) on the OMC. This makes
the kinematic mount of two OMCs identical.
    Reply  Fri Aug 25 22:52:30 2023, Koji, Update, General, Taking nodus /home/export backup 
Took the backup (snapshot) of nodus' /home/export as of Aug 25, 2023

controls@nodus> cd /cvs/cds/caltech/nodus_backup
controls@nodus> rsync -ah --progress --delete /home/export ./export_230825 >rsync.log&
    Reply  Tue Aug 29 01:39:47 2023, Koji, Update, General, BHD / Misc Inventory 
40m BHD OFI Inventory


Motorized Rotary Stage Thorlabs PDR1V Qty 1
0.5inch HWP: QWPO-1064-05-2 
Entry  Tue Aug 29 02:02:51 2023, Koji, Update, BHD, BHD Prep Status 
Ready / Soon Ready
- BHD OMC Cables ready
- OMC#1 / OMC#4 ready
Entry  Tue Sep 5 18:46:08 2023, Koji, Summary, General, Dsub 9 (DB9) cable inventory 
I went to Section Y7 to check the stock DB9-MF cables. The custom dsub cables are also there.

DB9 1FT / QTY 26
DB9 2.5FT / QTY 42
DB9 5FT / QTY 49
DB9 10FT / QTY 30
DB9 15FT / QTY 9

say this is (26, 42, 49, 30, 9)
ELOG V3.1.3-