40m QIL Cryo_Lab CTN SUS_Lab TCS_Lab OMC_Lab CRIME_Lab FEA ENG_Labs OptContFac Mariner WBEEShop
  40m Log, Page 4 of 327  Not logged in ELOG logo
ID Date Author Type Category Subject Text Attachments
  16333   Wed Sep 15 23:38:32 2021 KojiUpdateALSALS ASX PZT HV was off -> restoredIt was known that the Y end ALS PZTs are
not working. But Anchal reported in the meeting
that the X end PZTs are not working too.
 P_20210915_151333.jpg 
  16332   Wed Sep 15 11:27:50 2021 YehonathanUpdateCDSc1auxey assembly{Yehonathan, Paco}

We turned off the ETMX watchdogs
and OpLevs. We went to the X end and shut
 c1auxex_Grounding_OSEM_comparison1.pdfc1auxex_Grounding_OSEM_comparison2.pdf 
  16331   Tue Sep 14 19:12:03 2021 KojiSummaryPEMExcess seismic noise in 0.1 - 0.3 Hz bandLooks like this increase is correlated
for BS/EX/EY. So it is likely to be real.

Comparison between 9/15
 C1-ALL_393F21_SPECTRUM-1315699218-86400.pngC1-ALL_393F21_SPECTRUM-1315267218-86400.png 
  16330   Tue Sep 14 17:22:21 2021 AnchalUpdateCDSAdded temp sensor channels to DAQ list[Tega, Paco, Anchal]

We attempted to reboot fb1 daqd
today to get the new temperature sensor channels
  
  16329   Tue Sep 14 17:19:38 2021 PacoSummaryPEMExcess seismic noise in 0.1 - 0.3 Hz bandFor the past couple of days the 0.1 to
0.3 Hz RMS seismic noise along BS-X has increased.
Attachment 1 shows the hour trend in the
 SEIS_2021-09-14_17-33-12.png 
  16328   Tue Sep 14 17:14:46 2021 KojiUpdateSUSSOS Tower HardwareYup this is OK. No problem.

 
  
  16327   Tue Sep 14 16:44:54 2021 jamieFrogsCDSfb1 /var full after reboot, caused all sorts of problemsJonathan Hanks pointed me to this fix to
the gpstime kernel module that was unfortunately
put in after the 3.4 release that we're
  
  16326   Tue Sep 14 16:12:03 2021 JordanUpdateSUSSOS Tower HardwareYehonathan noticed today that the silver
plated hardware on the assembled SOS towers
had some pretty severe discoloration on it.
 20210914_160111.jpg 
  16325   Tue Sep 14 15:57:05 2021 jamieFrogsCDSfb1 /var full after reboot, caused all sorts of problems/var on fb1 filled up today, which caused
all sorts of CDS issues.  I found out
about the problem by reading the logs of
  
  16324   Mon Sep 13 18:19:25 2021 TegaUpdateComputer Scripts / ProgramsMoved modbus service from chiara to c1susaux[Tega, Anchal, Paco]

After talking to Anchal, it was
made clear that chiara is not the place to
  
  16323   Mon Sep 13 17:05:04 2021 TegaSummaryPEMInfrasensing temperature sensor modbus configurationAnchal mentioned it would be good to put
more details about how I arrived at the values
needed to configure the modbus drive for
  
  16322   Mon Sep 13 15:14:36 2021 AnchalUpdateLSCXend Green laser injection mirrors M1 and M2 not responsiveI was showing some green laser locking
to Tega, I noticed that changing the PZT
sliders of M1/M2 angular position on Xend
  
  16321   Mon Sep 13 14:32:25 2021 YehonathanUpdateCDSc1auxey assemblySo we agreed that the RTNs points on the
c1auxex Acromag chassis should just be grounded
to the local Acromag ground as it just needs
 ETMX_OSEMS_Noise.png 
  16320   Mon Sep 13 09:15:15 2021 PacoUpdateLSCMC unlocked?Came in at ~ 9 PT this morning to find
the IFO "down". The IMC had lost
its lock ~ 6 hours before, so at about 03:00
 VAC_2021-09-13_09-32-45.png 
  16319   Mon Sep 13 04:12:01 2021 TegaUpdateGeneralAdded temperature sensors at Yend and Vertex tooI finally got the modbus part working on
chiara, so we can now view the temperature
data on any machine on the martian network,
 Screen_Shot_2021-09-13_at_4.16.22_AM.png 
  16318   Thu Sep 9 09:54:41 2021 StephenSummaryBHDBHD OMC invacuum wiring - cable lengths[Koji, Stephen - updated 30 September]

Cable lengths task - in vacuum
cabling for the green section (new, custom
 bhd_cable_length_check_cable_bracket_to_components.pngbhd_cable_length_check_flange_to_cable_bracket.pngbhd_cable_length_check_cable_bracket_to_omc_bracket.png 
  16317   Wed Sep 8 19:06:14 2021 KojiUpdateGeneralBackup situationTega mentioned in the meeting that it could
be safer to separate some of nodus's
functions from the martian file system.
  
  16316   Wed Sep 8 18:00:01 2021 KojiUpdateVACcronjobs & N2 pressure alertIn the weekly meeting, Jordan pointed out
that we didn't receive the alert for
the low N2 pressure.
  
  16315   Tue Sep 7 18:00:54 2021 TegaSummaryCalibrationSystem Identification via line injection[paco]

This morning, I spent some time
restoring the jupyter notebook server running
 raw_timeseries.pdfdemod_signals.pdfcal_noise_asd.pdf 
  16314   Fri Sep 3 02:03:15 2021 TegaSummaryComputersStrip down large error filesAlso deleted the ~50GB error files from
ldas to prevent rsync from copying them
to nodus again. With the new update to GWsumm,
  
  16313   Thu Sep 2 21:49:03 2021 PacoSummaryComputerschiara down, vac interlock tripped[tega, paco]

We found the files that took excess
space in the chiara filesystem (see Attachment
 2021-09-02_21-51-15.png 
  16312   Thu Sep 2 21:21:14 2021 KojiSummaryComputersVacuum recovery 2Attachment 1:
We are pumping the main volume with
TP2. Once P1a reached the pressure ~2.2mtorr,
 Screenshot_2021-09-02_21-20-24.pngScreenshot_2021-09-02_21-20-48.png 
  16311   Thu Sep 2 20:47:19 2021 KojiUpdateCDSChiara DHCP restarted[Paco, Tega, Koji]

Once chiara's DHCP is back,
things got much more straight forward.
  
  16310   Thu Sep 2 20:44:18 2021 KojiUpdateCDSChiara DHCP restartedWe had the issue of the RT machines rebooting.
Once we hooked up the display on c1iscex,
it turned out that the IP was not given at
  
  16309   Thu Sep 2 19:47:38 2021 KojiUpdateCDSThis week's FB1 GPS Timing Issue SolvedAfter the reboot daqd_dc was not working,
but manual starting of open-mx / mx services
solved the issue.
  
  16308   Thu Sep 2 19:28:02 2021 KojiUpdate This week's FB1 GPS Timing Issue SolvedAfter the disk system trouble, we could
not make the RTS running at the nominal state.
A part of the troubleshoot FB1 was rebooted.
  
  16307   Thu Sep 2 17:53:15 2021 PacoSummaryComputerschiara down, vac interlock tripped[paco, koji, tega, ian]

Today in the morning the name server
/ network file system running in chiara failed.
  
  16306   Wed Sep 1 21:55:14 2021 KojiSummaryGeneralTowards the end upgrade- Sat amp
mod and test: on going (Tega)
- Coil driver mod and test: on going
  
  16305   Wed Sep 1 14:16:21 2021 JordanUpdateVACEmpty N2 TanksThe right N2 tank had a bad/loose valve
and did not fully open. This morning the
left tank was just about empty and the right
  
  16304   Tue Aug 31 14:55:24 2021 ranaSummaryLSCXARM POX OLTFthis model doesn't seem to include
the analog AA, analog AI, digital AA, digital
AI, or data transfer delays in the system.
  
  16303   Mon Aug 30 17:49:43 2021 PacoSummaryLSCXARM POX OLTFUsed diaggui to get OLTF in preparation
for optimal system identification / calibration.
The excitation was injected at the control
 XARM_POX_OLTF.pdfXARM_POX_Coh.pdf 
  16302   Thu Aug 26 10:30:14 2021 JamieConfigurationCDSfront end time synchronization fixed?I've been looking at why the front
end NTP time synchronization did not seem
to be working.  I think it might not
  
  16300   Thu Aug 26 10:10:44 2021 PacoUpdateCDSFB is writing the frames with a year old date[paco, ]

We went over the X end to check
what was going on with the TRX signal. We
 Screenshot_from_2021-08-26_10-09-50.pngTRXTRY_Spectra.pdf 
  16299   Wed Aug 25 18:20:21 2021 JamieUpdateCDSGPS time on fb1 fixed, dadq writing correct frames againI have no idea what happened to the GPS
timing on fb1, but it seems like the issue
was coincident with the power
  
  16298   Wed Aug 25 17:31:30 2021 PacoUpdateCDSFB is writing the frames with a year old date[paco, tega, koji]

After invaluable assistance from
Jamie in fixing this yearly offset in the
 TRX_noise_2021-08-25_17-40-55.pngTRX_TRY_power_spectra.pdf 
  16297   Wed Aug 25 11:48:48 2021 YehonathanUpdateCDSc1auxey assemblyAfter confirming that, indeed, leaving
the RTN connection floating can cause reliability
issues we decided to make these connections
  
  16296   Wed Aug 25 08:53:33 2021 JordanUpdateSUS2" Adapter Ring for SOS Arrived 8/24/218 of the 2"->3" adapter rings
(D2100377) arrived from RDL yesterday. I
have not tested the threads but dimensional
 20210824_152259.jpg20210824_152259.jpg20210824_152308.jpg 
  16295   Tue Aug 24 22:37:40 2021 AnchalUpdateGeneralTime synchronization not really workingI attempted to install chrony and run it
on one of the FE machines. It didn't
work and in doing so, I lost the working
  
  16294   Tue Aug 24 18:44:03 2021 KojiUpdateCDSFB is writing the frames with a year old dateDan Kozak pointed out that the new frame
files of the 40m has not been written in
2021 GPS time but 2020 GPS time.
 Screen_Shot_2021-08-24_at_18.46.24.png 
  16293   Tue Aug 24 18:11:27 2021 PacoUpdateGeneralTime synchronization not really workingtl;dr: NTP servers and clients
were never synchronized, are not synchronizing
even with ntp... nodus is synchronized but
  
  16292   Tue Aug 24 09:22:48 2021 AnchalUpdateGeneralTime synchronization working nowJamie told me to use chroot to log in into
the chroot jail of debian os that are exported
for the FEs and install ntp there. I took
  
  16291   Mon Aug 23 22:51:44 2021 AnchalUpdateGeneralTime synchronization effortsRelated elog thread: 16286


I didn't really achieve
anything but I'm listing what I've
  
  16290   Mon Aug 23 19:00:05 2021 KojiUpdateGeneralCampus Wide Power Glitch Reported: Monday, 8/23/21 at 9:30am Restarting the RTS was unsuccessful because
of the timing discrepancy error between the
RT machines and the FB. This time no matter
  
  16289   Mon Aug 23 15:25:59 2021 Ian MacMillanUpdateCDSSUS simPlant modelI am adding a State-space block to the
SimPlant cds model using the example Chris
gave. I made a new folder in controls
 SimPlantStateSpace.zip 
  16288   Mon Aug 23 11:51:26 2021 KojiUpdateGeneralCampus Wide Power Glitch Reported: Monday, 8/23/21 at 9:30am Campus
Wide Power Glitch Reported:
Monday, 8/23/21 at 9:30am (more like 9:34am
  
  16287   Mon Aug 23 10:17:21 2021 PacoSummaryComputerssystem reboot glitch[paco]

At 09:34 PST I noted a glitch in
the controls room as the machines went down
  
  16286   Fri Aug 20 06:24:18 2021 AnchalUpdateCDSTime synchornization not runningI read on some stack exchange that 'NTP
synchornized' indicator turns 'yes'
in the output of command timedatectl only
  
  16285   Fri Aug 20 00:28:55 2021 AnchalUpdateCDSTime synchornization not runningI added ntpserver as a known host name
for address 192.168.113.201 (fb1's address
where ntp server is running) in the martian
  
  16284   Thu Aug 19 14:14:49 2021 KojiUpdateCDSTime synchornization not running131.215.239.14 looks like Caltech's
NTP server (ntp-02.caltech.edu)
https://webmagellan.com/explore/caltech.edu/28415b58-837f-4b46-a134-54f4b81bee53
  
  16283   Thu Aug 19 03:23:00 2021 AnchalUpdateCDSTime synchornization not runningI tried to read a bit and understand the
NTP synchronization implementation in FE
computers. I'm quite sure that NTP synchronization
  
ELOG V3.1.3-