40m QIL Cryo_Lab CTN SUS_Lab TCS_Lab OMC_Lab CRIME_Lab FEA ENG_Labs OptContFac Mariner WBEEShop
  40m Log, Page 333 of 339  Not logged in ELOG logo
Entry  Tue Aug 25 16:33:31 2015, Ignacio, Steve, Configuration, PEM, Seismometer enclosure copper foil progress picture1.jpgpicture2.jpgIMG_1966.JPGIMG_1969.JPG
Steve ordered about two weeks ago a roll of 0.5 mm thick copper foil to be used for the inside of the seismometer cans.
The foil was then waterjet cut by someone in Burbank to the right dimensions (in two pieces, a side and a bottom for each of the three cans). 

Today, we glued the copper foil (sides only) inside the three seismometer cans. We used HYSOL EE4215/HD3561(
Entry  Thu Sep 3 00:14:09 2015, rana, Configuration, IOO, IMC fast gain change for lock acq 
The IMC often was making that scratchy noise when first catching lock and sometimes breaking. Thinking of the crappy crossover sit that EQ showed in
his latest plots, I decided that it didn't make sense to acquire lock with an unstable PZT/EOM crossover, so I have changed mcdown
to acquire with +13 dB Fast Gain and its much fast now and no longer makes that sound.
    Reply  Fri Sep 4 10:25:19 2015, Steve, Configuration, IOO, AOM stage is ready stage_AOM-EOM.jpgA-EOMholder.pdf
New stage can hold the correct polarization.

DRAWING CORRECTION:  Post block height was lowered to be 1.88" from 2.0"
    Reply  Mon Sep 7 18:25:16 2015, rana, Configuration, IOO, AOM stage is ready 
The new stage missed the right height by ~2 mm. 

Even if I completely bottom out the (New Focus 9071) 4-axis stage, its not short enough. So I removed the AOM from the beam and re-aligned into
Entry  Sun Oct 4 12:07:11 2015, jamie, Configuration, CDS, CSD network tests in progress 
I'm about to start conducting some tests on the CDS network.  Things will probably be offline for a bit.  Will post when things are back
to normal.
    Reply  Sun Oct 4 14:23:42 2015, jamie, Configuration, CDS, CSD network test complete 
I've finished, for now, the CDS network tests that I was conducting.  Everything should be back to normal.

What I did:

I wanted to see if I could make the EPICS glitches we've been seeing go away if I unplugged everything from the CDS martian switch in 1X6
    Reply  Sun Oct 4 14:32:49 2015, jamie, Configuration, CDS, CSD network test complete 45.png
Here's an example of the glitches we've been seeing, as seen in the StripTool trace of the front end oscillator:

You can clearly see the glitch at around T = -18.  Obviously during non-glitch times the sine wave is nice and cleanish (there are still
Entry  Wed Nov 11 22:50:39 2015, Koji, Configuration, CDS, Slow machine time&date 
I was gazing at the log file for Autolocker script (/opt/rtcds/caltech/c1/scripts/MC/logs/AutoLocker.log )
and found quite old time stamps. e.g.

Old : C1:IOO-MC_VCO_GAIN             1991-08-08 14:36:28.889032 -3
Entry  Tue Nov 17 15:49:23 2015, Koji, Configuration, IOO, MC Autolocker modified 
/opt/rtcds/caltech/c1/scripts/MC/AutoLockMC.csh  was modified last

1. Autolocker sometimes forget to turn off the MC2Tickle. I added the following lines to make sure to turn it off.
Entry  Thu Nov 19 17:06:57 2015, Koji, Configuration, CDS, Disabled auto-launching RT processes upon FE booting 
We want to startup the RT processes one by one on boot of FE machines.

Therefore /diskless/root/etc/rc.local on FB was modified as follows. The last sudo line was commented out.

for sys in $(/etc/rt.sh); do
Entry  Mon Jan 4 14:45:41 2016, rana, eq, koji, Configuration, Computer Scripts / Programs, nodus pwd change 
We changed the password for controls on nodus this afternoon. We also zeroed out the authorized_keys file and then added back in the couple that we want
in there for automatic backups / detchar.

Also did the recommended Ubuntu updates on there. Everything seems to be going OK so far. We think nothing on the interferometer side cares about
Entry  Wed Jun 8 13:50:39 2016, jamie, Configuration, CDS, Spectracom IRIG-B card installed on fb1 
[EDIT: corrected name of installed card]

We just installed a Spectracom TSyc-PCIe timing card on fb1.  The hope is that this will help with the GPS timeing syncronization
issues we've been seeing in the new daqd on fb1, hopefully elliminating some of the potential failure channels.
    Reply  Thu Jun 9 13:28:07 2016, jamie, Configuration, CDS, Spectracom IRIG-B card installed on fb1 
Something is wrong with the timing we're getting out of the symmetricom driver, associated with the new spectracom card.

controls@fb1:~/rtscore/tests/advLigoRTS-40m/src/drv/symmetricom 127$ lalapps_tconvert 
    Reply  Fri Jun 10 12:09:01 2016, jamie, Configuration, CDS, IRIG-B debugging 
Looks like we might have a problem with the IRIG-B output of the GPS receiver.

Rolf came over this morning to help debug the strange symmetricom driver behavior on fb1 with the new Spectracom card.  We restarted the
machine againt and this time when we loaded the drive rit was clocking at a normal rate (second/second).  However, the overall GPS time was still
    Reply  Fri Jun 10 12:21:54 2016, jamie, Configuration, CDS, GPS receiver not resetting properly 
The GPS receiver (EndRun Technologies box in 1Y5? (rack closest to door)) seems to not coming back up properly after the reboot.  The front pannel
says that it's "LKD", but the "sync" LED is flashing instead of solid, and the time of year displayed on the front panel is showing
day 6.  The fb1 symmetricom driver and VME timing module are still both seeing day 299, though.  So something may definitely be screwy with the
    Reply  Wed Jun 15 10:19:10 2016, Steve, Configuration, CDS, GPS antennas... debugging 6x
Visual inspection of rooftop GPS antennae:

The 2 GPS antennas are located on the north west corner of CES roof. Their condition looks well weathered. I'd
be surprised if they work. 
    Reply  Mon Jun 20 11:11:20 2016, Steve, Configuration, CDS, GPS receiver not resetting properly 
I called https://www.endruntechnologies.com/pdf/USM3014-0000-000.pdf 
and they said it's very likely just needs a software update. They will email Jamie the details.

    Reply  Mon Jun 20 11:19:41 2016, jamie, Configuration, CDS, GPS receiver not resetting properly 


I called https://www.endruntechnologies.com/pdf/USM3014-0000-000.pdf 
and they said it's very likely just needs a software update. They will email Jamie the details.
    Reply  Mon Jun 20 14:03:04 2016, jamie, Configuration, CDS, EndRun GPS receiver upgraded, fixed GPSreceiverWorking.jpg
I just upgraded the EndRun Technologies Tempus LX GPS receiver timing unit, and it seems to have fixed all the problems.

Thanks to Steve for getting the info from EndRun.  There was indeed a bug in the firmware that was fixed with a firmware upgrade.
Entry  Thu Aug 4 17:57:09 2016, Koji, Configuration, General, Don't restart apache2 - nodus /etc/apache2/sites-available/* accidentally deleted  
Late coming elog about the deletion of the apahce config files

Thu Aug 4 8:50ish 2016

Please don't restart apache2
Entry  Thu Oct 13 14:49:57 2016, Koji, Configuration, PEM, XLR(F)-XLR(M) cable took from the fibox to the Blue microphone 
[Gautam Koji]

XLR(F)-XLR(M) cable for the blue microphone is missing. Steve ordered one.

We found one in the fibox setup. As we don't use it during the vent, we use this cable for the microphone.
Entry  Thu Nov 3 16:30:42 2016, Lydia, Configuration, SUS, ETMX to coil matrix expanded 01.png
[ericq, lydia]


We believe the optimal OSEM damping would use an input matrix diagonalized to the free swing modes of the optic, and an output matrix which drives
Entry  Mon Jan 16 12:49:06 2017, rana, Configuration, Computers, Megatron update 
The "apt-get update" was failing on some machines because it couldn't find the 'Debian squeeze' repos, so I made some
changes so that Megatron could be upgraded.

I think Jamie set this up for us a long time ago, but now the LSC has stopped supporting these versions of the software. 
    Reply  Mon Jan 16 22:03:30 2017, jamie, Configuration, Computers, Megatron update 


We should consider
upgrading a few of our workstations to Ubuntu 14 LTS to see how painful it is to run our scripts and DTT and
Entry  Mon Feb 13 17:19:41 2017, yinzi, Configuration, , configuring ethernet for raspberry pi Screen_Shot_2017-02-13_at_5.11.52_PM.png
Gautam and I were able to get the Raspberry Pi up and running today, including being able to ssh into it from the control room.

Below are some details about the setup/procedure that might be helpful to anyone trying to establish Ethernet connection for a new RPi, or a
new operating system/SD card.
Entry  Thu Mar 9 20:38:19 2017, rana, Configuration, IOO, MC lock acquisition settings changed; no more HOM locks 
The MC was sort of misaligned. It was locking on some vertical HOMs. So I locked it and aligned the suspensions to the input beam (not great; we should
really align the input beam to the centered spots on the MC mirrors).

With the HOMs reduced I looked at the MC servo board gains which Guatam has been fiddling with. It seems that since the Mod Depth change we're
    Reply  Mon Apr 10 15:22:46 2017, rana, Configuration, Wiki, DokuWikis are back up 
AIC Wiki updated to latest stable version of DokuWiki: 2017-02-19b "Frusterick Manners" + CAPTCHA + Upgrade + Gallery PlugIns
Entry  Thu Apr 13 21:01:20 2017, rana, Configuration, Computers, LG UltraWide on Rossa LG34c.jpgcrack.jpg
we installed a new curved 34" doublewide monitor on Rossa, but it seems like it has a defective dead pixel region in it. Unless it heals itself
by morning, we should return it to Amazon. Please don't throw out he packing materials.

Steve 8am next morning: it is still bad The monitor is cracked. It got kicked while traveling. It's box is damaged
    Reply  Wed May 3 16:12:36 2017, johannes, Configuration, Computers, catastrophic multiple monitor failures monfight.jpg
It seems we lost three monitors
basically overnight. 

The main (landscape, left) displays of Pianosa, Rossa and Allegra are
    Reply  Wed May 3 16:46:18 2017, Koji, Configuration, Computers, catastrophic multiple monitor failures 
- Is there any machine that can handle 4K? I have one 4K LCD for no use.
- I also can donate one 24" Dell
    Reply  Thu May 4 09:52:43 2017, rana, Configuration, Computers, catastrophic multiple monitor failures 
That's a new failure mode. Probably we can't trust the power to be safe anymore.

Need Steve to order a couple of surge suppressing power strips for the monitors. The computers are already on the UPS,
so they don't need it.
    Reply  Tue May 9 15:23:12 2017, Steve, Configuration, Computers, catastrophic multiple monitor failures Trip-Lite.jpg
Gautam and Steve,

Surge protective power strip
was install on Friday, May 5 in the Control Room
    Reply  Mon May 15 20:43:25 2017, rana, Configuration, Computers, catastrophic multiple monitor failures 
this is not the right one; this Ethernet controlled strip we want in the racks for remote control.

Buy some
of these for the MONITORS.
Entry  Tue May 23 18:09:18 2017, Kaustubh, Configuration, General, Testing ET-3010 PD 
In continuation with the previous(ET-3040 PD) test.

The ET-3010 PD requires to be fiber coupled for optimal use. I will try to test this model without the fiber couple tomorrow and see whether
it works or not.
Entry  Fri Jun 16 18:21:40 2017, jigyasa, Configuration, Cameras, GigE camera IP  
One of the additional GigE cameras has been IP configured for use and installation. 

Static IP assigned to the camera-
Subnet mask-
    Reply  Wed Aug 2 15:04:15 2017, gautam, Configuration, Computers, control room workstation power distribution 
The 4 control room workstation CPUs (Rossa, Pianosa, Donatella and Allegra) are now connected to the UPS.

The 5 monitors are connected to the recently acquired surge-protecting power strips.

Rack-mountable power strip + spare APC Surge Arrest power strip have been stored in the electronics cabinet.
Entry  Tue Nov 21 17:51:01 2017, Koji, Configuration, Computers, nodus post OS migration admin 
The post OS migration admin for nodusa bout apache, elogd, svn, iptables, etc can be found in https://wiki-40m.ligo.caltech.edu/NodusUpgradeNov2017

Update: The svn dump from the old svn was done, and it was imported to the new svn repository structure. Now the svn command line and (simple)
web interface is running. And "websvn" was also implemented.
    Reply  Tue Nov 21 23:47:51 2017, gautam, Configuration, Computers, nodus post OS migration admin 
I restored the nodus crontab (copied over from the Nov 17 backup of the same at /opt/rtcds/caltech/c1/scripts/crontab/crontab_nodus.20171117080001. There
wasn't a crontab, so I made one using sudo crontab -e.

This crontab is supposed to execute some backup scripts, send pizza emails, check chiara disk usage, and backup the crontab itself.
    Reply  Wed Nov 22 11:51:38 2017, gautam, Configuration, Computers, nodus post OS migration admin 
Confirmed that this crontab is running - the daily backup of the crontab seems to have successfully executed, and there is now a file crontab_nodus.ligo.caltech.edu.20171122080001
in the directory quoted below. The $HOSTNAME
    Reply  Sun Dec 3 05:25:59 2017, gautam, Configuration, Computers, sendmail installed on nodus  
Pizza mail didn't go out last weekend - looking at logfile, it seems like the "sendmail" service was missing. I installed sendmail following
the instructions here: https://tecadmin.net/install-sendmail-server-on-centos-rhel-server/

Except that to start the sendmail service, I used systemctl and not init.d. i.e. I ran 
    Reply  Sun Dec 3 17:01:08 2017, Koji, Configuration, Computers, sendmail installed on nodus  
An email has come at 5PM on Dec 3rd.

Entry  Fri Jan 5 17:50:47 2018, rana, Configuration, Computers, motif on nodus 
I had to do 'sudo yum install motif' on nodus so that we could get libXm.so.4 so that we could run MEDM. Works now.
Entry  Fri Jan 5 19:19:25 2018, rana, Configuration, SEI, Barry Controls 'air puck' instead of 'VOPO style' breadboard mm_slm.jpgScreen_Shot_2018-01-05_at_7.25.47_PM.png
We've been thinking about putting in a blade spring / wire based aluminum breadboard on top of the ETM & ITM stacks to get an extra factor of
10 in seismic attenuation.

Today Koji and I wondered about whether we could instead put something on the outside of the chambers. We have frozen the STACIS system because
Entry  Wed Jan 10 14:17:57 2018, johannes, Configuration, Computer Scripts / Programs, autoburt no longer making backups 
I was looking into setting up autoburt for the new c1auxex2 and found that it stopped making automatic backups for all machines after the beginning of
the new year. There is no 2018 folder (it
was the only one missing) in /opt/rtcds/caltech/c1/burt/autoburt/snapshots and the /latest/
    Reply  Wed Jan 10 15:25:43 2018, johannes, Configuration, Computer Scripts / Programs, autoburt making backups again 


I manually created the /opt/rtcds/caltech/c1/burt/autoburt/snapshots/2018/ directory. Maybe this
fixes the hickup? Gotta wait about 30 minutes.
    Reply  Wed Jan 10 16:27:02 2018, Steve, Configuration, SEI, load cell for weight measurement stacis3LoadCells.png
We could use similar load cells   to make the actual weight measurement
on the Stacis legs. This seems practical in our case.

I have had bad experience with pneumatic Barry isolators.
    Reply  Fri Jan 12 12:31:04 2018, gautam, Configuration, Computers, sendmail troubles on nodus  
I'm having trouble getting the sendmail service going on nodus since the Christmas day power failure - for some reason, it seems
like the mail server that sendmail uses to send out emails on nodus (mx1.caltech.iphmx.com,
IP= is on a 
    Reply  Fri Jan 12 16:01:27 2018, Koji, Configuration, Computers, sendmail troubles on nodus  
I personally don't like the idea of having sendmail (or something similar like postfix) on a personal server as it requires a lot of maintenance
cost (like security update, configuration, etc). If we can use external mail service (like gmail) via gmail API on python, that would easy our worry, I
    Reply  Fri Jan 12 18:22:09 2018, gautam, Configuration, Computers, sendmail troubles on nodus  
Okay I will port awade's python mailer stuff for this purpose.

gautam 14Jan2018 1730: Python mailer has been implemented: see here for the files. On shared
    Reply  Sat Jan 13 02:36:51 2018, rana, Configuration, Computers, sendmail troubles on nodus  
I think sendmail is required on nodus since that's how the dokuwiki works. That's why the dokuwiki was trying to send an email to Umakant.
ELOG V3.1.3-