40m QIL Cryo_Lab CTN SUS_Lab TCS_Lab OMC_Lab CRIME_Lab FEA ENG_Labs OptContFac Mariner WBEEShop
  40m Log, Page 52 of 341  Not logged in ELOG logo
ID Date Author Type Categoryup Subject Text Attachments
  12769   Sat Jan 28 12:05:57 2017 jamieUpdateCDStest of new daqd code on fb1


  
  12770   Mon Jan 30 18:41:41 2017 jamieUpdateCDSTEST ABORTED of new daqd code on fb1I just aborted the fb1 test and reverted
everything to the nominal configuration. 
Everything looks to be operating nominally. 
  
  12776   Tue Jan 31 15:08:13 2017 ericqMetaphysicsCDSMinute Trend KoanA novice was learning at the feet of Master
Daqd. At the end of the lesson he looked
through his notes and said, “Master,
  
  12777   Tue Jan 31 17:28:36 2017 ranaSummaryCDSMinute Trend KoanSomeone installed "Debian" on
allegra. Why? Dataviewer doesn't work
on there. Is there some advantage to making
  
  12779   Tue Jan 31 20:25:26 2017 ericqSummaryCDSMinute Trend Koan


  
  12781   Tue Jan 31 22:15:02 2017 JohannesUpdateCDSvme crate backplane adapter boardsI made a crude sketch for how Lydia and
I envision the connector situation on the
back of the vme crates to be solved. Essentially
 vme_backplane_conn_sketch.jpg 
  12791   Thu Feb 2 18:28:29 2017 ranaSummaryCDSMinute Trend Koanand the song remains the same...

the version of SVN on these workstations
is ahead of the one on the other workstations
  
  12794   Fri Feb 3 11:03:06 2017 jamieUpdateCDSmore testing fb1; DAQ DOWN DURING TESTMore testing of fb1 today.  DAQ DOWN
UNTIL FURTHER NOTICE.

Testing Wednesday did not resolve
  
  12796   Fri Feb 3 11:40:34 2017 ericqSummaryCDS/cvs/cds/caltech/chans back on svn1.6I was able to bring back svn 1.6 formatting
to /cvs/cds/caltech/chans by doing the following
on nodus:
  
  12797   Sat Feb 4 12:00:59 2017 ranaSummaryCDS/cvs/cds/caltech/chans back on svn1.6True - its an issue. Koji and I are updating
zita into Ubuntu16 LTS. If it looks like
its OK with various tools we'll swap
  
  12798   Sat Feb 4 12:20:39 2017 jamieSummaryCDS/cvs/cds/caltech/chans back on svn1.6


  
  12799   Sat Feb 4 12:29:20 2017 jamieSummaryCDS/cvs/cds/caltech/chans back on svn1.6No, not confused on that point. We just
will not be testing OS versions at the 40m
or running multiple OS's on our workstations.
  
  12800   Sat Feb 4 12:50:01 2017 jamieSummaryCDS/cvs/cds/caltech/chans back on svn1.6


  
  12803   Mon Feb 6 15:18:08 2017 gautamUpdateCDSslow machine bootfestHad to reboot c1psl,
c1susaux, c1auxex, c1auxey 
  
  12810   Tue Feb 7 19:14:59 2017 JohannesUpdateCDSvme crate backplane adapter board layoutAfter fighting with Altium for what seems
like an eternity I have finished putting
my vision of the vme crate backplane adapter
 vme_backplane.pdf 
  12893   Mon Mar 20 11:18:58 2017 gautamUpdateCDSNo internet connectivity on control room machinesThere
is no internet connectivity on any of the
  
  12894   Mon Mar 20 14:39:44 2017 gautamUpdateCDSNo internet connectivity on control room machinesKoji
diagnosed that the NAT router was to blame
  
  12914   Tue Mar 28 21:06:53 2017 ranaSummaryCDS/cvs/cds/caltech/chans back on svn1.6Debian doesn't like EPICS. Or our XY
plots of beam spots...Sad!

 Screenshot-Untitled_Window.png 
  12924   Mon Apr 3 17:09:47 2017 gautamUpdateCDSC1PSL burt-restoredWhen I came in this morning, Steve had
re-locked the PMC and IMC - but I could see
a ~1Hz intensity fluctuation on the PMC REFL video
  
  12980   Wed May 10 12:37:41 2017 gautamUpdateCDSMCautolocker deadThe MCautolocker had stalled - there were
no additional lines to the logfile after
12:17pm (~20mins ago). Normally, it suffices
  
  12982   Wed May 10 16:57:52 2017 ranaUpdateCDSMCautolocker deadI rebooted megatron around 12:20 today.
It had dozens of stalled medm process (some
of them there since February!). I couldn't
  
  12991   Mon May 15 08:26:43 2017 ranaUpdateCDSSVN up in userapps/cdsI did an 'svn update' in userapps/cds/
which pulled in some changes from the sites
as well as various CDS utilities in common/
  
  13012   Thu May 25 12:22:59 2017 gautamUpdateCDSslow machine bootfestAfter ~3months without any problems on
the slow machine front, I had to reboot 
  
  13028   Thu Jun 1 15:37:01 2017 gautamUpdateCDSslow machine bootfestSteve alerted me that the IMC wouldn't
lock. Reboots for
  
  13059   Mon Jun 12 10:34:10 2017 gautamUpdateCDSslow machine bootfestReboots for
c1susaux, c1iscaux, c1auxex
  
  13069   Fri Jun 16 13:53:11 2017 gautamUpdateCDSslow machine bootfestReboots for
c1psl, c1iool0, c1iscaux
  
  13096   Wed Jul 5 16:09:34 2017 gautamUpdateCDSslow machine bootfestReboots for
c1susaux, c1iscaux
  
  13125   Wed Jul 19 08:37:21 2017 JamieUpdateCDSUpdate on front-end/DAQ rebuild After the catastrophic fb disk failure
last week we lost essentially the entire
front end system (not any of the userapp
  
  13127   Wed Jul 19 14:26:50 2017 JamieUpdateCDSUpdate on front-end/DAQ rebuild  




  
  13130   Fri Jul 21 18:03:17 2017 JamieUpdateCDSUpdate on front-end/DAQ rebuild Update:


front ends booting with
the new Debian jessie diskless root image
  
  13133   Sun Jul 23 22:16:55 2017 Jamie, gautamUpdateCDSfront-end now running with new OS, RCGAll front
ends and model are (mostly) running now

 2017-07-23-210810_1394x488_scrot.png2017-07-23-211812_387x488_scrot.png 
  13135   Mon Jul 24 10:45:23 2017 gautamUpdateCDSc1iscex models diedThis morning, all the c1iscex
models were dead. Attachment #1
 c1iscexFailure.png 
  13136   Mon Jul 24 10:59:08 2017 JamieUpdateCDSc1iscex models died


  
  13138   Mon Jul 24 19:28:55 2017 JamieUpdateCDSfront end MX stream network working, glitches in c1ioo fixedMX/OpenMX
network running

Today I
got the mx/open-mx networking working for
 48.png 
  13139   Mon Jul 24 19:57:54 2017 gautamUpdateCDSIMC locked, Autolocker re-enabledNow that all the front end models are running,
I re-aligned the IMC, locked it manually,
and then tweaked the alignment some more.
  
  13145   Wed Jul 26 19:13:07 2017 JamieUpdateCDSdaqd showing same instability as beforeI recompiled daqd on the updated fb1, similar
to how I had before, and we're seeing
the same instability: process crashes when
  
  13149   Fri Jul 28 20:22:41 2017 JamieUpdateCDSpossible stable daqd configuration with separate DC and FWThis week Jonathan Hanks and I have been
trying to diagnose why the daqd has been
unstable in the configuration used by the
  
  13152   Mon Jul 31 15:13:24 2017 gautamUpdateCDSFB ---> FB1[jamie, gautam]

In order to test the new daqd config
that Jamie has been working on, we felt it
  
  13153   Mon Jul 31 18:44:40 2017 JamieUpdateCDSCDS system essentially fully recoveredThe CDS system is mostly fully recovered
at this point.  The mx_streams are all
flowing from all front ends, and from all
 02.png 
  13161   Thu Aug 3 00:59:33 2017 gautamUpdateCDSNDS2 server restarted, /frames mounted on megatron[Koji, Nikhil, Gautam]

We couldn't get data using
python nds2. There seems to have been many
  
  13162   Thu Aug 3 10:51:32 2017 ranaUpdateCDSNDS2 server restarted, /frames mounted on megatronsame issue on NODUS; I edited the /etc/fstab
and tried mount -a, but it gives this error:

controls@nodus|~ 1> sudo
  
  13163   Thu Aug 3 11:11:29 2017 gautamUpdateCDSNDS2 server restarted, /frames mounted on nodusI added nodus' eth0 IP (192.168.113.200)
to the list of allowed nfs clients in /etc/exportfs
on fb1, and then ran sudo mount -a on nodus.
  
  13164   Thu Aug 3 19:46:27 2017 JamieUpdateCDSnew daqd restart procedureThis is the daqd restart procedure:

$ ssh
  
  13165   Thu Aug 3 20:15:11 2017 JamieUpdateCDSdataviewer can not raise test pointsFor some reason dataviewer is not able
to raise test points with the new daqd setup,
even though dtt can.  If you raise a
  
  13166   Fri Aug 4 09:07:28 2017 ranaUpdateCDSCDS system essentially NOT fully recoveredTried getting   
  13185   Thu Aug 10 14:25:52 2017 gautamUpdateCDSSlow EPICS channels -> Frames re-enabledI went into /opt/rtcds/caltech/c1/target/daqd,   
  13189   Fri Aug 11 00:10:03 2017 gautamUpdateCDSSlow EPICS channels -> Frames re-enabledSeems
like something has failed after I did this
  
  13192   Fri Aug 11 11:14:24 2017 gautamUpdateCDSSlow EPICS channels -> Frames re-enabledI commented
out the line pertaining to C0EDCU again,
now full frames are being written
  
  13197   Fri Aug 11 18:53:35 2017 gautamUpdateCDSSlow EPICS channels -> Frames re-enabled


  
  13198   Fri Aug 11 19:34:49 2017 JamieUpdateCDSCDS final bits status updateSo it appears we now have full frames and
second, minute, and minute_raw trends.

We are still not able to raise
  
ELOG V3.1.3-