M9sol Logbooks Solenoid Daily log
  Solenoid logbook, all entries  ELOG logo
Entry  Fri Apr 16 10:15:26 2004, Doug Preddy, Start Up, Changes to M9sol Vacuum PC 
Yesterday and today there have been a number of changes made to the M9 
Vacuum control computer. The computer now automatically boots up to the 
Epics control page. This logbook is also automatically started.
Entry  Mon Apr 19 15:06:49 2004, Doug Preddy, Start Up, Started turbines april191500.BMP
Purifier run over the weekend. Both LN2 dewars empty, but purifier cold. 
Disabled CV211 and flowed all charge gas through purifier. Started turbine 
at 11:00am. set strip tool to monitor temps. Started M9BCP2. Pumped out 
Entry  Tue Apr 20 07:06:41 2004, Doug Preddy, Start Up, morning day 2 april200705.BMP
Temps in solenoid are equalling out. Increasing PIC229 to 11 bar. 
Entry  Tue Apr 20 07:33:03 2004, Doug Preddy, Start Up, PIC229 at 11bar 
PIC229 at 11 bar. Changed strip tool to 15 sec increments.
Entry  Wed Apr 21 06:39:17 2004, Doug Preddy, Start Up, over night 
Changed to parallel cold mode at 9:30.
At about 4:30 the city water chiller was turned on. The air compressor had 
also tripped off. It was reset and restarted.
Entry  Wed Apr 21 06:48:31 2004, Doug Preddy, Start Up, JT bypass closed 
Closed cv155
Entry  Wed Apr 21 08:16:18 2004, Doug Preddy, Start Up, switch to series mode 
Switched to series mode.
Entry  Wed Apr 21 09:57:59 2004, Willy Andersson, Start Up, System status 
Buffer tank pressure is down to about 6 psig. Too low to keep up
with liquefaction requirements to build LHe level. Doug Preddy
requested that I help Curtis Ballard top up system with new
Entry  Thu Aug 19 10:28:32 2004, Doug Preddy, Start Up, after M9bv5 FIX 
Over the last couple of days we replaced the gate on the M9BV5 valve. The 
old one had worn the teflon sliders on the sides. Metal shavings on bottom 
of body. Found a replacement with metal rollers, rather than slides. 
Entry  Mon Oct 4 09:16:29 2004, Doug Preddy, Start Up, Started turbines 
Started flow to the turbimes with the solenoid in parallel warm return.
Entry  Tue Oct 5 07:18:16 2004, Doug Preddy, Start Up, adjust compressor discharge pressure 
adjusted compressor discharge pressure to 11 Bar
Entry  Wed Oct 6 07:57:01 2004, Doug Preddy, Start Up, parallel cold return 
Switched to parallel cold return at 4:00 yesterday afternoon.
6:30 this morning started closing cv155 as temps had bottomed out at 24K.
Entry  Wed Oct 6 09:25:54 2004, Doug Preddy, Start Up, switch to series mode 
switched to series mode
Entry  Thu Oct 7 13:33:20 2004, Doug Preddy, Start Up, turned off purifier 
turned off purifier
Entry  Sun Oct 10 17:36:35 2004, Experimentor, Start Up, power leads 
At 5:30 pm sundat, power lead temp is about 10.6K.  script tool still 
notworking
Entry  Mon Oct 11 03:56:14 2004, Experimentor, Start Up, cv142 valve 
noticed that the lead temp rose to 24K over the past 4 hours. had control 
room personnle cycle the cv142 valve. temperature dropped.
Entry  Mon Oct 11 11:49:34 2004, Experimentor, Start Up, cv142 valve 
noticed temp rise, which occured only about 5 hours after the 
last "reset" .... the time between resets seems to be decreasing, which is 
not a good sign. 
Entry  Mon Oct 11 22:32:11 2004, Experimentor, Start Up, cv142 valve 
temp of leads begins its exponential rise again (caught it at 12K), approx 
11 hours after last reset.  this time asked operator to shut off valve for 
3 seconds, then turn back on. 
Entry  Tue Oct 12 02:05:31 2004, Experimentor, Start Up, cv142 valve 
after only two hours since last lead cycling, they warm up quickly. 
ops cycles the valve, but more quickly this time, off ... 1 sec ... on. 
Entry  Tue Oct 12 13:00:08 2004, Curtis Ballard, Start Up, cv142 valve 
Curtis closes and opens slowly at about 11:00 am this morning. Wants to see 
if that works better than the sudden on/off switch. 
Entry  Wed Oct 13 08:17:00 2004, Experimentor, Start Up, cycling 142 when temp hit 10.68 
I tried cycling the valve twice -- at about 11:30 and again around 1:00,
trying both the buttons and the dial -- but it has had no effect on
the temperatures (aside from the transient spikes).  That might be
    Reply  Sun Oct 17 04:26:29 2004, Other, Start Up, cycling 142 when temp hit 10.68 
> I tried cycling the valve twice -- at about 11:30 and again around 1:00,
> trying both the buttons and the dial -- but it has had no effect on
> the temperatures (aside from the transient spikes).  That might be
Entry  Sun Oct 17 05:03:13 2004, Other, Start Up, Cycle valve after oscillations begin 
(Sat night/Sun AM) Helium temperature started oscillating, so
powered off magnet (precautionary) and cycled valve 142 (at 04:12).
Small oscillations begin almost immediately, so close and open
Entry  Wed Oct 20 09:38:17 2004, Doug Preddy, Start Up, restarting system 
Solenoid tripped  off Monday morning due to high compressor pressure. 
Regenerated purifier on Tuesday. Started compressor at 9:00 this morning.
Entry  Thu Oct 21 07:16:35 2004, Doug Preddy, Start Up, switched to parallel cold return 
 
Entry  Thu Oct 21 15:41:29 2004, Doug Preddy, Start Up, switched to series mode 
 
Entry  Fri Oct 22 09:15:06 2004, Doug Preddy, Start Up, started flow to power leads 
Started flow to power leads HIC142 at 0.8. 
Entry  Wed Jun 1 08:23:19 2005, Doug Preddy, Start Up, start up notes 
The solenoid was pumped out Monday and yesterday after the quads just 
downstream of the solenoid were put back in place. The quad just 
downstream of the solenoid was remove to replace two coils on it. 
Entry  Wed Nov 2 10:17:27 2005, Willy Andersson, Start Up, M9B helium refrigerator and solenoid cooldown 
Started M9B MYCOM helium compressor circulating helium through system last 
Friday. Right hand purifier was regenerated previously, LN2 fill system 
started and flow started from buffer through purifier to low pressure 
Entry  Tue May 23 08:44:28 2006, Doug Preddy, Start Up, Started turbines 
Solenoid and cold box were pumped out last Tuesday. Cold box roughing pump 
initially would not start. had to retighten all wires on the contactor in 
the Sulzer control panel (RP900).
Entry  Thu May 25 07:34:18 2006, Doug Preddy, Start Up, switched to parallel cold return 
switched to parallel cold return
Entry  Fri May 26 07:29:54 2006, Doug Preddy, Start Up, CV155 closed 
CV155 closed.
Temps about 15K
Entry  Fri May 26 08:45:38 2006, Doug Preddy, Start Up, Changed to series mode 
Changed to series mode.
Liquid level building.
Entry  Fri May 26 10:03:03 2006, Doug Preddy, Start Up, Started flow to power leads 
Started flow to power leads.
Liquid level 15%
Entry  Fri May 26 14:34:24 2006, Doug Preddy, Start Up, Ready to run 
Solenoid is cold, liquid level is 35%, power leads cold and seem stable.
Added one bottle helium to buffer tank. Pressure is 7 psi..
Entry  Wed Oct 4 07:29:04 2006, Doug Preddy, Start Up, Starting cool down 
Started compressor yesterday with flow through the purifier overnight.
Starting tubines this morning in parallel warm return
Entry  Wed Oct 4 18:10:18 2006, Willy Andersson, Start Up, Quick check on system 
System in good // warm return mode, temps coming down nicely. BCP2 cryopump 
does not look too healthy, temperature is just over 20K, very close to low 
set point.
Entry  Thu Oct 5 10:26:26 2006, Doug Preddy, Start Up, switched to parallel cold return 
 
Entry  Thu Oct 5 11:51:53 2006, Doug Preddy, Start Up, Adde 2 bottles UHP Helium 
Valved off purifiers, but left LN2 on.
Entry  Thu Oct 5 14:53:54 2006, Doug Preddy, Start Up, Switched to series mode 
 
Entry  Thu Apr 19 15:18:25 2007, Doug Preddy, Start Up, preparing to start the refrigerator 
Starting the vacuum systems in the coldbox and solenoid.
Entry  Fri Apr 20 12:15:12 2007, Doug Preddy, Start Up, remote PLC switch 
I could not control the vacuum devices using EPICS. The buttons could be 
pushed, but nothing would respond. The PLC was in local mode. Thumbwheel 
to 100, push On/Open button to put it into remote mode.
Entry  Mon Apr 23 16:31:02 2007, Doug Preddy, Start Up, Started compressor 
Startewd compressor and purifer today.
Entry  Tue Apr 24 10:21:49 2007, Doug Preddy, Start Up, Started flow to turbines 
Started flow to turbines at about 10:00 in parallel warm mode.
Entry  Fri Sep 14 12:44:52 2007, Doug Preddy, Start Up, started compressor 
running purifier over weekend
Entry  Mon Sep 24 15:08:41 2007, Doug Preddy, Start Up, Started cool down this morning 
The vacuum in the cold box was good on Friday 0.0 X 10-4. Let it pump over 
the weekend. Added two bottles of UHP helium to system Friday.
Entry  Tue Sep 25 07:34:04 2007, Doug Preddy, Start Up, PIC229 to 11 bar 
adjusted turbine speeds and HIC104 to maintain their values.
Entry  Wed Sep 26 08:52:46 2007, Doug Preddy, Start Up, switched to parallel cold return 
 
Entry  Thu Sep 27 07:41:15 2007, Doug Preddy, Start Up, Solenoid cold 
Solenoid cold and in series mode. 50% liquid level. Starting flow to 
powerleads.
Entry  Tue Apr 1 15:17:06 2008, Doug Preddy, Start Up, Starting up vacuum systems 
Monday afternoon there was no control of the vacuum system. The controls were working, but no output to devices. The "output" breaker in the PLC box was
found to be tripped. Reseting it allowed control to the vacuum systems.
I started the regeneration of BCP2 this morning, but hte output breaker tripped
again. reset it and continued to pump.
Started to pump out the solenoid also. Removed jumper on the BDP2 temperature read-back, bypassed BV2, and BCG2.
Entry  Wed Apr 16 15:15:44 2008, Doug Preddy, Start Up, refrigerator started  
Turned on compressor last Tuesday. Ran purifier until today. Final value 0.15ppm.
Started cool down yesterday. Switched into parallel cold return this
morning, but PIC 229 would not allow the compressor to charge. The compressor tripped due to bad solenoid vacuum (solenoid was warming up). The controller
now seems to be working okay. 
Restarted in parallel warm mode at ~12:00
Entry  Wed Apr 16 16:51:16 2008, Doug Preddy, Start Up, switched to parallel cold return 
 
Entry  Thu Apr 17 13:52:25 2008, Doug Preddy, Start Up, switched to series mode at 9:30 this morning 
switched to series mode at 9:30 this morning. Added two bottles of helium gas. 
Started flow to power leads.
Entry  Wed Mar 24 08:30:33 2010, Doug Preddy, Start Up, Start up 
Compressor started yesterday afternoon. Pumping out solenoid overnight. Cold box vacuum good. circulating helium to solenoid in Parallel warm mode, CV142
open. Purifier running.
Entry  Mon Mar 29 09:25:52 2010, Kevin Trithardt, Start Up, Started cool down this morning 
 
Entry  Thu Apr 1 11:57:55 2010, Doug Preddy, Start Up, started flow to power leads 
Solenoid cold. Buffer tank pressure ~3psi, so Kevin will add a bottle of helium. Started flow to power leads at 11:45
Entry  Fri Apr 9 16:07:28 2010, Doug Preddy, Start Up, flow to power leads started 
 
Entry  Mon Sep 13 10:55:25 2004, Doug Preddy, Shut Down, Quench and shutdown 
The solenoid quenched on powerlead temps this morning at 10:00. It is 
warming up and the power leads are >200K.Isolating and purging the coldbox 
is not very useful now, so I am shutting the system down.
Entry  Mon Sep 13 13:56:06 2004, Doug Preddy, Shut Down, compressor off 
compressor off
Entry  Thu Dec 22 15:10:44 2005, Doug Preddy, Shut Down, shut down system 
shuttting down the system. isolated cold box by closing v135. preparing to 
pump out cold box.
Entry  Wed Dec 10 15:41:04 2008, Doug Preddy, Shut Down, shuttting down solenoid 
shuttting down solenoid for winter shutdown.
Entry  Mon Aug 9 14:27:12 2010, Doug Preddy, Shut Down, Helium plant shut down 
 
Entry  Fri Dec 19 11:34:10 2003, Doug Preddy, Quench Recovery, Final home of this E-log 
http://isac.triumf.ca/m9sol/
Chris has set up the M9 solenoid e-log at the above web address. Play with 
it and let me know if it breaks. 
Entry  Sun Apr 25 21:41:00 2004, Willy Andersson, Quench Recovery, Trip on PL Temp. 
Got pager call at 16:20 this afternoon. Solenoid had tripped on PL 
temperature. Arrived at about 17:00. Did a print screen of the striptool 
graph and solenoid screen. See files Prtscrn1_april25_2004.doc and
Entry  Mon Apr 26 07:48:46 2004, Doug Preddy, Quench Recovery, Series mode 
Switching over to series mode.
Entry  Mon Apr 26 08:12:30 2004, Doug Preddy, Quench Recovery, Power leads flow 
Throttled back the LHe in until the power leads started to warm. My goal is 
to flow "warm" gas (hopefully 80K) through the leads to drive any frozen 
impurities out.
Entry  Thu Apr 29 23:43:15 2004, Doug Preddy, Quench Recovery, Starting flow to solenoid 
Solenoid quenched due to power leads at 9:00 tonight. Restarted flow in 
parallel warm mode. 
Entry  Fri Apr 30 01:53:34 2004, Doug Preddy, Quench Recovery, switched to parallel cold 
 
Entry  Wed May 5 07:55:37 2004, Doug Preddy, Quench Recovery, Solenoid quenched on power lead temp may5_745.BMP
Solenoid quenched on power lead temp. I ran down and managed to recover it 
with minimal temp rise in the solenoid. Coil temps are falling, liquid is 
building. No flow to the power leads yet.
Entry  Wed May 5 09:59:10 2004, Doug Preddy, Quench Recovery, started flow to power leads 
Started flow to power leads.
TIC121 into auto mode
Entry  Wed May 5 23:57:38 2004, Willy Andersson, Quench Recovery, Powerleads warming up again. may5_04_1800.BMP
Got a page from Don Flemming at about 18:50 wondering why the power
lead temperatures were rising. See attachment may5_04_1800.BMP It looked as
though the monitoring signals flat lined for about 2 hours for some reason.
Entry  Thu May 6 09:32:13 2004, Willy Andersson, Quench Recovery, Additional notes from last night power lead problems. 
When performing last nights refrigerator adjustments I also increased the 
compressor discharge pressure to 11.25 barA. Also the backup air compressor 
was tripped off again and I reset it. Finally I opened the city water flow 
Entry  Fri Jun 25 12:36:04 2004, Willy Andersson, Quench Recovery, Compressor unloaded etc. 
At about 09:30 this morning I noticed the sound coming from the compressor 
building seemed louder than usual. After entering the building I noted that 
the compressor was unloaded to about 50% and the compressor suction was 
Entry  Fri Jun 25 14:20:58 2004, Willy Andersson, Quench Recovery, Switch to series mode 
At about 14:00 solenoid temps dipping below 8 K. Trace of LHe level (dense 
gas) starting to show. Switching to series cooling mode.
Entry  Tue Jul 27 23:33:27 2004, Doug Preddy, Quench Recovery, Solenoid quench 9:30 
I was phoned at about 9:30 tonight with a solenoid alarm. After looking at 
the display I found the system to be tripped off. When I came in I found 
the compressor off and the solenoid quenched. There was no real indication 
Entry  Wed Jul 28 00:04:30 2004, Doug Preddy, Quench Recovery, started flow to solenoid 
Solenoid temps were: C1 & C12 about 30K. C6 &C7 about 11K. Started flow to 
solenoid in parallel cold return. Jumpered out the vacuum gauge for the 
solenoid vacuum.
Entry  Wed Jul 28 07:00:18 2004, Doug Preddy, Quench Recovery, switch to series mode 
Switching to series mode. Jumper on vacuum gauge removed.
Entry  Wed Jul 28 21:26:19 2004, Doug Preddy, Quench Recovery, Double Power bump 
Two power bumps tonight. Everything tripped of. Restarted cooling water 
pump, diff. pump under solenoid etc. Computer stayed on! Starting 
compressor.
Entry  Wed Jul 28 22:01:31 2004, Doug Preddy, Quench Recovery, Starting flow to solenoid 
c1 28, c12 29, c6 11.6, c7 12.5 TI121 22.5
Entry  Wed Jul 28 23:07:01 2004, Doug Preddy, Quench Recovery, solenoid cooling 
cooling rates for the solenoid are good. In parallel cold return.
Entry  Thu Jul 29 09:01:11 2004, Doug Preddy, Quench Recovery, switched to parallel cold 
Changed to series mode.
Entry  Thu Jul 29 13:25:29 2004, Doug Preddy, Quench Recovery, start flow to power leads 
 
Entry  Sat Aug 7 22:37:04 2004, Willy Andersson, Quench Recovery, Compressor tripped off. 
Got a call at about 10:00 this morning, the whole system had tripped off. 
No power bumps or other disturbances. When I arrived the only fault 
indications were "ColdBox Trip" light on the compressor panel and on the 
Entry  Sat Aug 7 23:40:47 2004, Willy Andersson, Quench Recovery, Energizing solenoid 
23:39 Powerleads cold, LHe level over 40% and rising. Energizing solenoid 
to 500 Amps, ramp rate 60. Checking compressor building then going home.
Entry  Thu Sep 2 21:58:34 2004, Willy Andersson, Quench Recovery, Switch to series cooling 
Solenoid had tripped on powerlead overtemp at about 09:00 this morning. 
Doug recovered the system to // cooling. I switched system to series 
cooling at about 21:30. LHe level at about 10%. Buffer tank pressure is low 
Entry  Fri Sep 3 01:28:43 2004, Doug Preddy, Quench Recovery, power up 
started flow to the power leads at 11:30. Cold and stable at 1:00am. 
Energized solenoid at 1:30.
Entry  Tue Nov 23 07:47:00 2004, Doug Preddy, Quench Recovery, Solenoid quench Nov 21 11_22_04_7_40.BMP
Solenoid quenched Nov 21 due to alarge power bump. Everything tripped off 
including vacuum and water pumps. Cold box vacuum was at 3.6e-1, so pumped 
it out overnight.
Entry  Tue Nov 23 09:30:15 2004, Doug Preddy, Quench Recovery, started flow to solenoid 
Started flow to solenoid in parallel warm return.
Entry  Tue Nov 23 11:35:44 2004, Doug Preddy, Quench Recovery, Another power bump 
Compressor tripped off again due to a power bump. Meson hall water off, so 
vacuum pumps off again.
Pumps back on , vacuum pumps on, starting compressor.
Entry  Tue Nov 23 15:10:06 2004, Doug Preddy, Quench Recovery, switched to parallel cold return mode 
 
Entry  Wed Nov 24 14:58:42 2004, Doug Preddy, Quench Recovery, today 
Came in this morning to find the helium return line to the buffer tank 
frosted up. MV51 has been stuck open the whole time. That exlains the 
cooldown rate and other problem. Cycled MV51 a few times and it now seems 
Entry  Thu Nov 25 07:21:37 2004, Doug Preddy, Quench Recovery, started power lead flow 
Curtis switched to series mode last night at 7:00.
Startedflow to power leads at 7:00 this morning.
Entry  Sun Nov 28 10:15:18 2004, Willy Andersson, Quench Recovery, Powerlead quench ? 
Got page very early this morning. Couldn't come in til 08:30. System was 
in idle running mode and someone had reset the QRL panel so my guess is 
that the solenoid tripped on powerlead overtemp. HIC142 was not fully open 
Entry  Wed Jun 1 23:48:02 2005, Doug Preddy, Quench Recovery, the first quench 
I recieved a call from ops at 22:00 tonight that the solenoid had alarmed. 
I came in and found a cold box fault, with the compressor tripped off. I 
was unable to restart the compressor. I cleared the cryostat quench and 
Entry  Thu Jun 2 01:26:30 2005, Doug Preddy, Quench Recovery, started flow to solenoid Capture6-2-05-1.13.33 AM.jpg
See attached file for a screen grab of temps.
Entry  Thu Jun 2 01:38:25 2005, Doug Preddy, Quench Recovery, strip tool plot 02-06-05-12.57.26 AM.jpg
This is a strip tool  plot of the cooldown
Entry  Thu Jun 2 09:16:40 2005, Doug Preddy, Quench Recovery, continuing to cool 02-06-05-7.32.49 AM.jpg
See screen grab
Entry  Thu Jun 9 08:56:10 2005, Doug Preddy, Quench Recovery, system back on 
The compressor was restarted and the solenoid is cooling (sort of) in 
parallel cold return.
Entry  Thu Jun 9 21:41:25 2005, Willy Andersson, Quench Recovery, Trying to achieve stable cooling. 
From about 08:00 to 15:00

See Doug's previous entry for quench recovery details.
Entry  Tue Jun 14 20:53:19 2005, Doug Preddy, Quench Recovery, restarted refrigerator after power bump june142045.BMP
see bitmap for temps/pressures after presurrizing coldbox. Preparing to 
start flow to turbines, then will start flow to solenoid in parallel warm 
return.
Entry  Tue Jun 14 23:01:22 2005, Doug Preddy, Quench Recovery, switched to parallel cold return 
 
Entry  Mon Jul 18 11:18:40 2005, Doug Preddy, Quench Recovery, Solenoid Quenched over the weekend 
The solenoid was found to be warm on Monday morning. M9Q3 had a bad water 
leak over the weekend. The water header serving Q3 was turned off and the 
leak confirmed. Q3 was isolated and the header was turned back on. My 
Entry  Mon Jul 18 15:51:17 2005, Doug Preddy, Quench Recovery, Compressor restarted, flow to solenoid 
Recovered the vacuum in the solenoid, then started the compressor.
Started flow to solenoid in parallel warm return.
Entry  Tue Jul 19 16:13:32 2005, Willy Andersson, Quench Recovery, switch to series mode 
CR_6KS_M down to 11 K.
Switched to series mode.
Started small flow to power leads to get them cold.
Entry  Tue Jul 19 18:09:56 2005, Willy Andersson, Quench Recovery, Quench II 
Machine trip just as I was exiting the TRIUMF gate. QRL said cold box fault 
as did red lite on compressor. At cold box panel all turbine red lites were 
on and compressed air failure lite was on. But there was no problems with 
Entry  Mon Oct 31 07:48:57 2005, Willy Andersson, Quench Recovery, what a fine entry 
Keep IT safe boys
Entry  Thu Nov 3 06:19:50 2005, Doug Preddy, Quench Recovery, restart system 
Last night at about 7:00 there was a large power bump that shut the 
compressor and water pump off. I came in this morning and am restarting the 
system.
Entry  Thu Nov 3 09:27:16 2005, Doug Preddy, Quench Recovery, started flow to solenoid 
started flow to solenoid in parallel cold return.
Entry  Mon Dec 12 09:24:29 2005, Doug Preddy, Quench Recovery, Solenoid Quench on power lead temp 
The solenoid tripped on power lead temps at about 9:15. I am recovering it 
from it's all around mode into parallel cold return.
Entry  Tue Jun 13 10:54:27 2006, Doug Preddy, Quench Recovery, Compressor tripped off 
No indicator lights etc as to why the compressor tripped. The only  light 
was a cold box fault. I had to shut off the main breaker before the 
compressor would come back on.
Entry  Tue Jun 13 15:52:46 2006, Willy Andersson, Quench Recovery, Doug has reduced and now closed CV155. 
Now in full // cold return mode.
Had just talked with Curtis, He said thta he has already informed the 
experimentors that the solenoid will not be ready until tommorow, so he 
Entry  Tue Jun 13 16:04:33 2006, Willy Andersson, Quench Recovery, TIC 121 set to auto mode 
 
Entry  Wed Jun 14 10:35:30 2006, Willy Andersson, Quench Recovery, Switched to series cooling. 
Had system in //return cooling overnight with small flow to keep power 
leads cool. Switched to series mode about 30 minutes ago. Building LHe 
level.
Entry  Wed Jun 14 16:27:01 2006, Willy Andersson, Quench Recovery, Energized solenoid 
Powerleads appear stable.
Entry  Mon Jul 3 23:01:34 2006, Doug Preddy, Quench Recovery, power lead warming/ripples caused quench 
power lead warming/ripples caused quench at 18:45 today. Compressor stayed 
on, but flow to solenoid stopped.
I started flow to solenoid at 22:40.
Entry  Thu Jul 20 00:25:16 2006, Doug Preddy, Quench Recovery, Solenoid quenched @ 11:15 
Solenoid Quenched on C1 temp. It went above 5K. Shut off compressor. 
Restarting system @ 12:15
Entry  Thu Jul 20 00:52:13 2006, Doug Preddy, Quench Recovery, T1 frozen 
T1 will not spin up. Warming up cold box.
Entry  Thu Jul 20 02:59:06 2006, Doug Preddy, Quench Recovery, T1 still not starting 
I will leave the cold box to warm overnight and try it again in the morning.
Entry  Thu Jul 20 08:18:31 2006, Doug Preddy, Quench Recovery, T1 started 
Started flow to turbines. Both started. T1 seems a bit slow. HIC110 at 0.85 
SI110 = 4100.
Cool down started.
Entry  Thu Jul 20 11:01:09 2006, Willy Andersson, Quench Recovery, Opened up warm return valves CV151 and CV153 
Mu2 pressure was just about at trip point due to trapped volume of helium 
warming. So opened up warm returns to bleed off pressure and prevent it 
from rising.
Entry  Thu Jul 20 13:21:57 2006, Willy Andersson, Quench Recovery, started // warm return flow. 
TIC121 was down to 27K
warm return valves were wide open
opened supply valves CV143 and CV146.
Entry  Thu Jul 20 13:27:21 2006, Willy Andersson, Quench Recovery, cold return mode continues... 
cr_c1 and cr_12 are both at about 45K and heading slowly down, so the 
gamble of going to // cold return worked. Maximum opening of CV155 is 
limited by CV204 goes fully closed and suction pressure begins to rise 
Entry  Thu Jul 20 13:34:26 2006, Willy Andersson, Quench Recovery, cold return mode continues... 
Even though cr_c1 and cr_c12 have begun to tick down, cr_c7 and cr_c6 are 
actually ticking up. This is probably a wave of warming propagating through 
the solenoid. As long as the two inlets are falling in temperature then 
Entry  Fri Jul 21 07:39:37 2006, Doug Preddy, Quench Recovery, Cool down continues 
Raised PIC229 to 11Bar. Started to close HIC155. Cooling rates improve.
Entry  Fri Jul 21 14:08:04 2006, Doug Preddy, Quench Recovery, switch to series mode 
Coils temps <10K.Switching to series mode.
Entry  Fri Jul 21 17:18:19 2006, Willy Andersson, Quench Recovery, Opened HIC142 fully open 
Power leads have flatlined but still building LHe level.
Entry  Fri Jul 21 23:36:21 2006, Doug Preddy, Quench Recovery, Final cooldown problems 
80K shield is down to <60K Liquid level not building. Power leads rippling 
and warming. T1 inlet 85K with 10%heater load.
Lowered the set point of TI121 to 17K. Shut off flow to the 80K shield to 
Entry  Sat Jul 22 06:34:14 2006, Experimentor, Quench Recovery, looking good 
Donald Arseneau reporting.

It is looking pretty good, so I came back in with the intent of energizing 
Entry  Fri Jul 28 20:39:40 2006, Doug Preddy, Quench Recovery, Restarting refrigerator 
Solenoid quenched at about 6:00 tonight.
I restarted the compressor, then the cold box and turbines. When cold box 
was at 25K I started flow to the solenoid in parallel cold return.
Entry  Sat Jul 29 05:30:28 2006, Doug Preddy, Quench Recovery, switched to series mode 
Temps bottomed out at ~16K. Switching to series mode.
Entry  Sat Jul 29 09:38:06 2006, Doug Preddy, Quench Recovery, power leads cooled 
opened power lead flow about 40 minutes ago. ~12K will let them stablize. 
LHE level >20%
Entry  Tue Aug 8 07:27:49 2006, Doug Preddy, Quench Recovery, Solenoid Quench at about 6:00 this morning 
No indication of problem. Turbines still running, but no flow to solenoid. 
Started flow. Solenoid ~20K.
Entry  Wed Aug 9 06:44:58 2006, Willy Andersson, Quench Recovery, // cold mode cooling continues. 
After restarting flow to the solenoid yesterday in // cold return mode 
TIC121 just refused to go lower than about 29K even when we closed CV155 
all the way. Tried various things, switching to // warm return, changing 
Entry  Wed Aug 9 06:59:43 2006, Willy Andersson, Quench Recovery, more // cold return stuff 
About 21:00 last night the solenoid temps had not changed much, pretty well 
flat lined. I guess my reducing CV155 stalled the cooling. Called Don 
Arseneau and asked him to increase CV155 to about 80% open. Temps slowly 
Entry  Wed Aug 9 07:50:49 2006, Doug Preddy, Quench Recovery, Switched to series mode. 
Cool down continues.
Entry  Thu Aug 10 16:33:11 2006, Willy Andersson, Quench Recovery, Flow to solenoid tripped on powerlead temperature. 
Power lead temps were drifting up, tried to tweak TIC121 and HIC141 to 
unstall powerlead flow. Got quench. Restarted series flow, building LHe 
level.
Entry  Thu Aug 10 20:26:09 2006, Willy Andersson, Quench Recovery, solenoid energized 
Powerleads seem stable.
Entry  Tue Aug 15 08:45:56 2006, Doug Preddy, Quench Recovery, restarted the compressor 
Solenoid tripped off Sunday. Restarted compressor and cool down of cold box.
Entry  Tue Aug 15 15:39:27 2006, Willy Andersson, Quench Recovery, switched to parallel cold return 
Return flow temps from solenoid about 40K, TIC121 at about 40K so switching 
to //cold return.
Starting with slightly reduced flow through cold returns, CV145 and CV147 
Entry  Thu Aug 17 08:04:44 2006, Doug Preddy, Quench Recovery, Solenoid tripped at about 3:00 this morning 
restarting system.
Compressor would not start. Idid not see anything that would not let it 
start. Pushed rest button upstairs, and reset contactor. Compressor started.
Entry  Thu Aug 17 19:45:27 2006, Willy Andersson, Quench Recovery, switch to series cooling 
Temps of flow returning from solenoid flat lined at about 10K.
Gradually closed CV155.
Then switched to series cooling.
Entry  Thu Oct 12 11:53:04 2006, Willy Andersson, Quench Recovery, Compressor trip, 09:50 this morning. 
Main compressor tripped, refrigerator shutdown. Checked with experimentors 
and main control room, no indications of power bump etc.
Entry  Thu Oct 12 19:54:10 2006, Willy Andersson, Quench Recovery, Energized solenoid. 
Switched to series mode about 6 hours ago. Cooling continued including 
power leads until LHe level at about 50% and powerleads appeared stable.
    Reply  Fri Oct 13 00:13:57 2006, Experimentor, Quench Recovery, Energized solenoid. 
Hi there,

This is Khashayar (experimenter). Lookin at all different temperatures and 
Entry  Thu Oct 26 04:27:31 2006, Willy Andersson, Quench Recovery, Powerlead overtemp 
02:30 this morning got page from operations.
Looked at system online, appears that there was a powerlead overtemp
that caused the quench. Compressor still running. After arriving to 
Entry  Thu Oct 26 04:34:15 2006, Willy Andersson, Quench Recovery, Still in // cold return mode. 
Leaving system cooling in // cold return mode, cooldown rates still good. 
Had flow on to powerleads since re-starting cooling flow to solenoid.
Either I (when I return to work later this morning) or Doug will do the 
Entry  Thu Oct 26 08:18:10 2006, Doug Preddy, Quench Recovery, switched to series mode 
Switched to series mode at about 7:45.
Entry  Thu Oct 26 11:45:22 2006, Doug Preddy, Quench Recovery, Solenoid cold 
power leads cold 50% liquid.
Turning on power supply
Entry  Thu Oct 26 14:14:57 2006, Doug Preddy, Quench Recovery, power lead quench 
solenoid tripped on power lead temp. I was here and caught it. System 
cooling.
Entry  Tue Oct 31 03:52:29 2006, Doug Preddy, Quench Recovery, power lead quench at 2:30 this morning 
Compressor still on. Starting flow to solenoid
Entry  Tue Oct 31 05:36:14 2006, Doug Preddy, Quench Recovery, switch to series mode 
 
Entry  Tue Oct 31 08:37:34 2006, Doug Preddy, Quench Recovery, Energizing solenoid 
 
Entry  Wed Nov 15 11:09:28 2006, Doug Preddy, Quench Recovery, Compressor tripped off 
Compressor tripped this morning at ~8:45. I restarted the compressor, but 
turbine 1 would not spin up. I let it warm for an hour and it started. I 
started flow to the solenoind in parallel cold return.
Entry  Wed Nov 15 13:56:00 2006, Doug Preddy, Quench Recovery, switch to series mode 
 
Entry  Wed Nov 15 17:05:49 2006, Willy Andersson, Quench Recovery, powerleads cold, energizing solenoid 
Powerlead temperatures have bottomed out, energizing solenoid to 300 
amps, ramp rate 60.
Entry  Tue Nov 28 10:32:04 2006, Doug Preddy, Quench Recovery, recovering after looong power outage 
The power has been out for about 24 hours. Recovering coldbox, solenoid and 
beamline vacuum.PLC is down for the vacuum system. Started compressor and 
am flowing warm helium through the soleniod to warm it up while the vacuum 
Entry  Fri Apr 27 10:16:44 2007, Kevin Trithardt, Quench Recovery, Test 
Don't Panic -- There was no quench. I am testing the e-log.
I have added Kevin's name and e-mail to the M9 e-log. He will be e-mailed 
when a quench recovery log is submitted. His name is also included in the 
Entry  Fri Apr 27 10:32:07 2007, Doug Preddy, Quench Recovery, Reset quench relay logic box 
The quench relay logic controller was not functioning correctly. It showed 
a "Trip" light and no other lights. I cycled the power to the controller 
and it now seems to be working properly. This did cause a quench and I am 
Entry  Wed May 30 08:38:38 2007, Doug Preddy, Quench Recovery, Solenoid quenched this morning 
Solenoid quenched this morning on power lead temp (I believe).
I restarted it at ~7:00, but the capacity control for the compressor would 
not respond. I shut the system back down and checked as many relays as I 
Entry  Wed May 30 11:27:32 2007, Doug Preddy, Quench Recovery, Problems recovering 
Various start up problems :
MV51 stuck open. Finally got it closed by hitting the valve with a hammer.
Vacuum is bad in cold box as MV902 tripped closed.
Entry  Thu May 31 07:11:05 2007, Doug Preddy, Quench Recovery, switched to parallel cold return 
switched to parallel cold return earlier this morning. Vacuum is 5 x 10-5.
Entry  Thu May 31 11:51:49 2007, Doug Preddy, Quench Recovery, Switched to series mode 
 
Entry  Thu Jun 14 00:10:10 2007, Doug Preddy, Quench Recovery, recovering from earlier quench 
Solenoid quenched on power lead temperature last night at about 6:00. I 
restarted flow to the solenoid in parallel cold return. Switched to series 
mode and am building liquid. 
Entry  Tue Jun 19 21:15:41 2007, Doug Preddy, Quench Recovery, Today's quench 
power lead temps caused a quench at 8:30 this morning. Recovery of system 
and flow to solenoid was started by 11:00. Solenoid was switched to series 
cold at 3:00. Solenoid and power leads were cold at ~6:30. power supply 
Entry  Wed Jul 4 11:13:12 2007, Doug Preddy, Quench Recovery, test 
This is a test to make sure the e-mail works.
Entry  Sat Jul 28 15:45:17 2007, Doug Preddy, Quench Recovery, quench recovery 
The solenoid tripped off this morning due to pwer lead over temp. The 
compressor was also off. I restarted this morning at about 8:15 in 
parallel cold return. Switching to series mode at 3:40.
Entry  Sat Jul 28 22:30:13 2007, Doug Preddy, Quench Recovery, quench again 
recovered system and energized solenoid at about 6:00 this evening.
At 9:30 power lead temps quenched solenoid again. MV52 stuck open during 
start-up.
Entry  Sun Jul 29 04:58:27 2007, Doug Preddy, Quench Recovery, Energizing solenoid 
LHe level~50%. Still have a slight ripple in the power leads, but they are 
cold enough to power the solenoid. LHe_in varies between 10.7K - 11.3K.
Entry  Mon Aug 6 08:41:31 2007, Doug Preddy, Quench Recovery, Cold box trip at 6:00 
compressor off due to cold box trip at 6:00 this morning. Restarted system 
and started flow to solenoid in parallel cold return.
Entry  Fri Oct 5 10:25:43 2007, Doug Preddy, Quench Recovery, Unknown quench 2 
Kevin and I were at the Sulzer panel when the system quenched 2. No 
obvious reasons. Restarted the system.
Entry  Fri Oct 5 13:25:41 2007, Doug Preddy, Quench Recovery, funny graph  Capture.jpg
There was a fluctuation of the positive lead temp with no flow going to 
the power leads.
Entry  Tue Oct 9 12:58:22 2007, Doug Preddy, Quench Recovery, Solenoid Quench 2 
Refrigeration sytem shut off at ~ 12:30 today. No apparent reason. Only 
light on was a cold box fault. 
Restarted in parallel cold return mode.
Entry  Tue Oct 9 13:16:44 2007, Doug Preddy, Quench Recovery, switched to series mode 
 
Entry  Thu Nov 8 09:28:53 2007, Doug Preddy, Quench Recovery, started compressor 
And started flow to coldbox,solenoid in parallel warm return.

Entry  Fri Nov 9 07:37:44 2007, Doug Preddy, Quench Recovery, switched to series mode 
switched to series mode.
Entry  Fri Nov 9 14:50:03 2007, Doug Preddy, Quench Recovery, Solenoid cold 
Solenoid cold. Added two bottles of helium. Allowing to stablize. Will 
ramp power supply in half an hour.
Entry  Mon Nov 19 02:58:44 2007, Doug Preddy, Quench Recovery, Solenoid quenched on power lead over temperature 
I received a page at 1:30 this morning. The power lead temperatures were 
climbing. Cycling CV142 did not fix the problem. The solenoid quenched at 
1:50.
Entry  Mon Nov 19 04:30:47 2007, Doug Preddy, Quench Recovery, switched to series mode 
 
Entry  Mon Dec 3 14:59:58 2007, Doug Preddy, Quench Recovery, Not really a quench recovery, But... 
Not really a quench recovery, but...I wanted to send this out via e-mail. 
The contactor for the compressor building fan failed recently. Randy is 
looking after it, but parts will have to be ordered. The big door should 
Entry  Thu Jul 24 16:28:50 2008, Doug Preddy, Quench Recovery, power bump 
There was a power bump at ~15:00 today. All mseon hall cooling water went off. Compressor tripped. Main magnet went off. 
Restarted compressor after water
pumps came back on. Started flow to the cold box. Compressor outlet pressure went >12 Bar and tripped of the compressor. Restarted again and am now cooling
in parallel cold return. Solenoid ~25K.
Entry  Fri Jul 25 21:48:15 2008, Doug Preddy, Quench Recovery, another quench 
System was stable and solenoid ramped up at 4:00 today. At about 7:30 it tripped off again. I came in and restarted the compressor and am now cooling in
parallel cold return mode. Solenoid is at ~30K. I talked to Kevin and he will get the power leads on tomorrow morning. Once they are stable the power supply
can be ramped up. 
I phoned Curtis, but there was no answer (he may be on holidays??)
Entry  Sat Jul 26 01:06:04 2008, Doug Preddy, Quench Recovery, Refrigerator in series mode 
Switched to series mode. Solenoid ~8K, starting to build liquid. 
Entry  Sat Jul 26 01:29:21 2008, Doug Preddy, Quench Recovery, power leads 
ops will monitor liquid level. When it's at 60% they will come down and open the power lead valve. When the temperature ripples die out the solenoid can
be energized.
Entry  Sat Aug 23 17:02:38 2008, Doug Preddy, Quench Recovery, Solenoid quenched 
The solenoid quenched this afternoon at ~12:30. The compressor shut down. Fault lights were cold box trip.
Restarted the compressor by 3:30 and started
flow to the solenoid by 4:15.
Peter Yandon came down with Ops' radio to investigate the radios may trip the solenoid. When the radio is keyed the vacuum
guages jump. CG1, CG5 and the pirani gauges. This would trip of the refrigerator. More investigation to happen tomorrow and on maintenance day.
Entry  Sun Aug 24 06:45:14 2008, Doug Preddy, Quench Recovery, switch to series mode 
 
Entry  Fri Sep 26 09:45:18 2008, Doug Preddy, Quench Recovery, Solenoid quenched at 7:50 
Compressor on. Turbines started. Vacuum system recovering.
Entry  Fri Sep 26 09:50:18 2008, Doug Preddy, Quench Recovery, started flow in parallel cold return mode 
 
Entry  Sun Oct 5 18:54:27 2008, Doug Preddy, Quench Recovery, Solenoid Quench ~16:30 
Restarted compressor and flow to coldbox by 18:30
Entry  Wed May 27 08:06:00 2009, Doug Preddy, Quench Recovery, Solenoid quenched at 5:00 
The solenoid quenched at 5:00 this morning due to power lead temps. The temps started oscillating about 10 minutes before the trip. The compressor and
the cold box stayed on. The flow to the solenoid was stopped.
The solenoid flow was started in parallel cold return at ~7:20.
Entry  Wed May 27 13:37:22 2009, Doug Preddy, Quench Recovery, switch to series mode 
Switched to series mode at ~11:00. Built liquid to 55% by 13:30. Started flow to the power leads.
Entry  Wed May 27 15:01:34 2009, Doug Preddy, Quench Recovery, power leads 
Power leads are cold. There is still a small ripple. The power supply can be ramped up as soon as the ripples die out.
Entry  Fri Jul 10 00:34:03 2009, Doug Preddy, Quench Recovery, solewnoid quench due to power bump 
Solenoid quench due to power bump caused by an airplane crash in Richmond at ~ 22:00. Compressor off. Water pump off. Restarted compressor at ~ 11:30.
Cooling solenoid in parallel cold return mode by 12:15.
Entry  Fri Jul 10 01:10:59 2009, Doug Preddy, Quench Recovery, switch to parallel warm return 
 
Entry  Tue Jul 14 15:28:36 2009, Doug Preddy, Quench Recovery, Solenoid ramped up 
The solenoid is cold and I have started to ramp up the power supply. Some slight ripples in the power leads, but they are dieing out. Liquid level is
a lot more stable this time.
Entry  Fri Apr 9 07:34:55 2010, Doug Preddy, Quench Recovery, switched to parallel cold return 
Switched to parallel cold return at about 7:30 this morning
 
Entry  Mon May 3 07:49:54 2010, Doug Preddy, Quench Recovery, Solenoid quench Saturday 
Solenoid quenched at ~13:30 Saturday. Kevin came in later in the day to recover it. System was in all around mode, no flow to solenoid. Discharge pressure
went over 12 bar while starting flow and tripped the compresswor. After restart solenoid was cooling well.
Monday morning 7:30 I opened CV155 to increase the cooldown rate.
Entry  Thu May 13 07:39:55 2010, Doug Preddy, Quench Recovery, solenoid quench last night 
Solenoid quenched on power lead temps last evening. I am recovering it in parallel cold return mode. C12~60K C1~50K.
Entry  Thu May 13 14:37:13 2010, Doug Preddy, Quench Recovery, switching to series mode. 
 
Entry  Mon Jun 7 09:24:47 2010, Doug Preddy, Quench Recovery, started flow to power leads 
 
Entry  Thu Jun 9 06:53:40 2005, Experimentor, Other, Trip at 6:45 Today.  
Solenoid quenched at 6:45.  All temperature monitors were flat until trip.  
Hearing compressor stop was first warning.  Lights are:
Turbine T1 overspeed,  Compresor alarm, cryostat quench.
Entry  Thu Jul 5 11:01:47 2007, Kevin Trithardt, Other, Current lead warm up 
Due to curent lead temperature occilation Doug recommended warming up the 
current leads.
Entry  Wed Nov 28 15:07:08 2007, Kevin Trithardt, Other, power lead regeneration 
Power leads cold again, power supply ramping up.
Entry  Sun Jul 13 20:17:24 2008, Doug Preddy, Other, Helium refrigerator problems 
In early June the helium compressor was running with the solenoid cold. A vavlve broke off at the suction side of the compressor. The entire helium inventory
was lost. The cold box tripped off, but the compressor did not. It ran for ~ 2 hours before I came in and shut the system down. The valve was repairedby
Kevin T and Neil Wong. We ran hot (>100C) nitrogen through the fourth adsorber for one week. The solenoid and cold box were allowed to warm above 273C.
Entry  Thu Nov 11 15:46:40 2010, Doug Preddy, Other, switched to parallel cold return 
At 14:45.
Entry  Thu Apr 22 10:39:16 2004, Doug Preddy, Normal Running, Yesterday 
Added two bottles of UHP helium to buffer tank.
Had no liquifation rate, so optimized Ti121 and HIC141 . Finally put TIC121 
into manual mode at 0.65. Power lead fluctuation died out and liquid 
Entry  Fri Apr 23 09:19:30 2004, Doug Preddy, Normal Running, CV211 
PIC 229 was down to 10.8 bar this morning. PIC 229 was trying to open CV211 
to charge the system. I realized that in restoring the control to CV211 I 
did not get the wire into the connector properly. Went back up to the 
Entry  Tue Apr 27 09:03:18 2004, Doug Preddy, Normal Running, Power leads 
Power leads are being monitored with the strip tool graphs. I saw the temps 
go from having a ripple to almost no ripple, but starting to increase in 
temperature. I also noticed that the flow had dropped to 200 mm. I power 
Entry  Wed Apr 28 09:30:09 2004, Doug Preddy, Normal Running, power leads again 
Same story as yesterday. Ripples dieing out, flows down to <200 mm, temps 
increasing. Turned HIC 142 down to 0.4 then back up to 0.75. Temps dropped 
quickly. Then turned HIC 142 to 0 and back to 0.75. Temps dropping, flow > 
Entry  Tue May 4 11:20:57 2004, Doug Preddy, Normal Running, power leads going unstable 
power lead ripples increased over last couple of days. They are quickly 
dieing out now and the temps are startint to increase. PL flow is down to 
<180mm. I will power cycle HIC 142.
Entry  Tue May 4 11:26:38 2004, Doug Preddy, Normal Running, power leads  may4_1053.BMP
Power cycled HIC 142 with solenoid power at 400 amps. Flows > 240mm and 
temps have dropped.
Entry  Wed May 5 12:13:51 2004, Doug Preddy, Normal Running, power leads cold 
should be ready to run.
Entry  Tue Jun 29 14:59:46 2004, Willy Andersson, Normal Running, Removed jumper on vacuum controller. 
Tuesday 14:55

Removed jumper on back of PIC 901. This jumper should be off during
Entry  Tue Aug 24 12:09:50 2004, Doug Preddy, Normal Running, The past few days 
The solenoid has been re-started as of August 19. It was cooled down and 
energized over the weekend. Sunday night at 9:30 it tripped due to 
negative power lead going above it's set point. The system stopped flow to 
Entry  Wed Aug 25 07:47:05 2004, Doug Preddy, Normal Running, Power lead flow 
The power lead flows had dropped to 210 mm this morning. I increased HIC142 
from 0.8 to 0.83. The flows are back to <250 mm and the temps are back to 
LHe in-10.8, PL-Pos-11.1, PL-Neg-8.9
Entry  Wed Aug 25 12:52:53 2004, Doug Preddy, Normal Running, power lead ripple 
Lhe ripple has started. 10.9-11.4K PL-Pos also has a smaller ripple. Both 
flows down to 230mm. Cycled HIC 142 and the ripple disappeared. 
Put TIC121 into auto mode.
Entry  Sun Aug 29 14:39:19 2004, Doug Preddy, Normal Running, Power lead ripple 
The LHe in and PL-neg temps have been building up a ripple over the last 
few days. Curtis cycled HIC142 Friday evening at about 5:00. I just had 
the Main control room operator (Peter) cycle them again. The ripples died 
Entry  Mon Oct 25 15:44:15 2004, Doug Preddy, Normal Running, Power lead temps starting to ripple 
Power lead temps starting to ripple at a 1.5min period. PL flows are 
both>250 mm.
Entry  Tue Oct 26 09:45:24 2004, Doug Preddy, Normal Running, power leads warming 
Flow to power leads dropped to <80 mm. Cycled HIC142. Temps dropping, flows 
>250.
Entry  Fri Oct 29 14:25:23 2004, Doug Preddy, Normal Running, power lead flows dropping 
Flow is down to <190 mm. temps are starting to climb. Cycled HIC142
Entry  Mon Nov 1 07:17:44 2004, Doug Preddy, Normal Running, power lead flow gone bad 
power temps as follows:
LHE_IN 23
PL_POS 36
Entry  Thu Nov 4 13:33:49 2004, Doug Preddy, Normal Running, Power supply problems 
Last night the power supply was ramping up at a very slow rate. This 
morning it was energized,but with no current even though the limit was set 
to 500 amps. Klaus R. found the pot. that set the current limit was bad. 
Entry  Mon Nov 29 09:28:16 2004, Doug Preddy, Normal Running, Buffer tank empty 
Came down to check on system. CV211 was fully open, trying to charge the 
system. Ripples on LHe in and PL neg. CV141 fully closed. I closed CV147 to 
0.45 to try and move CV141 open. Checked the buffer tank pressure, it was 
Entry  Wed Dec 1 12:55:56 2004, Doug Preddy, Normal Running, added one bottle helium gas 
buffer tank pressure is up to 6.5 psi.
Entry  Thu Dec 2 10:51:16 2004, Doug Preddy, Normal Running, power lead ripple 
Ripples got worse overnight.LHe in 10.3-11.7, PL Neg 8.0-8.7. Flows <200mm.
cycled CV142. Flows 240mm. LHe in 10.3-11.3  PL Neg 7.9-8.1
Entry  Sun Dec 5 11:15:24 2004, Doug Preddy, Normal Running, more ripples 
I loked at the power lead temps this morning. LHe_in 10.4-12.0  PL-Neg 8.0-
9.0  PL-Pos 9.8-10.4. Flows down to 160mm. Called Ops and got Danica to 
cycle CV142. Ripples and flow improved on the second try.
Entry  Tue Jun 14 18:48:14 2005, Experimentor, Normal Running, Power bump at 18:40 
Solenoid tripped on a power bump at 18:40 Tuesday
-- Donald Arseneau
Entry  Sun Aug 14 10:03:13 2005, Willy Andersson, Normal Running, System stable 
No experiment running in M9B.

Solenoid current is zero and power supply not armed.
Entry  Tue Nov 15 07:25:10 2005, Doug Preddy, Normal Running, power supply problem 
Saturday November 12 the solenoid power supply ramped itself down to zero. 
It would not ramp up unless the ramp rate was set to 30 minutes. At this 
setting the power supply ramped up to the required current. It seems to 
Entry  Tue May 30 14:36:41 2006, Doug Preddy, Normal Running, power leads warming 
power leads warming. closed HIC 142, then re-opened. temps falling
Entry  Fri Jun 16 08:12:04 2006, Doug Preddy, Normal Running, LI108 indicates high on EPICS screen 
LI108 indicates high on EPICS screen (150%)  Controller shows ~64%
Entry  Fri Jun 30 11:13:00 2006, Doug Preddy, Normal Running, E-log is back up and running 
I would have made an entry when it died, but-----
Entry  Fri Jun 30 11:17:57 2006, Doug Preddy, Normal Running, Solenoid recovered 
Tuesday night. June 27, 2006, the solenoid quenched for no apparent 
reason. It was restarted Wednesday morning. The vacuum in the solenoid 
went away (up to 8 Torr). This was found to be a result of a leaking 
Entry  Thu Jul 6 15:00:15 2006, Doug Preddy, Normal Running, test 
 
Entry  Thu Jul 6 15:04:17 2006, Doug Preddy, Normal Running, test M9daily log070306.XLS
test
Entry  Thu Aug 10 08:33:44 2006, Doug Preddy, Normal Running, Running low on helium 
Temperture okay, but there are fluctuation in the power leads. PIC229 is 
trying to charge. The buffer tank pressure is just >0 psi. I will lower the 
liquid level to 40% to allow some helium to boil off into the buffer tank.
Entry  Sun Oct 15 07:09:41 2006, Other, Normal Running, cryopump bcp2 trip 
Donald Arseneau reporting

Not really solenoid realated, but FYI...
Entry  Fri Nov 3 12:09:51 2006, Doug Preddy, Normal Running, Fine tuning 
The power lead temperatures have been climbing at a rate of ~ 0.02K very 8 
hours. The negative lead started to show some rippling this morning. The 
positive flow had dropped from >250mm to 240mm. I cycled CV142 and the 
Entry  Tue Nov 7 10:35:32 2006, Doug Preddy, Normal Running, Maintenance day 
I ramped down the solenoid power suplly and shut off flow to the power 
leads. I will allow them to warm up and (hopefully) recover the flow rates. 
I am also regenerating the M9BCP@ cryopump.
Entry  Fri Apr 27 10:10:07 2007, Doug Preddy, Normal Running, Solenoid Cold 
Solenoid cold, power leads cold. Alarm handler started.
Entry  Mon Apr 30 09:30:26 2007, Doug Preddy, Normal Running, problems over weekend 
The PLC Limit switch power supply was tripped off on Saturday. I came in 
and reset it and restarted all the vacuum systems that had tripped off. 
The power leads were found to be warming up. This morning they were at ~ 
Entry  Wed May 2 16:28:16 2007, Doug Preddy, Normal Running, Energizing solenoid to 500 amps 
Power supply initially would not ramp up. I exercised the rate control 
selector switch and found that the power supply would ramp up at only the 
30 minute setting. It is ramping up at a rate of about 60 minutes.
Entry  Sat Jun 16 15:05:03 2007, Doug Preddy, Normal Running, Solenoid power lead temp problem 
Power lead temps rippling and increasing. I asked an operator to cycle 
HIC142. This seems to have fixed the problem (for now).
Entry  Sun Jul 1 16:09:37 2007, Doug Preddy, Normal Running, M9B:DP2 tripped off  
Diffusion pump tripped off and vacuum (and power lead temps) going up. I 
had an experimentor cycle HIC 142 at 4:15 this morning. When I got in 
today I restarted the pump and it is back to 6.0 x 10-7. Power lead temps 
Entry  Thu Jul 5 03:04:50 2007, Doug Preddy, Normal Running, Power lead problems 
The power leads temps are starting to cycle again. Earlier today M9 
experimentor cycled HIC142 to stablize the oscillations. They started 
again early this morning, so cycled HIC142 again. Oscillations died back, 
Entry  Tue Jul 31 07:53:57 2007, Kevin Trithardt, Normal Running, cycled power leads 
got a page for the power lead temp
came down and cycled the power leads.. did not seem to make a difference..
Entry  Tue Aug 14 12:55:12 2007, Doug Preddy, Normal Running, Strip tool saves 
There are two strip tools saved:
coils
powerlead
Entry  Tue Oct 2 13:02:37 2007, Doug Preddy, Normal Running, PLC problems 
While downloading new code for 2A PLC the M9 and M15 vacuum systems were 
shut off. This is due to the two systems piggybacking onto the 2A PLC.
When M9 Epics came back up there was no controls. Eventually I reset the 
Entry  Fri Nov 23 08:35:37 2007, Doug Preddy, Normal Running, power lead problems 
About 10 hours ago the power lead temperatures started to fluctuate and 
climb.
I cycled CV142 and the Temps have dropped and stablized.
Entry  Fri Nov 23 08:41:45 2007, Doug Preddy, Normal Running, screen grab of powerlead temps Capture.jpg
 
Entry  Mon Nov 26 09:45:43 2007, Doug Preddy, Normal Running, power lead problems 
Power lead temperatures were rippling yesterday afternoon. I asked one of 
the operators to cycle CV142.
The temperatures were rippling again this morning, so I cycled CV142.
Entry  Tue Nov 27 21:02:08 2007, Doug Preddy, Normal Running, power lead ripples 
power leads were oscillating tonight. John K. came down and cycled CV142. 
(Thanks John!) Temps settling out.
Entry  Wed Apr 16 15:12:01 2008, Doug Preddy, Normal Running, graphs to load 
There are three strip tools saved:
coils
powerlead
startup
Entry  Mon Apr 28 09:03:22 2008, Doug Preddy, Normal Running, power leads warmed during weekend 
The power lead temperatures suddenly rose on Sunday morning. No rippling occured before the woarm up. 
I shut flow off this morning for about 10 minutes
(until the LHe in went up to 30K) and then open the flow back up. The temperature seem to be recovering.
Entry  Tue Jul 15 08:47:13 2008, Doug Preddy, Normal Running, Screen grab of normal running july_15_08_0841.jpgjuly_15_08_0846.jpg
Solenoid was recovered on Sunday July 13. The power leads started to ripple slightly this morning, so I cycled HIC142. No real change. 
Entry  Thu Sep 4 10:02:55 2008, Doug Preddy, Normal Running, ramping down solenoid 
Solenoid power supply will be turned off for Fall shutdown.
Entry  Sun Oct 5 11:12:48 2008, Doug Preddy, Normal Running, M9B:V1 interlocks and a IOC crash 
M9A:V1 was removed this shutdown. It's "in" limit is required to allow M9B:V1 to be opened. I have bypassed the interlocks on M9B:V1 until the M9A:V1 limits
can be jumpered. Don Dale and George Clark have been informed.
Also an IOC crashed so the data pages were not updating. Evgeny rebooted the IOC. All is
now fixed.
Entry  Wed Nov 5 16:33:52 2008, Doug Preddy, Normal Running, sbplc light out 
On main menu the sbplc light was black. All vacuum systems looked good, but there was no control of any device. Jane reset the IOC. It is hosted by sundance.
Entry  Mon Oct 5 11:54:58 2009, Doug Preddy, Normal Running, Switched TIC121 into auto mode 
 
Entry  Fri Nov 12 16:54:50 2010, Doug Preddy, Normal Running, Solenoid ramped up 
 
Entry  Fri Dec 19 13:07:25 2003, Willy Andersson, Maintenance, To-Do list for M9SOL M9Blist3.txt
I had distributed this list by email earlier this month. I have added
a few items at the bottom. I am posting it on the M9SOL Elog under
Maintenance. Some of the items may not be achievable or practical but
    Reply  Fri Dec 19 13:59:53 2003, Doug Preddy, Maintenance, To-Do list for M9SOL 
> I had distributed this list by email earlier this month. I have added
> a few items at the bottom. I am posting it on the M9SOL Elog under
> Maintenance. Some of the items may not be achievable or practical but
Entry  Fri May 21 09:27:39 2004, Doug Preddy, Maintenance, Idle mode 
Power supply was ramped down yesterday as there are no users.
The Sundance server was rebooted yesterday. This morning the displays were 
all white screened, so I restarted the session. The computer was running 
Entry  Fri Oct 1 11:39:55 2004, Doug Preddy, Maintenance, Loading of compressor not working 
When the compressor was restarted on Monday, the remote load button would 
not respond. The compressor was shut off. After two days of searching the 
wiring etc. a bad connection was found on DR1 relay (upstairs in the 
Entry  Fri Mar 11 09:18:30 2005, Doug Preddy, Maintenance, services on system 
The cold box was isolated and pumped out after it warmed up. It has been 
refilled with helium.
Turbine 2 speed indicator failed at some time during the last run. After 
Entry  Mon Apr 18 09:52:11 2005, Doug Preddy, Maintenance, Relays replaced 
The following relays have been replaced in the Sulzer control panel:
K341, K379, K132, K324A, K314, K125, K127, K133, K252, K227, K233, K238, 
K239, K245, K246.
Entry  Thu May 19 15:05:31 2005, Doug Preddy, Maintenance, STA 120 replaced M9 Turbine 2.doc
The turbine 2 speed indicator control box STA 120 has been replaced with a 
newer style Jaquet controller. This is similar to the ones used in the 
ISAC helium liquifier. See attached photos for set up parameters. These 
Entry  Fri Jan 26 15:10:37 2007, Doug Preddy, Maintenance, new control computer installed 
I have installed a new control computer at the M9 solenoid control panel
Entry  Mon Mar 5 14:59:41 2007, Doug Preddy, Maintenance, Password 
On the weekend someone used this log to send spam messages. I have 
installed a password for the write privilege. Please contact me at 6399 
for the password.
Entry  Wed May 16 10:02:35 2007, Doug Preddy, Maintenance, warming up power leads 
Power lead temps have been slowly increasing over the last wekk. I ramped 
the solenoid down and am warming the power leads to >80k.
Entry  Tue Jun 12 12:48:25 2007, Doug Preddy, Maintenance, added one bottle UHP helium to system 
 
Entry  Tue Aug 14 10:15:22 2007, Doug Preddy, Maintenance, Solenoid ramped down 
Solenoid ramped down and locked out for M9A slits work.
Entry  Wed Sep 12 12:01:02 2007, Doug Preddy, Maintenance, regenerated adsorber 
regenerated adsorber
replaced MV902 "ON" switch (used nitrogen precooling on switch)
Entry  Tue Sep 18 18:48:11 2007, Curtis Ballard, Maintenance, cold box leak check 
The leak check of the cold box diff pump fittings.  Found a leak at the 
base of the diff pump on the tee that is apparently used to fill the pump 
with oil.  The fitting was removed and a plug was removed that resembled a 
Entry  Wed Sep 19 20:53:18 2007, Doug Preddy, Maintenance, More diff pump news 
Cold box pumped out to ~ 190 mTorr overnight.Leak checked the pump again. 
Still leaks at dip stick.Tried resetting the o-ring on the dip stick. It 
still leaks baddd!!!
Entry  Wed Oct 24 12:04:06 2007, Doug Preddy, Maintenance, power lead and cryopump regeneration 
Regenerating M9B:CP2 as temperature was up to almost 20k.
Shut off flow to power leads to allow them to warm up. The positive and 
negative temps were beginning to creep up.
Entry  Fri Nov 9 16:24:33 2007, Doug Preddy, Maintenance, 2APLC Died 
thumb wheel panel all lite up. 2APLC rebooted by Klara (Thanks). M9BMP2 not 
pumping properly. Edi is looking at it. 
Entry  Fri Nov 9 18:56:20 2007, Doug Preddy, Maintenance, System Ready to Run 
M9BMP2 was replaced. Vacuum good. Solenoid is ramped up. :)
Entry  Tue Sep 9 15:04:23 2008, Doug Preddy, Maintenance, Jumpered interlock for diff pump water flow 
Jumpered interlock for diff pump water flow in Proteus box.
Entry  Fri Sep 26 09:44:25 2008, Doug Preddy, Maintenance, Water flow interlock restored 
yesterday
Entry  Wed Dec 10 15:44:58 2008, Doug Preddy, Maintenance, Repairs to solenoid power supply 
Klaus and company pulled the ramp rate card out of the solenoid power supply. Operational checks were done and the rate switch was cleaned. The card was
reinserted and the ramp rate was checked. The power supply seems to ramp at a proper rate in all positions. ***Note*** The output voltage of the power
supply is proportional to the ramp rate. The faster the ramp rate the higher the output voltage.
Entry  Tue May 18 15:04:36 2010, Kevin Trithardt, Maintenance, Solenoid ramping up 
 
Entry  Sat Oct 9 22:50:26 2004, Other, , power leads warmed 
At 10:30 PM Saturday, Donald Arseneau sees power leads at
25K, having gone up for the previous 10 hours.  (I didn't
see it earlier because striptool wasn't scrolling).  Cycled
Entry  Sat Oct 16 17:13:19 2004, Other, , s 
s
Entry  Sat Oct 16 17:18:50 2004, Other, , lame 
 
Entry  Wed Nov 24 07:28:30 2004, Other, , Mission Impossible 
Entry  Wed Nov 24 07:28:38 2004, Other, , Mission Impossible 
ELOG V2.9.2-2455