Logbooks Lab Maintenance Evaporator_1 Evaporator_2 Laser cutter Target Production Test-Stand RH-ISAC RH-Cyclotron RH-Meson Hall RH-Beamlines RH-ARIEL
  RH-Meson Hall, Page 14 of 18  Not logged in ELOG logo
Entry  Wednesday, July 15, 2015, 10:33, Isaac Earle, Standard Operation, Target 1, Cooling, T1 & T2 Cooling System Check 
- All T1 and T2 values on XTPAGE were stripped back to April 1, 2015:  All systems appear to be functioning normally, nothing unusual observed
- Expansion tank levels checked visually:  T1 level at 1/2" above top sensor nut, T2 level at 1/4" below top sensor nut --> filled
to 1/2" above
Entry  Monday, January 18, 2016, 17:19, Isaac Earle, Standard Operation, Target 1, Cooling, T1 & T2 Packages Drained; BL1A Holding Tank Released 
 The T1 and T2 cooling packages were drained to the BL1A holding tank on Jan 8 2016.  The volumes were 100L and 80L respectively.  Before
starting there was 350L of water in the holding tank from the 500MeV system which Steve Sapriken drained in September 2015.  The T1 and T2 systems
were sampled and delivered to RPG.  After receiving permission from RPG to release all 3 portions of water it was pumped into the city sewer on Jan
Entry  Monday, January 25, 2016, 16:54, Isaac Earle, Maintenance, Target 1, Cooling, T1 MRO Work 
The following work was performed at the T1 cooling package and target between January 18-21, 2016:
- Cuno water filters removed (3), and new filters installed
- Target water solenoid, H.E. secondary side solenoid, and Collimator A solenoids removed and replaced with new 24V DC versions
Entry  Wednesday, February 03, 2016, 17:35, Isaac Earle, Standard Operation, Target 2, Cooling, T2 MRO Work 
The following work was performed at the T2 cooling package and target between Jan 25 - Feb 3, 2016:
- Cuno water filters removed (2), and new filters installed
- Target water solenoid, H.E. secondary side solenoid, Collimator A solenoid, and Collimator B solenoids removed and replaced with new 24V DC versions
Entry  Friday, September 30, 2016, 16:59, Isaac Earle, Repair, Target 1, Cooling, T1 Cooling System Inlet Pressure Transducer Replaced 
 The T1 cooling system inlet pressure transducer (EPICS ID: B1A:T1CS:PGIN,  Omega part # PX315-100GI) began failing in August (exhibited gradual
decline in pressure with no corresponding change to flow rate or outlet pressure).  A new transducer was installed on Sept 30 2016 which fixed the
problem.  Cyclotron Fault Report #9238 was returned and the temporary bypass on the warning level was removed.
Entry  Thursday, November 17, 2016, 17:58, Isaac Earle, Repair, Target 2, Cooling, T2 Heat Exchanger Secondary Side Solenoid Valve Failure 
 At approximately 11am today the T2 cooling package heat exchanger secondary side water flow suddenly dropped from ~11gpm to 0.  This was confirmed
to be a real reading by observing that with no secondary cooling both the inlet and outlet target water temperatures rose steadily with beam on the target.
 While standing on the blocks in the T2 area and having a controls expert (wither "superuser" access mode) actuate the secondary side solenoid
Entry  Thursday, January 19, 2017, 08:55, Isaac Earle, Standard Operation, Target 1, Cooling, T1 MRO work complete 
The following work was completed on the T1 cooling package:
- water drained to BL1A holding tank
- all resevoir o-rings changed
Entry  Monday, March 27, 2017, 16:15, Isaac Earle, Repair, Target 1, Cooling, T1 Cooling System Target Water Return Hose Damaged IMG_8077.JPGIMG_8076.JPG
The 18' shielding block which lies west of the T1 cooling package was removed on Friday Mar 24 so that vacuum equipment could be craned into the 1A tunnel.
 During replacement, the flexible SS hose for T1 target return water got caught under the block and was ripped apart.  Workers in the area did
not realize this had occurred.  The cooling package tripped off when the hose ripped (likely due to low water flow or low supply pressure).  In
Entry  Tuesday, April 11, 2017, 17:02, Isaac Earle, Maintenance, Target 2, Cooling, T2 Cooling System MRO 
 The following work has been completed on the T2 cooling package:
- T2 system drained to South TNF holding tank (completed in Jan 2017, water already released)
- Target water and demin. circuit Cuno filters changed
Entry  Tuesday, May 09, 2017, 16:35, Isaac Earle, Repair, Target 2, Cooling, T2 target water flow gauge paddle wheel changed T2CS_FGTGT_strip.jpg
 During the target move on Thursday May 4th the paddle wheel and paddle wheel shaft for the T2CS:FGTGT sensor were changed to address transient
spikes of approximately +/-1.0 gpm which were causing nuisance trips.  There have been no transient spikes recorded since the change, and the nominal
flow value dropped from 4.9gpm to 3.6gpm.  Fault report #9836 has been returned, and the warning and trip levels, which were set higher to avoid nuisance
Entry  Tuesday, July 25, 2017, 19:23, Isaac Earle, Repair, Target 2, Cooling, T2 Heat Exchanger Secondary Side Solenoid Valve Failure (again) 
 At approximately 13:50 today the T2 cooling system secondary side solenoid valve (T2CS:SVSEC) failed to a closed position.  This was the same
location where the valve failed on July 10th (E-Log #224), and also in Nov 2016 (E-Log #211).  This repeated failure does not seem like a coincidence,
so instead of replacing the valve with a new unit, it was bypassed temporarily until we can determine the cause of the failures.  A 3/4" FNPT
Entry  Thursday, July 27, 2017, 08:57, Isaac Earle, Other, Target 2, Cooling, Failed T2CS:SVSEC valves investigation 
 The three failed T2 cooling system secondary side solenoid valves were tested yesterday to try to determine the problem.  The test steps are
detailed below:

    New spare valve (NSV) produced audible "click" and valve was seen to physically open when 24V DC driving voltage was applied
Entry  Thursday, October 26, 2017, 16:12, Isaac Earle, Repair, Target 1, Cooling, T1 collimator solenoid valve replaced 
 Around 10pm on Sunday Oct 22 beam was tripped multiple times due to low flow for the T1 collimator cooling circuit (B1A:T1:FGCOL).  Temperature
of the collimator (TC7COL, TC8COL) was monitored with reduced beam current and no increase was observed leading to the conclusion that flow was OK and
the flow gauge was faulty.  Normal operation continued until around 1:30am on Oct 26 when the collimator thermocouples both rose quickly, causing
Entry  Tuesday, April 10, 2018, 11:20, Isaac Earle, Maintenance, Other, Cooling, T1 and T2 cooling package shutdown MRO work 
 The following work was performed on the T1 and T2 cooling packages during the 2018 shutdown:
- T1 and T2 cooling packages both sampled and drained to South TNF holding tank
- Water released after testing and approval from RPG
Entry  Friday, June 01, 2018, 17:50, Isaac Earle, Repair, Target 1, Cooling, T1 collimator solenoid valve coil replaced 
Flow stopped through the T1 collimator cooling loop around the same time as a power bump this afternoon.  The problem was narrowed down to failed
solenoid valve B1A:T1:SVCOL by comparing coil resistance to other units without issue (~1.0ohm vs 3.6ohm for working units), measured at the T1/T2 PLC
cabinet.  Shielding above the T1 package was removed and the solenoid coil was replaced with a new unit.  After replacement the valve works as
Entry  Tuesday, July 03, 2018, 11:09, Isaac Earle, Repair, Target 1, Cooling, T1 cooling package outlet water pressure sensor replaced 
 The T1 cooling package outlet water pressure sensor (B1A:T1CS:PGOUT) was replaced this morning with a new unit.  Over the last few months
the sensor readout had been steadily decreasing (from around 20psi to 4psi) with no corresponding decrease in inlet pressure, and no change in the circuit
flowrate (this is how these pressure sensors typically fail).
Entry  Monday, July 23, 2018, 09:39, Isaac Earle, Repair, Target 1, Cooling, T1 collimator solenoid valve failed - Solenoid replaced 
On Saturday July 21st the T1 Collimator solenoid valve would not re-open after tripping closed due to a (planned) loss of vacuum.  Shielding was
removed and the valve solenoid was replaced which fixed the problem.  The original valve body was left in place.
This is the second time the solenoid at this location failed (See E-Log #239), and the latest of several failures of these new 24VDC solenoids
Entry  Thursday, August 23, 2018, 11:52, Isaac Earle, Repair, Target 1, Cooling, T1 cooling package pump failure and replacement TUS1801057_Triumf.pdf
On Wednesday August 15th the T1 cooling package tripped off, and could not be restarted.  On the EPICS screen the pump device went into an immediate
time-out each time we attempted to turn it on.  An electrician was involved in the debugging, and issues were found with the 480V supply.  The
breaker switch in the 480V supply panel was found to be damaged, and was replaced.  The relay in the contactor box for the pump motor thermal protection
Entry  Thursday, September 06, 2018, 13:49, Isaac Earle, Repair, Target 1, Cooling, T1 cooling package secondary side solenoid failed 
 On Friday Aug 31 at approximately 3am T1CS:FGSEC dropped to 0gpm flow.  This was confirmed to be a real reading when T1CS temperatures continued
to rise steadily.  Beam was turned off, and T1CS later turned off by operators (temps continued to rise due to heat from pump).  The cooling
package was uncovered in the morning, and the T1CS:SVSEC solenoid was replaced by Doug Preddy and Keith Ng.  This solved the problem and the package
Entry  Thursday, January 10, 2019, 13:51, Isaac Earle, Maintenance, Target 1, Cooling, T1 and T2 cooling packages inspected 
The T1 and T2 cooling packages were inspected today while running.  No water leaks were observed at either package including the high-active loops
and copper active. 
The T1 pump was fairly noisy (video was taken to record the sound).  This is the new pump installed in August 2018 (see E-Log #242). 
ELOG V2.9.2-2455