making sense of mil‐std‐882d rob hubbard atst systems ... · ericson ii, clifton a., hazard...

27
ATST Hazard Analysis Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems Engineering

Upload: others

Post on 19-Jun-2020

0 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

ATST Hazard Analysis Making Sense of MIL‐STD‐882D 

Rob Hubbard ATST Systems Engineering 

Page 2: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

The Advanced Technology Solar Telescope 

Page 3: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

ATST Cut‐away 

•  Solar telescope •  4‐meter aperture 

•  Off Axis •  All reflecLng •  DiffracLon limited images (with high‐order adapLve opLcs) 

•  Large (16‐meter diameter) rotaLng coudé room. 

•  Cooled mirrors. 

•  Cooled enclosure. 

Page 4: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

MREFC Guidelines 

•  Upon exiLng the conceptual design phase, the PEP should include an assessment of “Environmental, safety, and health issues that may arise through all project phases.” 

•  By the Lme of the construcLon‐ready PEP all safety and health issues need to be in a “well defined” state. 

•  A formal hazard analysis is one aspect of this. 

•  ATST has adopted MIL‐STD‐882 

Page 5: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

MIL‐STD‐882D 

•  “[MIL‐STD‐882D] provides a consistent means of evaluaLng idenLfied risks.” 

•  “Mishap risk must be idenLfied, evaluated, and miLgated to a level acceptable (as defined by the system user or customer)…” 

Page 6: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005.

• Ericson has 40 years of experience in system safety, • 22 specific techniques described (out of hundreds) • MIL-STD-882D is the underlying basis.

Hazard Analysis The Book 

Page 7: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Some DefiniLons 

System – An integrated composite of people, products, and processes that provide a capability to saLsfy a stated need or objecLve. 

Life Cycle– All phases of the system’s life including design, research, development, test and evaluaLon, producLon, deployment, operaLons, and disposal. –  Design and Development (D&D) –  FabricaLon (FAB) –  ConstrucLon (CONST) –  IntegraLon, Test, and Commissioning (IT&C) –  Maintenance (MAINT) –  OperaLons (OPS) –  Decommissioning and dismantling   

Page 8: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

More DefiniLons 

Hazard – Any real or potenLal condiLon that can cause  •  injury, illness, or death to personnel;  •  damage to or loss of a system, equipment or property;  •  or damage to the environment. 

Mishap – An unplanned event or series of events resul8ng in death, injury, occupaLonal illness, damage to or loss of equipment or property, or damage to the environment. 

Mishap risk – An expression of the impact and possibility of a mishap in terms of potenLal mishap severity and probability of occurrence.  

Page 9: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

And finally… 

System Safety – The applicaLon of engineering and management principles, criteria, and techniques to achieve acceptable mishap risk, within the constraints of operaLonal effecLveness and suitability, Lme, and cost, throughout all phases of the system life cycle. 

Page 10: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Step 1: IdenLfy Hazards 

•  MIL‐STD‐882D requires us to: “Iden8fy hazards through a systema8c hazard analysis process encompassing detailed analysis of system hardware and so@ware, the environment (in which the system will exist), and the intended use or applica8on.” 

…and document the process! 

Page 11: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

The ATST Hazard Analysis Form 

•  Create a Preliminary Hazard Analysis Form –  Each major subsystem has its own form 

•  Schedule meeLngs with relevant parLes –  Systems Engineer (Rob) –  Lead Electrical Engineer (Scoh, for GIS issues) –  Lead Engineer/Architect responsible for subsystem – NOAO Risk Manager (Chuck) – Others 

•  Work against drawings and plans to systemaLcally work through the assembly under analysis. 

•  MeeLngs last one hour! 

Page 12: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Deployable Plakorm 

Page 13: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Hazard IdenLficaLon Example 

Performed as a group acLvity 

Page 14: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

MeeLng Makeup 

Quorum ParLcipants 

•  Systems Engineer (presiding) 

•  Lead Engineer/Architect •  Controls Engineer 

AddiLonal ParLcipants 

•  Project Manager •  Enclosure Engineer (former process engineer) 

•  Lead Somware Engineer •  NOAO/NSO Risk Manager 

Page 15: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Step 2: Assess  Mishap Risk 

A two dimensional assessment: •  Should the hazard become a mishap, are severe are the 

results? –  Catastrophic –  CriLcal –  Marginal –  Negligible 

•  How likely is this mishap? –  Frequent –  Probable –  Occasional –  Remote –  Improbable 

Page 16: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Mishap Severity Rankings 

Severity  Descrip-on 

1  Catastrophic  Could result in death, permanent total disability, loss exceeding $1M, or irreversible severe environmental damage that violates law or regulaLon. 

2  CriLcal  Could result in permanent parLal disability, injuries or occupaLonal illness that may result in hospitalizaLon of at least three personnel, loss exceeding $200K but less than $1M, or reversible environmental damage causing a violaLon of law or regulaLon. 

3  Marginal  Could result in injury or occupaLonal illness resulLng in one or more lost work days, loss exceeding $10K but less than $200K, or miLgaLble environmental damage without violaLon of law or regulaLon where restoraLon acLviLes can be accomplished. 

4  Negligible  Could result in injury or illness not resulLng in a lost work day, loss exceeding $2K but less than $10K, or minimal environmental damage not violaLng law or regulaLon. 

Page 17: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Probability of a Mishap 

Probability  Descrip-on 

A  Frequent  Likely to occur omen in the life of an item. 

B  Probable  Will occur several Lmes in the life of an item. 

C  Occasional   Likely to occur some Lme in the life of an item. 

D  Remote  Unlikely but possible to occur in the life of an item. 

E  Improbable  So unlikely, it can be assumed occurrence may not be experienced. 

Page 18: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

The Mishap Risk Index 

•  Weighs both severity and probability. 

•  Results in Mishap Risk Index, Value, and Category. 

What must be miLgated? 

Page 19: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

The Deployable  Plakorm Revisited 

Cri8cal – Could result in permanent parLal disability, injuries or occupaLonal illness that may result in hospitalizaLon. 

Occasional – Likely to occur some Lme in the life of an item. 

Page 20: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Step 3: MiLgaLon 

Four miLgaLon classificaLons per MIL‐STD‐882D: 

•  Design change or selecLon •  IncorporaLon of safety devices •  IncorporaLon of warning devices •  Development of procedures and use of training 

Page 21: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Finished Preliminary Hazard Analysis Entry 

•  Safety devices •  Procedures and training 

Page 22: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Other Hazards 

Page 23: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Some Comments on  the Hazard MeeLngs 

•  Bring drawings or have access solid model •  Control the discussion: keep on task 

–  Complete an entry before moving on, –  But jot down notes to prompt return to new hazard. 

•  Limit meeLngs to one hour. •  Meet at a regular Lme for a protracted period. 

–  PHA took months! –  At the last peak of the acLvity we were meeLng three Lmes a week. 

•  Keep reading the severity and probability definiLons 

Page 24: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Amer the PHA? 

•  Implement some safety design changes in reference design 

•  Add requirements to the relevant specificaLon and design‐requirements documents 

•  Develop detailed procedures •  Calculate a final mishap risk index •  Discuss the project’s risk tolerance •  Use our PHA of the reference design as an example for vendors 

•  Review vendor risk analyses 

Page 25: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

The TMA Statement of Work 

Contractor shall perform a thorough hazard analysis of the TMA as prescribed in MIL‐STD‐882D, “System Safety Requirements”/”Standard PracLce for System Safety” with respect to personnel and equipment safety condiLons and possible unsafe scenarios. This analysis shall be included in the Safety Plan and shall be conLnuously reviewed and updated throughout the duraLon of the Work. At least once per each of the phases of the Work, Contractor shall formally present to AURA an update to the Safety Plan. 

Page 26: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

Some Shortcomings of Our Process 

•  We started late and did things in the wrong order iniLally. 

•  SLll need to stand back and look at larger systems rather than one assembly at a Lme. –  Fire – Hurricane –  Power failure 

•  We are much beher now than when we began, and would benefit from a second pass in some cases. 

Page 27: Making Sense of MIL‐STD‐882D Rob Hubbard ATST Systems ... · Ericson II, Clifton A., Hazard Analysis Techniques for System Safety, Hoboken, NJ: John Wiley & Sons, 2005. •Ericson

ATST  Hazard Analysis 

END