It is based off the PDF files uploaded by various Free Speech and Whistleblower organizations after Freedom of Information Act Requests made to the Department of Defense Inspector General. See also: whistleblower.org
It is an attempt to exactly copy the letters in the text, with several exceptions:
1. Each redacted part is represented by a sequence of unicode black blocks (█), and then afterwards the reason that the portion is redacted is made as a superscript.
2. email addresses are removed
3. the
4. when large portions of pages have been redacted, the phrase "(entire page redacted)" or "(most of page redacted)" are used (again, because of time constraints)
5. it is incomplete. the project to transcribe the PDF is currently unfinished.
The purpose of this is to provide searchable and easily copy/pastable portions for others to use. The original PDF files do not provide for this.
Preface Page 1
DOCID: 3253346
TOP SECRET // COMINT // 20291123
Report 05-INTEL-03
December 15, 2004
Audit Report
OFFICE OF THE INSPECTOR GENERAL OF THE DEPARTMENT OF DEFENSE
Requirements for the TRAILBLAZER And THINTHREAD Systems (U//FOUO)
This document contains information exempt from mandatory disclosure under the Freedom of Information Act. This report contains certain unclassified information relating to the organization and function of the National Security Agency that may be protected by the National Securit Act of 1959, as amended (50 United States Code § 402 (note)). Reproduction or removal of pages is prohibited. Safeguards must be taken to prevent publication or improer disclosure of the information in this report.
DERIVED FROM: NSA/CSSM 1-52
DATED: 23 November 2004
DECLASSIFY ON: 20291123
TOP SECRET // COMINT // 20291123
copy 12 of 50
Preface Page 2
DOCID: 3253346
TOP SECRET // COMIT // 20291123
Additional Copies (U)
(U To obtain copies of the report, contact Mr. Thomas F. Gimble at
(703) 604-8800 (DSN 664-8800), █████████████ at (703) 604 ████ (DSN
664-████), or ██████████████ at (410) 854-████
Suggestions for Audits (U)
(U) To suggest ideas for or to request future audits or evaluations of Defense
intelligence issues, contact the Office of the Deputy Inspecotr General for
Intelligence at (703) 604-880 (DSN 664-8800) or fax (703) 604-0045. Ideas and
requests can also be mailed to:
(U)
Office of the Deputy Inspector General for Intelligence
Attn: Executive Officer
Inspector General of the Department of Defense
400 Army Navy Drive (Room 703)
Arlington, VA 22202-4704
(U)
Defense Hotline (U)
(U) To report fraud, waste, or abuse, contact the Defense Hotline by calling
(800) 424-9098; by sending an electronic message to Hotline dodig.osd.mil; or
writing the Defense Hotline, The Pentagon, Washington, DC 20301-1900. The
identity of each writer and caller is fully protected.
Acronym (U)
(U) NSA/CSS National Securit Agency / Central Security Service
Per DoD IG
Preface Page 3
THIS PAGE INTENTIONALLY LEFT BLANK (U)
Preface Page 4
Office of the Inspector General of the Department of Defense
Report No. 05-INTEL-03
(Project No. D2003AL-0100)
December 15, 2005
Requirements for the TRAILBLAZER and THINTHREAD Systems (U)
Executive Summary (U)
(U//FOUO) (U) Who Should Read This Report And Why? Acquisition decision makers at the
National Security Agency (NSA); the designated NSA Milestone Decision Authority for
the Under Secretary of Defense for Acquisition, Technology, and Logistics; and
personnel in the Office of the Assistant Secretary of Defense (Networks and Information
Integration) should read this report. █████████████████████████████████████████
██████████████████████████████████████████████████ (b)(3)-P.L. 86-36
the NSA.
(U//FOUO) Background. We performed this audit in response to a Defense Hotline
complaint, which alleged that NSA actions in the development of THINTHREAD and
TRAILBLAZER result in fraud, waste, and abuse. The specific allegations were: (1)
TRAILBLAZER development wasted ██████████████████ (b)(1) (b)(3)-P.L. 86-36 dollars; (2) NSA
disregarded solutions to urgent U.S. national securit needs; (3) NSA modified or
suppressed studies ██████████████████████████████████████████████████(b)(3)-P.L. 86-36
and (4) NSA did not ███████████████████████████████████████████
████████(b)(3)-P.L. 86-36 THINTHREAD.
(S//SI) THINTHREAD, ██████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████(b)(1) (b)(3)-P.L. 86-36
(U//FOUO) TRAILBLAZER. TRAILBLAZER is an Acquisition Category-IA program
to acquire, through a series of spiral developments, an integrated system to provide the
much-needed mission capability against the Global Network. ████████████████
█████████████████████████████████████████ (b)(3)-P.L. 86-36 TRAILBLAZER is being
developed. See Appendix B for further details.
(U//FOUO) █████████████████████████████████████
███████████████████████████████████████████████
███████████████████████████████████████████████(b)(3)-P.L. 86-36
Preface Page 5
(U//FOUO) █████████████████████████████████████████████
██████████████████████████████████(b)(3)-P.L. 86-36
(C) Results. NSA enhanced existing digital network exploitation systems, ████████████
██████████████████████████████████████████████████████
██████████████████████████████████████████████████████
██████████████████████████████████████████████████████the National Security
Agency is inefficiently using resources to develop a digital network exploitation system
that is not capable of fully exploiting the digital network intelligence aviailable to analysts
from the Global Information Network. NSA should ████████████████████████████████
███████████████████████████
███████████████████████████
███████████████████████████
███████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
(U//FOUO) NSA mangement ████████████████████████████████████████████████████
█████████████(b)(3)-P.L. 86-36 digital network exploitation for the TRAILBLAZER ███████████████
██████████████████(b)(3)-P.L. 86-36 Technology Demonstration Platform ██████████████████████████(b)(3)-P.L. 86-36
As a result, the NSA transofmration effort may be developing a less capable long-term
digital network exploitation solution that will take longer and cost significantly more to
develop. NSA mangement should designate a team to assess ████████████████
███████████████████████████████████████(b)(3)-P.L. 86-36
the processing and exploitation requirements of the TRAILBLAZER Technology Demonstration Platform.
Also, NSA mangement should provide the results of this assessment to the
TRAILBLAZER Technology Demonstration Platform Milestone Decision Authority for
use in making the Milestone B decision. █████████████████████
█████████████████████████████████████████████████
█████████████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
(U) Mangement Comments and Audit Response. The management comments from
the Director, NSA/Chief, Central Security Service contained significant disagreements
with the report findings. The Director stated that the world's most advanced cryptologic
experts have assessed the situation and are confident in the approach NSA has taken. The
Director nonconcurred with the recommendation ███████████████
█████████████████████████████████████████████████
█████████████████████████████████████████████████
██████████████████████████████████(b)(3)-P.L. 86-36 (b)(5) The Director
concurred or partially concurred with the recommendations to █████████████████
█████████████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
and include this assessment as part of the TRAILBLAZER Milestone B decision. The
Program Executive Officer and TRAILBLAZER management will estimate the
cost/schedule impacts after they receive estimates from the review team and will decide
at that time whether to concur. Three of the four partial concurrences depend upon the
Program Executive Officer and TRAILBLAZER management decision ████████████████ █████████████████████████████████████████████████
█████████████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
U//FOUO
(U) We revised the report findings and recommendations based on the Director's
comments. However we continue to believe ██████████████████████
█████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5) We request that the NSA/Chief, Central Security Service provide █████████████████████████
█████████████(b)(3)-P.L. 86-36 (b)(5) We do not agree with management that it would be detrimental to the
signals intelligence mission ███████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
ii
Preface Page 6
(U) █████████████████████████████████████████████ (b)(3)-P.L. 86-36 We request that the Director, NSA/Chief, Central Security Service provide additional comments to this report by
January 15, 2005. See the Findings section of the report for a discussion of management
comments and audit responses, Appendix J for a detailed audit response to the
management comments, and the mangement comments section of the report for the
complete text of the comments
iii
Preface Page 7
THIS PAGE INTENTIONALLY LEFT BLANK (U)
Report Table of Contents
Table of Contents (U)
(U//FOUO)
Executive Summary i
Background 1
Objectives 3
Findings
A. █████████████████████████████████████(b)(3) P.L. 86-36 4
B. The NSA Transformation 27
Appendixes
A. Scope and Methodology 38
Prior Coverage 39
B. TRAILBLAZER 40
C. █████████████████████████████████████████████
█████████████████████████████████████████████(b)(3) P.L. 86-36 42
D. █████████████████████████████████████████████
█████████████████████████████████████████████(b)(3) P.L. 86-3655
E. THINTHREAD 58
F. Technical Studies 62
G. ██████████████████(b)(3) P.L. 86-36 73
H. █████████████████████████████████████████████
█████████████████████████████████████████████(b)(3) P.L. 86-36 82
I. Glossary 88
J. Audit Response to Management Comments 95
K. Report Distribution 113
National Security Agency, Central Security Agency Comments 114
(U//FOUO)
Report Page 0
THIS PAGE INTENTIONALLY LEFT BLANK (U)
Report Page 1
(U) Background
(C) Hotline Allegations. A letter to the Defense Hotline requested that the
Inspector General of the Department of Defense audit and investigate the
acquisition of the TRAILBLAZER and THINTHREAD programs. The complaint
charged the NSA with fraud, waste, abuse, and a disregard for a solution to urgent
security needs because the TRAILBLAZER Program █████████████████
█████████████████████████████████████████████████████(b)(3) P.L. 86-36 Also, the
NSA ignored or modified the recommendations of two technology studies ██████
███████████████████████████████████████████
███████████████████████████████████████████(b)(3) P.L. 86-36
(U) National Security Agency Mission and Planning Guidance. The mission
of the National Security Agency / Central Security Service (NSA/CSS) is to
provide actionable Signals Intelligence to U.S. decisionmakers, from the national
to the tactical level, while protecting the nation's vital information from attacks.
The urgency of the NSA / CSS mission is greater than ever since the September
11th attacks and the Global War on Terrorism.
(U//FOUO) In addition, defense planning guidance and the Director of Central
Intelligence guidance stipulate the need for "a globally vigilant intelligence
system that can provide early strategic warning of risis and detect threats" that is
supported by capabilities such as "information superiority backbone."
(S//SI) TRAILBLAZER is a ███████████(b)(1) (b)(3)-50 USC 403 (b)(3) P.L. 86-36 major acquisition program, which
started in FY 2000 and is scheduled for initial operating capability in FY 2009, to
acquire an integrated system that is composed largely of commercial technology
to provide the mcuh-needed missio ncapability against the global network through
a series of spiral developments. The TRAILBLAZER system will deliver
hardware and software, systems integration, and program integration services to
include:
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3) P.L. 86-36
1
Page 2
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████(b)(3)-P.L. 86-36
(C) THINTHREAD ████████████████████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████(b)(1) (b)(3)-P.L. 86-36
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████
██████████████████████████████████(b)(3)-P.L. 86-36
(U) Policy Governing ███████████████████████ (b)(3)-P.L. 86-36 Acquisition. Guidance for
DoD Instruction 5000.2, and the Clinger Cohen Act of 1996. Specifically, these
regulations provide the framework for the acquisition of major automated
information systems.
(U) DoD Directive 5000.1, "The Defense Acquisition System," May 12, 2003.
DoD Directive 5000.1 establishes the management process by which the DoD
provides effective, affordable, and timely systems to the users. DoD
Directive 5000.1 states that all acquisition professionals shall continuously
develop and implement initiatives to streamline and improve the Defense
Acquistion System. Specifically, this directive states that military decision
authorities and program managers shall examine and, as appropriate, adopt
innovative practices that reduce cycle time and cost and encourage teamwork.
2
Page 3
(U) DoD Instruction 5000.2, "Operation of the Defense Acquisition System,"
May 12, 2003. DoD Instruction 5000.2 establishes a management framework for
translatig mission requirements into stable, affordable, and well managed
acquisition programs that include weapon systems and automated information
systems, and highly sensitive classified, cryptologic, and intelligence projects and
programs. Instruction 5000.2 states that, during the initial concept design, DoD
Components should examine multiple concepts and material approaches to
optimize the way that DoD provides these capabilities. That approach shall
include robust analyses that consider affordability, technology maturity, and
responsivenesss.
(U) Clinger-Cohen (Information Technology Management Reform) Act of
1996. This act requires that heads of executive agencies develop and use best
practices in the acquisition of information technology. The process of an
executive agency shall include minimum criteria to be applied in considering
whether to undertake a particular investment in information systems, including
criteria related to the quantitatively expressed projected net, risk-adjusted return
on investment and specific quantitative and qualitative criteria for comparing and
prioritizing alternative information sytems investment projects.
(U) NSA/CSS Circular 5000R, "Acquisition Management," January 9, 2001.
The circular implements the principles of DoD Directive 5000.1 and DoD
Regulation 5000.2-R within the NSA/CSS. It establishes basic objectives,
policies, procedures, and responsibilities for acquisition management. The
circular states that for acquisition management within the Defense Cryptologic
Program, NSA should address interoperability between existing and future
Service tactical Signals Intelligence systems, connectivity between tactical and
national systems, consider applicable technology that may satisfy the requirement,
and possible duplication ofongoing effort.
(U) Objectives
(U//FOUO) The overall audit objective was to evaluate ██████████████████████
█████████████████████████████████████████(b)(3)-P.L. 86-36 We
did not review the management control program See Appendix A for a
discussion of the scope and methodology.
3
Page 4
(entire page redacted)
Report Page 5
THINTHREAD
(entire page redacted)
Report Page 6
█████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(U//FOUO) TRAILBLAZER ████████████████████████████████████
███████████████████(b)(3) P.L. 86-36
(TS//SI) The TRAILBLAZER ███████████████████████(b)(3)-P.L 86-36 an initiative that
began in March 2001 at a cost of approximately ███████████████████████(b1)(1) (b)(3)-P.L 86-36 focused on a set of
efforts to demonstrate essential capabilitie and establish an initial Operational
Capability by June 2002 that would lead the transformation of the NSA into an era of
effective and efficient digital network exploitation. The immediate objective of
the TRAILBLAZER ██████████████████████████████████████████████████████(b)(3)-P.L 86-
36
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L 86-36
████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L 86-36
6
Report Page 7
(entire page redacted)
Report Page 8
(entire page redacted)
Report Page 9
(entire page redacted)
Report Page 10
(entire page redacted)
Report Page 11
(most of page redacted)
(U//FOUO) Technical Review Studies. A number of internal and external technical
review studies were conducted to determine ███████████████████████████████
█████████████████████████████████████████████(b)(3) P.L. 86-36
(most of page redacted)
Report Page 12
(U) Internal Reviews
(most of page redacted)
(U//FOUO) Results of the Technical Review. The technical review concluded
█████████████████████████████████████████████(b)(3) P.L. 86-36
Report Page 13
(U//FOUO) █████████████████████████████████████████████(b)(3) P.L. 86-36 (b)(5) conclusions and recommended that:
* (U//FOUO) █████████████████████████████████████████████(b)(3) P.L. 86-36 (b)(5)
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
(U) External Reviews
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
* (U//FOUO) █████████████████████████████████████████████(b)(3) P.L. 86-36
* (U//FOUO █████████████████████████████████████████████(b)(3) P.L. 86-36
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
13
Report Page 14
(U//FOUO) Recommendations ████████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
*(U//FOUO) ███████████████████████████████████████████████████████
█████████████████████████████████████(b)(5) (b)(3)-P.L. 86-36
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████
█████████████████████████████████████ (b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
(S//SI//REL) Recommendation: █████████████████████████████
██████████████████████████████
██████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(S//SI) NSA Modernization Studies. The first "NSA Modernization Study,"
July 2001, was conducted by The National Technology Alliance, National Center
for Applied Technology after a thorough review of ongoing activities within the
TRAILBLAZER Program Management Office ███████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
14
Report Page 15
(U) The NSA Modernization Study recommended that:
*(U//FOUO) ██████████████████████████████████████████████████████
████████████████████████████████████
████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
*(U//FOUO) ██████████████████████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
*(U//FOUO) ██████████████████████████████████████████████████████
████████████████████████████████████
████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
(U//FOUO) The National Center for Applied Technology issued a second report,
a "quick-look" follow-on to the first report, in December 2001. The Chief,
Signals Intelligence Programs invited the original study team to conduct a follow-
onD study to evaluate progress within the TRAILBLAZER Program Management
Office. Despite noting some changes made in NSA management and the
TRAILBLAZER Program's acquisition strategy that promised to address the
conflicts and issues noted in the first report, the study team found that:
*███████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████
████████████████████████████████████(b)(3)-P.L. 86-36
*███████████████████████████████████
████████████████████████████████████
████████████████████████████████████(b)(3)-P.L. 86-36
██████████████████████████████
██████████████████████████████
██████████████████████████████
██████████████████████████████
██████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
████████████████████████████████████
████████████████████████████████████(b)(3)-P.L. 86-36
15
Report Page 16
██████████████████████(b)(1) (b)(3)-P.L. 86-36 THINTHREAD
(most of page redacted)
16
Report Page 17
17
Report Page 18
(page redacted)
18
Report Page 19
(entire page redacted)
19
Report Page 20
(entire page redacted)
20
Report Page 21
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(TS//SI) Studies. Prior to THINTHREAD deployment, the Technology Test and
Evaluation Assessment, March 25, 2002, advised that the following ████████████████████
█████████████████(b)(3)-P.L. 86-36 (b)(5) actions be addressed:
* ███████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
* (U) Generate user, system, technical, and programmatic documentation;
* █████████████████████████████████████████████
█████████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
* (U) Acquire sufficient numbers of appropriately skilled personnel to
develop documentation █████████████████████████████████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
██████████████████████████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████
██████████████████████████████████████████████(b)(3)-P.L. 86-36 (b)(5)
21
Report Page 22
(entire page redacted)
22
Report Page 23
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(U) Summary
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(U) Management Comments on the Finding and Audit
Response
(U//FOUO) Management Comments. The NSA management stated that the
draft report did not include significant information or included wrong or
misleading information. The complete list of management comments is in the
Management Comments section of this report.
23
Report Page 24
(U//FOUO) Audit Response. We obtained, reviewed, and analyzed many
documents and we interviewed several NSA and contractor personnel to form the
conclusions in this report. We included all information relevant to support the
report findings and recommendations. Many people we interviewed asked not to
be identified for fear of management reprisal. We gathered information from
many sources to support the finding. Paragraphs frequently contain information
from several sources to reinforce conclusions. Based on management comments,
we made various editorial changes to the draft report. See Appendix J for a
complete audit response to each management comment.
(U) Recommendations, Management Comments, and Audit
Response
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(U) A. We recommend that the Director, National Security Agency/Chief,
Central Security Service:
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(S//SI) Management Comments. The Director, National Security Agency/Chief,
Central Security Service nonconcurred and stated that the systems engineering
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
24
Report Page 25
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(S//SI) Management Comments. The Director, National Security Agency/Chief,
Central Security Service nonconcurred because the National Security Agency
management believes that ████████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
███████████████████Management did not understand what was meant by █████████
████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(S//SI) Audit Response. Based on management comments, we revised the
recommendation to explain more clearly the meaning ██████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
████████████████████████████████████████
25
Report Page 26
(TS//SI) that the National Security Agency management reconsider its position
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
3. (C) █████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(U//FOUO) Management Comments. The Director, National Security
Agency / Chief Central Security Service concurred. In April 2003, NSA provided
█████████████████████████████████████████████(b)(3) P.L. 86-36
(U//FOUO) (C) Audit Response. Management comments were partially responsive
Although the National Security Agency █████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3) P.L. 86-36
26
Report Page 27
B. The NSA Transformation (U)
(U//FOUO) █████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3)-P.L. 86-36
(U) Congressional Concerns on Digital Network Exploitation
(U) The National Defense Authorization Act for FY 2002 stated that:
(TS//SI) The NSA has clearly made great strides in seeking to
transform itself in many areas. However, the NSA appears to have
made only modest progress in the area most important to its future:
acquiring the technical ability to operate effectively against the
emerging global network. The NSA has long known that
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(U) TRAILBLAZER
(S//SI) On March 24, 2000, the Director, NSA signed the TRAILBLAZER 1
charter to create a new Signals Intelligence enterprise to exploit the global
network. TRAILBLAZER 1, with an estimated development cost of
approximately ████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5) was to respond to the opportunities and challenges
provided by emerging technologies to design new operational practices for on-
time delivery of products and service in the manner that best met customer
27
Report Page 28
(S//SI) needs - unrestrained by past practices or past technologies.
TRAILBLAZER 1 had the following key responsibilities
*(U//FOUO) Ensure the execution of a new NSA program transforming
the U.S. Cryptologic System exploitation of the global network. Map
detailed digital network exploitation mission requirements to a
cryptologic architecture and implement them; and
*(U//FOUO) Act as the catalyst for transforming customer interaction
and operational practices. Begin the retooling of NSA
programmatically, technologically, and culturally to provide mission
service and capabilities that are responsive to the emerging
technolog and customer needs.
(U) ████████████████ (b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5) TRAILBLAZER
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
28
Report Page 29
*(U//FOUO) ██████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(U) NSA Modernization Studies
(C) First NSA Modernization Study. The House Permanent Select Committee
on Intelligence directed the first "NSA Modernization Study," July 2001, which
was conducted by The National Technolog Alliance, National Center for
Applied Technology. After a thorough review of ongoing activities within the
TRAILBLAZER Program Management Office █████████████████████████████████████
█████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5) and interviews with key program personnel, the National Center for
Applied Technolog team observed that the TRAILBLAZER was poorly
executed and had an overly expensive █████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
The NSA Modernization Study recommended that:
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
(S//SI) Second NSA Modernization Study. A second National Center for
Applied Technology report, a "quick-look" follow-on report, was completed in
December 2001. The Chief, Signals Intelligence Programs invited the original
study team to conduct a follow-on study to evaluate progress within the
TRAILBLAZER Program Management Office. Despite noting some changes
made in NSA management and the TRAILBLAZER Program acquisition strategy
that promsed to address the conflicts and issues noted in the first report, the study
team found that:
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
29
Report Page 30
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3) P.L. 86-36
(U) NSA Technical Reviews
(S//SI) During FY 2001, NSA initial and followup internal technical reviews
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3)-P.L. 86-36
(U) TRAILBLAZER Acquisition
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3)-P.L. 86-36
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36 (b)(5)
30
Report Page 31
(page redacted)
31
Report Page 32
(page redacted)
32
Report Page 33
(page redacted)
33
Report Page 34
(most of page redacted)
(U) Conclusion
(S//SI) TRAILBLAZER was developed to create a new Signals Intelligence
enterprise to exploit the global network ████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
34
Report Page 35
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
(U) Summary of Management Comments on the Audit Finding
and Audit Response
(U//FOUO) Management Comments. NSA management referred to several
statements in the report that did not include all referenced documents and that
some paragraphs contained wrong or misleading information. The complete list
of management comments is located in the Management Comments section of
this report.
(U//FOUO) Audit Response. We obtained, reviewed, and analyzed many
documents to form the basis for the conclusions in this report. We also
interviewed several NSA and contractor personnel, many of whom asked not to
be identified for fear of management reprisal. We gathered information from
many sources to support the finding. Paragraphs frequently contain information
from several sources to reinforce conclusions. See Appendix J for a complete
audit response to each management comment.
(U) Recommendations, Management Comments, and Audit
Response
(C) Revised Recommendation. As a result of management comments, we
revised Recommendations B.1 and B.3 to clarify the intended use of
█████████████████████████████████████(b)(1) (b)(3)-P.L. 86-36 (b)(5)
1. (U//FOUO) We recommend that the Director, National Security
Agency/Chief, Central Security Service:
*(C) Designate a team to assess █████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-P.L. 86-36 (b)(5)
(U//FOUO) Management Comments. The Director, National Security
Agency/Chief, Central Security Service partially concurred with the internet of the
recommendation but was waiting for the results of a cost and schedule impact
study before fully concurring. The Program Executive Office is establishing an
35
Report Page 36
(U//FOUO) independent review team to complete the study before Milestone B,
scheduled for December 2004, because the study will have an effect on both the
cost and schedule for Milestone B.
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
(C) Audit Response. Based on management comments, we revised this
recommendation. The Director, National Security Agency/Chief, Central
Security Service comments were responsive and the proposed actions meet the
intent of the recommendtation. The immediate actions taken to designate an
independent review team to perform the assessment are commendable.
Milestone B has slipped to February 2005 at the earliest: therefore NSA will have
time to complete the assessment ███████████████████████████████████
█████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
TRAILBLAZER. We request that the Director, National Security Agency/Chief,
Central Security Service provide a risk mitigation plan for cost and schedule
requirements and provide comments on a final concurrence.
2. (U//FOUO) Provide the results of the external assessment to the
TRAILBLAZER Technology Demonstration Platform Milestone Decision
Authority for use in making the Milestone B decision.
(U//FOUO) Management Comments. The Director, National Security
Agency/Chief, Central Security Service concurred. The completion ofthe
independent assessment is currently scheduled fer December 2004.
(U//FOUO) Audit Response. Although the Director, National Security
Agency/Chief, Central Security Service concurred, the concurrence is based on
completing the assessment requested in Recommendation B.1. We request that
the National Security Agency management provide additional comments in
response to the final report identifying NSA plans to eliminate the cost and
schedule risks for completing the assessment.
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-P.L. 86-36
(U//FOUO) Management Comments. The Director, National Security
Agency/Chief, Central Security Service concurred, and stated that the assessment
required in Recommendation B.1 will be included in the ██████████████(b)(1) (b)(3)-P.L. 86-36
for Milestone B, scheduled for December 2004.
(S//SI) Audit Response. Although the Director, National Security Agency/Chief,
Central Security Service concurred, the concurrence is based on completing the
assessment requested in Recommendation B.1. Based on management comments
to Recommendation B.2., this recommendation was revised ██████████████
█████████████████████████████████████████
█████████████████████████████████████████(b)(1) (b)(3)-P.L. 86-36
36
Report Page 37
(S//SI) ██████████████████████████████████████████(b)(1) (b)(3)-P.L. 86-36 We request additional
comments in response to the final report identifying NSA plans to eliminate the
cost and schedule risks for completing the assessment.
37
Report Page 38
Appendix A. Scope and Methodology (U)
(U//FOUO) We reviewed documentation dating from November 2000 through
October 2003 including background information, mission and operational need
statements, concepts and operational requirements, and contracting and budget
documents. Also, we conducted interviews with program managers, analysts, and
technicians responsible for the acquisition █████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(U) We performed this audit from April 2003 through May 2004 in accordance
with generally accepted government auditing standards.
(U//FOUO) Limitation to Scope. Because our objective was limited to
evaluating a Defense Hotline allegation relating to the acquisition of the
TRAILBLAZER and THINTHREAD programs, we did not review the
management control program. █████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(U) Use of Computer-Processed Data. We did not use computer-processed
data to perform this audit.
(U//FOUO) Use of Technical Assistance. Audit Follow-up and Technical
Support Personnel assisted us during the audit. The Technical Assessment
Division assisted in the analysis of NSA acquisition █████████████████████
█████████████████████████████████████████████(b)(1) (b)(3) P.L. 86-36
(U) General Accounting Office High-Risk Area. The General Accounting
Office has identified several high-risk areas in DoD. This report provides
coverage of the Infrastructure Inefficiences and Information Technology
Investments high-risk areas.
(U) Prior Coverage
(U//FOUO) During the last 5 years, the Inspector General of the NSA issued one
report on TRAILBLAZER that dicsussed improperly based contract cost
increases, non-conformance in the management of the Statement of Work, and
excessive labor rates for contractor personnel. No prior coverage has been
conducted on the NSA THINTHREAD Program during the last 5 years.
38
Report Page 39
(U) Inspector General, NSA
(U//FOUO) Report No. ST-03-0014, "TRAILBLAZER 1/SIGINT Programs
Systems Engineering and Technical Assistance Contract," September 30, 2004
39
Report Page 40
Appendix B. TRAILBLAZER (U)
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L.
(U) Objectives of TRAILBLAZER and the Technical
Demonstration Platform
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3)-P.L. 86-36
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
*(U//FOUO) Common standards and interfaces throughout the NSA
Reference Model.
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3)-P.L. 86-36
(S//SI) Specifically, the TRAILBLAZER framework must leverage the best
commercial technology and practices. It also must be standards based to
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
40
Report Page 41
(entire page redacted )
41
Report Page 42
Appendix C.
(U//FOUO)
(most of page redacted)
42
Report Page 43
(most of page redacted)
(U//FOUO)
43
Report Page 44
(entire page redacted)
44
Report Page 45
(entire page redacted)
45
Report Page 46
(entire page redacted)
46
Report Page 47
(most of page redacted) (b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
(U) Technical Recommendations
(U) The Tiger Team made the following recommendation.
(most of page redacted) (b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
47
Report Page 48
(entire page redacted)(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
48
Report Page 49
(entire page redacted)
Report Page 50
(entire page redacted)
50
Report Page 51
(entire page redacted)
51
Report Page 52
(entire page redacted)
52
Report Page 53
(entire page redacted)
53
Report Page 54
(entire page redacted)
54
Report Page 55
Appendix D.
(most of page redacted)
55
Report Page 56
(entire page redacted)
Report Page 57
(entire page redacted)(b)(1) (b)(3)-50 USC 403 (b)(3)-P.L. 86-36
57
Report Page 58
Appendix E. THINTHREAD (U)
(most of page redacted) (b)(1) (b)(3) P.L. 86-36
58
Report Page 59
(entire page redacted)(b)(1) (b)(3) P.L. 86-36
59
Report Page 60
(entire page redacted)
60
Report Page 61
(entire page redacted)
61
Report Page 62
Appendix F. Technical Studies (U)
(U//FOUO) █████████████████████████████████████(b)(3) P.L. 86-36 THINTHREAD
Technical Review
(most of page redacted)(b)(1) (b)(3) P.L. 86-36
62
Report Page 63
(entire page redacted)(b)(1) (b)(3) P.L. 86-36
(footnote redacted) (b)(3) P.L. 86-36
63
Report Page 64
(U//FOUO) Summary of Study Recommendations. The following is complete
list of recommendations of the ██████████████████(b)(3) P.L. 86-36 THINTHREAD
Technical Review:
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(3) P.L. 86-36
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████(b)(1) (b)(3)-P.L. 86-36
(U) NSA Modernization Follow-Up Study
(S//SI) The "NSA Modernization Study," July 13, 2001, and the "NSA
Modernization Follow Up Study," December 2001, stated █████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
█████████████████████████████████████████████
Report Page 65
Report Page 66
Report Page 67
Report Page 68
Report Page 69
Report Page 70
Report Page 71
Report Page 72
Report Page 73
Report Page 74
Report Page 75
Report Page 76
Report Page 77
Report Page 78
Report Page 79
Report Page 80
Report Page 81
Report Page 82
Report Page 83
Report Page 84
Report Page 85
Report Page 86
Report Page 87
Report Page 88
Report Page 89
Report Page 90
Report Page 91
Report Page 92
Report Page 93
Report Page 94
Report Page 95
Report Page 96
Report Page 97
Report Page 98
Report Page 99