Expert Shell Scripting

282 Pages·2009·1.263 MB·English

by  Peters, Ron

Expert Shell Scripting
■ ■ ■
Ron Peters
Expert Shell Scripting
Copyright © 2009 by Ron Peters
All rights reserved. No part of this work may be reproduced or transmitted in any form or by any means,
electronic or mechanical, including photocopying, recording, or by any information storage or retrieval
system, without the prior written permission of the copyright owner and the publisher.
ISBN-13 (pbk): 978-1-4302-1841-8
ISBN-13 (electronic): 978-1-4302-1842-5
Printed and bound in the United States of America 9 8 7 6 5 4 3 2 1
Trademarked names may appear in this book. Rather than use a trademark symbol with every occurrence
of a trademarked name, we use the names only in an editorial fashion and to the benefit of the trademark
owner, with no intention of infringement of the trademark.
Lead Editor: Frank Pohlmann
Technical Reviewer: Brian Culp
Editorial Board: Clay Andres, Steve Anglin, Mark Beckner, Ewan Buckingham, Tony Campbell, Gary
Cornell, Jonathan Gennick, Michelle Lowman, Matthew Moodie, Jeffrey Pepper, Frank Pohlmann, Ben
Renow-Clarke, Dominic Shakeshaft, Matt Wade, Tom Welsh
Project Manager: Sofia Marchant
Copy Editor: Candace English
Associate Production Director: Kari Brooks-Copony
Production Editor: Liz Berry
Compositor: Pat Christenson
Proofreader: Lisa Hamilton
Indexer: Julie Grady
Artist: April Milne
Cover Designer: Kurt Krames
Manufacturing Director: Tom Debolski
Distributed to the book trade worldwide by Springer-Verlag New York, Inc., 233 Spring Street, 6th Floor,
New York, NY 10013. Phone 1-800-SPRINGER, fax [phone], e-mail [email protected], or
visit http://www.springeronline.com.
For information on translations, please contact Apress directly at 2855 Telegraph Avenue, Suite 600,
Berkeley, CA 94705. Phone [phone], fax [phone], e-mail [email protected], or visit http://
www.apress.com.
Apress and friends of ED books may be purchased in bulk for academic, corporate, or promotional use.
eBook versions and licenses are also available for most titles. For more information, reference our Special
Bulk Sales–eBook Licensing web page at http://www.apress.com/info/bulksales.
The information in this book is distributed on an “as is” basis, without warranty. Although every precaution
has been taken in the preparation of this work, neither the author(s) nor Apress shall have any liability to
any person or entity with respect to any loss or damage caused or alleged to be caused directly or indirectly
by the information contained in this work.
The source code for this book is available to readers at http://www.apress.com. You will need to answer
questions pertaining to this book in order to successfully download the code.
Contents at a Glance
About the Author . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . xv
About the Technical Reviewer . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xvii
Acknowledgments. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xix
Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xxi
PART 1 Basic Scripting Techniques
■ ■ ■
■CHAPTER 1 Shell Script Debugging. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3
■CHAPTER 2 Standard Function Library. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13
■CHAPTER 3 Date and Time Manipulation. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19
■CHAPTER 4 Comparisons and Tests . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 25
■CHAPTER 5 Accepting Command-Line Options, Switches,
and Parameters. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 31
■CHAPTER 6 Testing Variables and Assigning Defaults. . . . . . . . . . . . . . . . . . . . . . 37
■CHAPTER 7 Indirect Reference Variables. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 43
■CHAPTER 8 Shell Process Tree. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 49
■CHAPTER 9 Data Redirection. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 59
■CHAPTER 10 Piping Input to read . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65
PART 2 System Interaction and Advanced
■ ■ ■
Techniques
■CHAPTER 11 Math from the Shell. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 75
■CHAPTER 12 cron . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 81
■CHAPTER 13 Self-Linked Scripts. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 87
■CHAPTER 14 Throttling Parallel Processes . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 91
■CHAPTER 15 Command-Line Editing and History. . . . . . . . . . . . . . . . . . . . . . . . . . . . 99
■CHAPTER 16 Scripting from the Command Line. . . . . . . . . . . . . . . . . . . . . . . . . . . . 103
■CHAPTER 17 Automating User Input with expect. . . . . . . . . . . . . . . . . . . . . . . . . . . 107
iv
■CHAPTER 18 User Input Timeout. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 115
■CHAPTER 19 Instant Keyboard Response. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 121
■CHAPTER 20 Directory Copying. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 125
■CHAPTER 21 A Brief Tour of the X Display Environment . . . . . . . . . . . . . . . . . . . . 131
■CHAPTER 22 X Navigation Window. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 141
■CHAPTER 23 Command-Line E-mail Attachments. . . . . . . . . . . . . . . . . . . . . . . . . . 151
■CHAPTER 24 Text-Processing One-Liners . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 157
■CHAPTER 25 Editing Files in Place. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 173
■CHAPTER 26 Evaluating Variables inaFlatFile . . . . . . . . . . . . . . . . . . . . . . . . . . . . 181
■CHAPTER 27 Read Piped Input. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 183
■CHAPTER 28 Free-Format Output Using cat . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 185
■CHAPTER 29 Automating Interactive Processes. . . . . . . . . . . . . . . . . . . . . . . . . . . . 187
PART 3 Useful Scripts
■ ■ ■
■CHAPTER 30 Automating E-Mail with procmail . . . . . . . . . . . . . . . . . . . . . . . . . . . . 193
■CHAPTER 31 Process-Management Monitor. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 201
■CHAPTER 32 Managing File Counts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 211
■CHAPTER 33 Processes Running from inittab. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 215
■CHAPTER 34 Automatic RCS. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 219
■CHAPTER 35 Colorful /proc Reporting. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 223
■CHAPTER 36 Password-Aging Notification. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 231
■CHAPTER 37 A Pseudo–shadow File . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 241
■CHAPTER 38 Linux Gold-System Build . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 245
■CHAPTER 39 System Snapshots . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 251
■CHAPTER 40 Removing Large Files and Log Rolling. . . . . . . . . . . . . . . . . . . . . . . . 261
■CHAPTER 41 Core Finder. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 265
■CHAPTER 42 Network Adapter Failover . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 267
■APPENDIX A Test Switches . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 273
■APPENDIX B Special Parameters . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 275
■APPENDIX C Other Shell-Scripting Resources . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 277
■INDEX . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 281
Contents
About the Author . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . xv
About the Technical Reviewer . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xvii
Acknowledgments. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xix
Introduction . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .xxi
PART 1 Basic Scripting Techniques
■ ■ ■
■CHAPTER 1 Shell Script Debugging. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3
Shell Trace Options . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 3
Simple Output Statements . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 6
Controlling Output with Debug Levels. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8
Simplifying Error Checking with a Function. . . . . . . . . . . . . . . . . . . . . . . . . . 9
Manual Stepping. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11
■CHAPTER 2 Standard Function Library . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13
The Library File. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13
Some Useful Functions . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14
Using Your Library . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 16
■CHAPTER 3 Date and Time Manipulation. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19
Date in Days . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 19
Days Since Epoch . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20
Alternatives for Finding the Date in Seconds. . . . . . . . . . . . . . . . . . . 22
Evaluating for the Current Day and Time . . . . . . . . . . . . . . . . . . . . . . . . . . . 22
■CHAPTER 4 Comparisons and Tests . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 25
The Basics of Comparisons. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 25
vii
viii ■CONTENTS
■CHAPTER 5 Accepting Command-Line Options, Switches,
and Parameters. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 31
■CHAPTER 6 Testing Variables and Assigning Defaults . . . . . . . . . . . . . . . . 37
Setting Defaults. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 37
Variable Substitution . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 38
:= Syntax . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 39
= Syntax. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 40
:- Syntax. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 40
- Syntax. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 40
:? Syntax. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 41
? Syntax . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 41
:+ Syntax . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 42
+ Syntax. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 42
■CHAPTER 7 Indirect Reference Variables. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 43
Log File Monitoring with Indirect Variables . . . . . . . . . . . . . . . . . . . . . . . . . 43
The Main Monitor Loop . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 44
■CHAPTER 8 Shell Process Tree. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 49
Process Tree Implemented Using Arrays . . . . . . . . . . . . . . . . . . . . . . . . . . . 50
Process Tree Implemented Using Indirect Variables . . . . . . . . . . . . . . . . . 55
Bourne Shell Implementation of a Process Tree. . . . . . . . . . . . . . . . . . . . . 56
■CHAPTER 9 Data Redirection. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 59
Avoiding Confusion. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 59
Common Redirection . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 60
Access to User-Specified File Handles . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 62
Descriptor Access from the Shell. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64
■CHAPTER 10 Piping Input to read . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65
Line-by-Line Option 1 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 66
Line-by-Line Option 2 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67
Line-by-Line Option 3 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68
■CONTENTS ix
Line-by-Line Option 4 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68
Pipe to read Directly. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 70
Process Input Word-by-Word. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 70
PART 2 System Interaction and Advanced
■ ■ ■
Techniques
■CHAPTER 11 Math from the Shell . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 75
expr. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 75
Internal Shell Math. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 76
bc. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78
dc. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78
■CHAPTER 12 cron. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 81
crontab Entries . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 81
Environment Problems. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 82
Output Redirection . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 84
■CHAPTER 13 Self-Linked Scripts . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 87
■CHAPTER 14 Throttling Parallel Processes . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 91
Parallel Processing with ksh. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 92
Parallel Processing with bash. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97
■CHAPTER 15 Command-Line Editing and History . . . . . . . . . . . . . . . . . . . . . . . 99
Setting Up vi Editing. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 100
bash. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 100
ksh. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
Command and File Completion . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
■CHAPTER 16 Scripting from the Command Line. . . . . . . . . . . . . . . . . . . . . . . . 103
A Few Examples . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 103
x ■CONTENTS
■CHAPTER 17 Automating User Input with expect . . . . . . . . . . . . . . . . . . . . . . 107
A Shell Script to Customize Parameters for an expect Script. . . . . . . . . 108
An expect Script to Automate telnet . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 111
■CHAPTER 18 User Input Timeout . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 115
Manual Timeout Method . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 115
Timeout Using stty . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 117
General Timeout Utility. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 118
■CHAPTER 19 Instant Keyboard Response. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 121
■CHAPTER 20 Directory Copying. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 125
Using cp . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 125
Using tar. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 126
Using find. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 126
Using rsync . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 127
■CHAPTER 21 A Brief Tour of the X Display Environment. . . . . . . . . . . . . . . 131
The Display . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 131
X Traffic Through ssh. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 133
X Applications Through a Third-Party System. . . . . . . . . . . . . . . . . . . . . . 133
User-Profile Entry . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 135
Root-Profile Entry . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 137
Throw a Temporary Root Window . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 138
■CHAPTER 22 X Navigation Window. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 141
Navigation Window Usage. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 141
Navigation Setup. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 142
Navigation Window. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 145
■CHAPTER 23 Command-Line E-mail Attachments . . . . . . . . . . . . . . . . . . . . . 151
uuencode. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 151
MIME Encoding. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 153
■CONTENTS xi
■CHAPTER 24 Text-Processing One-Liners . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 157
Displaying Specific Fields . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 157
Specifying the Field Separator. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 158
Simple Pattern-Matching . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 158
Matching Fields Against Several Values. . . . . . . . . . . . . . . . . . . . . . . . . . . 159
Determining the Number of Fields. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 159
Determining the Last Field . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 159
Determining the Second-to-Last Field . . . . . . . . . . . . . . . . . . . . . . . . . . . . 160
Passing Variables to awk. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 160
Using a Variable Passed to awk in a Condition . . . . . . . . . . . . . . . . . . . . . 161
Displaying a Range of Fields (Main Method) . . . . . . . . . . . . . . . . . . . . . . . 161
Displaying a Range of Fields (Alternate Method). . . . . . . . . . . . . . . . . . . . 162
Determining the Length of a String Using awk . . . . . . . . . . . . . . . . . . . . . 163
Determining the Length of a String Using expr. . . . . . . . . . . . . . . . . . . . . 163
Displaying a Substring with awk . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 163
Displaying a Substring with expr. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 164
Conducting Simple Search and Replace with sed . . . . . . . . . . . . . . . . . . 164
Disregarding Blank and Commented Lines froma File . . . . . . . . . . . . . . 164
Conducting Dual Search and Replace with sed. . . . . . . . . . . . . . . . . . . . . 165
Filtering Lines with sed . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 165
Searching for Multiple Strings with egrep . . . . . . . . . . . . . . . . . . . . . . . . . 166
A Clean Method of Searching the Process Table . . . . . . . . . . . . . . . . . . . 166
Summing Columns Using awk. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 167
Generating Random Numbers Using awk. . . . . . . . . . . . . . . . . . . . . . . . . . 167
Generating Random Numbers from the Shell . . . . . . . . . . . . . . . . . . . . . . 168
Displaying Character-Based Fields with sed. . . . . . . . . . . . . . . . . . . . . . . 168
Escaping Special Characters . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 169
Returning Trailing Lines from a Pattern Match Using grep. . . . . . . . . . . 170
Returning Preceding Lines to a Pattern Match Using grep . . . . . . . . . . . 171
■CHAPTER 25 Editing Files in Place . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 173
Simple Search and Replace with ed . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 174
Search and Replace Using ed, Dissected. . . . . . . . . . . . . . . . . . . . . . . . . . 174
Examples of ed Commands . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 175
Escaping Special Characters in a File. . . . . . . . . . . . . . . . . . . . . . . . . . . . . 178
■CHAPTER 26 Evaluating Variables in a Flat File . . . . . . . . . . . . . . . . . . . . . . . . 181