move promote_pipe_return to core functions
[feisty_meow.git] / scripts / core / functions.sh
1 #!/bin/bash
2
3 # This defines some general, useful functions.
4
5 #hmmm: starting to get a bit beefy in here.  perhaps there is a good way to refactor the functions into more specific folders, if they aren't really totally general purpose?
6
7 ##############
8
9 # test whether we've been here before or not.
10 skip_all=
11 type function_sentinel &>/dev/null
12 if [ $? -eq 0 ]; then
13   # there was no error, so we can skip the inits.
14   if [ ! -z "$DEBUG_FEISTY_MEOW" ]; then
15     echo "skipping function definitions, because already defined."
16   fi
17   skip_all=yes
18 else
19   skip_all=
20 fi
21
22 if [ -z "$skip_all" ]; then
23
24   if [ ! -z "$DEBUG_FEISTY_MEOW" ]; then
25     echo "feisty meow function definitions beginning now..."
26   fi
27
28   # a handy little method that can be used for date strings.  it was getting
29   # really tiresome how many different ways the script did the date formatting.
30   function date_stringer() {
31     local sep="$1"; shift
32     if [ -z "$sep" ]; then sep='_'; fi
33     date +"%Y$sep%m$sep%d$sep%H%M$sep%S" | tr -d '/\n/'
34   }
35   
36   # makes a directory of the name specified and then tries to change the
37   # current directory to that directory.
38   function mcd() {
39     if [ ! -d "$1" ]; then mkdir -p "$1"; fi
40     cd "$1"
41   }
42
43   # returns true if the variable is an array.
44   function is_array() {
45     [[ "$(declare -p $1)" =~ "declare -a" ]]
46   }
47
48   # returns true if the name provided is a defined alias.
49   function is_alias() {
50     alias $1 &>/dev/null
51     return $?
52   }
53
54   # makes the status of pipe number N (passed as first parameter) into the
55   # main return value (i.e., the value for $?).  this is super handy to avoid
56   # repeating the awkward looking code below in multiple places.
57   function promote_pipe_return()
58   {
59     ( exit ${PIPESTATUS[$1]} )
60   }
61
62   ##############
63
64   # displays the value of a variable in bash friendly format.
65   function var() {
66     HOLDIFS="$IFS"
67     IFS=""
68     while true; do
69       local varname="$1"; shift
70       if [ -z "$varname" ]; then
71         break
72       fi
73
74       if is_alias "$varname"; then
75 #echo found $varname is alias
76         local tmpfile="$(mktemp $TMP/aliasout.XXXXXX)"
77         alias $varname | sed -e 's/.*=//' >$tmpfile
78         echo "alias $varname=$(cat $tmpfile)"
79         \rm $tmpfile
80       elif [ -z "${!varname}" ]; then
81         echo "$varname undefined"
82       else
83         if is_array "$varname"; then
84 #echo found $varname is array var 
85           local temparray
86           eval temparray="(\${$varname[@]})"
87           echo "$varname=(${temparray[@]})"
88 #hmmm: would be nice to print above with elements enclosed in quotes, so that we can properly
89 # see ones that have spaces in them.
90         else
91 #echo found $varname is simple
92           echo "$varname=${!varname}"
93         fi
94       fi
95     done | sort
96     IFS="$HOLDIFS"
97   }
98
99   ##############
100
101   # when passed a list of things, this will return the unique items from that list as an echo.
102   function uniquify()
103   {
104     # do the uniquification: split the space separated items into separate lines, then
105     # sort the list, then run the uniq tool on the list.  results will be packed back onto
106     # one line when invoked like: local fredlist="$(uniquify a b c e d a e f a e d b)"
107     echo $* | tr ' ' '\n' | sort | uniq
108   }
109
110   # sets the variable in parameter 1 to the value in parameter 2, but only if
111   # that variable was undefined.
112   function set_var_if_undefined()
113   {
114     local var_name="$1"; shift
115     local var_value="$1"; shift
116     if [ -z "${!var_name}" ]; then
117       eval export $var_name="$var_value"
118     fi
119   }
120
121   ##############
122
123   function success_sound()
124   {
125     if [ ! -z "$CLAM_FINISH_SOUND" ]; then
126       bash $FEISTY_MEOW_SCRIPTS/multimedia/sound_play.sh "$CLAM_FINISH_SOUND"
127     fi
128   }
129
130   function error_sound()
131   {
132     if [ ! -z "$CLAM_ERROR_SOUND" ]; then
133       bash $FEISTY_MEOW_SCRIPTS/multimedia/sound_play.sh "$CLAM_ERROR_SOUND"
134     fi
135   }
136
137   ##############
138
139   # echoes the maximum number of columns that the terminal supports.  usually
140   # anything you print to the terminal with length less than (but not equal to)
141   # maxcols will never wrap.
142   function get_maxcols()
143   {
144     # calculate the number of columsn in the terminal.
145     local cols=$(stty size | awk '{print $2}')
146     echo $cols
147   }
148
149   ##############
150
151   # checks the result of the last command that was run, and if that failed,
152   # then this complains and exits from bash.  the function parameters are
153   # used as the message to print as a complaint.
154   function exit_on_error()
155   {
156     if [ $? -ne 0 ]; then
157       echo -e "\n\nan important action failed and this script will stop:\n\n$*\n\n*** Exiting script..."
158       error_sound
159       exit 1
160     fi
161   }
162
163   # like exit_on_error, but will keep going after complaining.
164   function continue_on_error()
165   {
166     if [ $? -ne 0 ]; then
167       echo -e "\n\na problem occurred, but we can continue:\n\n$*\n\n=> Continuing script..."
168       error_sound
169     fi
170   }
171
172   ##############
173
174   # accepts any number of arguments and outputs them to the feisty meow event log.
175   function log_feisty_meow_event()
176   {
177     echo -e "$(date_stringer) -- ${USER}@$(hostname): $*" >> "$FEISTY_MEOW_EVENT_LOG"
178   }
179
180   ##############
181
182   # wraps secure shell with some parameters we like, most importantly to enable X forwarding.
183   function ssh()
184   {
185     local args=($*)
186     # we remember the old terminal title, then force the TERM variable to a more generic
187     # version for the other side (just 'linux'); we don't want the remote side still
188     # thinking it's running xterm.
189     save_terminal_title
190 #hmmm: why were we doing this?  it scorches the user's logged in session, leaving it without proper terminal handling.
191 #    # we save the value of TERM; we don't want to leave the user's terminal
192 #    # brain dead once we come back from this function.
193 #    local oldterm="$TERM"
194 #    export TERM=linux
195     /usr/bin/ssh -X -C "${args[@]}"
196 #    # restore the terminal variable also.
197 #    TERM="$oldterm"
198     restore_terminal_title
199   }
200
201   ##############
202
203   # locates a process given a search pattern to match in the process list.
204   # supports a single command line flag style parameter of "-u USERNAME";
205   # if the -u flag is found, a username is expected afterwards, and only the
206   # processes of that user are considered.
207   function psfind() {
208     local -a patterns=("${@}")
209 #echo ====
210 #echo patterns list is: "${patterns[@]}"
211 #echo ====
212
213     local user_flag
214     if [ "${patterns[0]}" == "-u" ]; then
215       user_flag="-u ${patterns[1]}" 
216 #echo "found a -u parm and user=${patterns[1]}" 
217       # void the two elements with that user flag so we don't use them as patterns.
218       unset patterns[0] patterns[1]=
219     else
220       # select all users.
221       user_flag="-e"
222     fi
223
224     local PID_DUMP="$(mktemp "$TMP/zz_pidlist.XXXXXX")"
225     local -a PIDS_SOUGHT
226
227     if [ "$OS" == "Windows_NT" ]; then
228       # gets cygwin's (god awful) ps to show windoze processes also.
229       local EXTRA_DOZER_FLAGS="-W"
230       # pattern to use for peeling off the process numbers.
231       local pid_finder_pattern='s/ *\([0-9][0-9]*\) *.*$/\1/p'
232
233     else
234       # flags which clean up the process listing output on unixes.
235       # apparently cygwin doesn't count as a type of unix, because their
236       # crummy specialized ps command doesn't support normal ps flags.
237       local EXTRA_UNIX_FLAGS="-o pid,args"
238       # pattern to use for peeling off the process numbers.
239       local pid_finder_pattern='s/^[[:space:]]*\([0-9][0-9]*\).*$/\1/p'
240     fi
241
242     /bin/ps $EXTRA_DOZER_FLAGS $EXTRA_UNIX_FLAGS $user_flag | tail -n +2 >$PID_DUMP
243 #echo ====
244 #echo got all this stuff in the pid dump file:
245 #cat $PID_DUMP
246 #echo ====
247
248     # search for the pattern the user wants to find, and just pluck the process
249     # ids out of the results.
250     local i
251     for i in "${patterns[@]}"; do
252       PIDS_SOUGHT+=($(cat $PID_DUMP \
253         | grep -i "$i" \
254         | sed -n -e "$pid_finder_pattern"))
255     done
256 #echo ====
257 #echo pids sought list became:
258 #echo "${PIDS_SOUGHT[@]}"
259 #echo ====
260
261     if [ ${#PIDS_SOUGHT[*]} -ne 0 ]; then
262       local PIDS_SOUGHT2=$(printf -- '%s\n' ${PIDS_SOUGHT[@]} | sort | uniq)
263       PIDS_SOUGHT=()
264       PIDS_SOUGHT=${PIDS_SOUGHT2[*]}
265       echo ${PIDS_SOUGHT[*]}
266     fi
267     /bin/rm $PID_DUMP
268   }
269   
270   # finds all processes matching the pattern specified and shows their full
271   # process listing (whereas psfind just lists process ids).
272   function psa() {
273     if [ -z "$1" ]; then
274       echo "psa finds processes by pattern, but there was no pattern on the command line."
275       return 1
276     fi
277     local -a patterns=("${@}")
278     p=$(psfind "${patterns[@]}")
279     if [ -z "$p" ]; then
280       # no matches.
281       return 0
282     fi
283
284     if [ "${patterns[0]}" == "-u" ]; then
285       # void the two elements with that user flag so we don't use them as patterns.
286       unset patterns[0] patterns[1]=
287     fi
288
289     echo ""
290     echo "Processes matching ${patterns[@]}..."
291     echo ""
292     if [ -n "$IS_DARWIN" ]; then
293       unset fuzil_sentinel
294       for i in $p; do
295         # only print the header the first time.
296         if [ -z "$fuzil_sentinel" ]; then
297           ps $i -w -u
298         else
299           ps $i -w -u | sed -e '1d'
300         fi
301         fuzil_sentinel=true
302       done
303     else 
304       # cases besides mac os x's darwin.
305       if [ "$OS" == "Windows_NT" ]; then
306         # special case for windows.
307         ps | head -1
308         for curr in $p; do
309           ps -W -p $curr | tail -n +2
310         done
311       else
312         # normal OSes can handle a nice simple query.
313         ps wu $p
314       fi
315     fi
316   }
317   
318   ##############
319
320 #hmmm: holy crowbars, this is an old one.  do we ever still have any need of it?
321   # an unfortunately similarly named function to the above 'ps' as in process
322   # methods, but this 'ps' stands for postscript.  this takes a postscript file
323   # and converts it into pcl3 printer language and then ships it to the printer.
324   # this mostly makes sense for an environment where one's default printer is
325   # pcl.  if the input postscript causes ghostscript to bomb out, there has been
326   # some good success running ps2ps on the input file and using the cleaned
327   # postscript file for printing.
328   function ps2pcl2lpr() {
329     for $i in $*; do
330       gs -sDEVICE=pcl3 -sOutputFile=- -sPAPERSIZE=letter "$i" | lpr -l 
331     done
332   }
333   
334 #hmmm: not really doing anything yet; ubuntu seems to have changed from pulseaudio in 17.04?
335   # restarts the sound driver.
336   function fix_sound_driver() {
337     # stop bash complaining about blank function body.
338     local nothing=
339 #if alsa something
340 #    sudo service alsasound restart
341 #elif pulse something
342 #    sudo pulseaudio -k
343 #    sudo pulseaudio -D
344 #else
345 #    something else...?
346 #fi
347
348   }
349
350   function screen() {
351     save_terminal_title
352 #hmmm: ugly absolute path here.
353     /usr/bin/screen $*
354     restore_terminal_title
355   }
356   
357   # switches from a /X/path form to an X:/ form.  this also processes cygwin paths.
358   function unix_to_dos_path() {
359     # we usually remove dos slashes in favor of forward slashes.
360     local DOSSYHOME
361     if [[ ! "$OS" =~ ^[Ww][iI][nN] ]]; then
362       # fake this value for non-windows (non-cygwin) platforms.
363       DOSSYHOME="$HOME"
364     else
365       # for cygwin, we must replace the /home/X path with an absolute one, since cygwin
366       # insists on the /home form instead of /c/cygwin/home being possible.  this is
367       # super frustrating and nightmarish.
368       DOSSYHOME="$(cygpath -am "$HOME")"
369     fi
370
371     if [ ! -z "$SERIOUS_SLASH_TREATMENT" ]; then
372       # unless this flag is set, in which case we force dos slashes.
373       echo "$1" | sed -e "s?^$HOME?$DOSSYHOME?g" | sed -e 's/\\/\//g' | sed -e 's/\/cygdrive//' | sed -e 's/\/\([a-zA-Z]\)\/\(.*\)/\1:\/\2/' | sed -e 's/\//\\/g'
374     else
375       echo "$1" | sed -e "s?^$HOME?$DOSSYHOME?g" | sed -e 's/\\/\//g' | sed -e 's/\/cygdrive//' | sed -e 's/\/\([a-zA-Z]\)\/\(.*\)/\1:\/\2/'
376     fi
377   }
378   
379   # switches from an X:/ form to a /cygdrive/X/path form.  this is only useful
380   # for the cygwin environment currently.
381   function dos_to_unix_path() {
382     # we always remove dos slashes in favor of forward slashes.
383 #old:    echo "$1" | sed -e 's/\\/\//g' | sed -e 's/\([a-zA-Z]\):\/\(.*\)/\/\1\/\2/'
384          echo "$1" | sed -e 's/\\/\//g' | sed -e 's/\([a-zA-Z]\):\/\(.*\)/\/cygdrive\/\1\/\2/'
385   }
386
387   # returns a successful value (0) if this system is debian or ubuntu.
388   function debian_like() {
389     # decide if we think this is debian or ubuntu or a variant.
390     DEBIAN_LIKE=$(if [ ! -z "$(grep -i debian /etc/issue)" \
391         -o ! -z "$(grep -i ubuntu /etc/issue)" ]; then echo 1; else echo 0; fi)
392     if [ $DEBIAN_LIKE -eq 1 ]; then
393       # success; this is debianish.
394       return 0
395     else
396       # this seems like some other OS.
397       return 1
398     fi
399   }
400   
401   # su function: makes su perform a login.
402   # for some OSes, this transfers the X authority information to the new login.
403   function su() {
404     if debian_like; then
405       # debian currently requires the full version which imports X authority
406       # information for su.
407   
408       # get the x authority info for our current user.
409       source "$FEISTY_MEOW_SCRIPTS/security/get_x_auth.sh"
410   
411       if [ -z "$X_auth_info" ]; then
412         # if there's no authentication info to pass along, we just do a normal su.
413         /bin/su -l $*
414       else
415         # under X, we update the new login's authority info with the previous
416         # user's info.
417         (unset XAUTHORITY; /bin/su -l $* -c "$X_auth_info ; export DISPLAY=$DISPLAY ; bash")
418       fi
419     else
420       # non-debian supposedly doesn't need the extra overhead any more.
421       # or at least suse doesn't, which is the other one we've tested on.
422       /bin/su -l $*
423     fi
424   }
425   
426   # sudo function wraps the normal sudo by ensuring we replace the terminal
427   # label if they're doing an su with the sudo.
428   function sudo() {
429     save_terminal_title
430     /usr/bin/sudo "$@"
431     retval=$?
432     restore_terminal_title
433 #    if [ "$first_command" == "su" ]; then
434 #      # yep, they were doing an su, but they're back now.
435 #      label_terminal_with_info
436 #    fi
437     return $retval
438   }
439   
440   # trashes the .#blah files that cvs and subversion leave behind when finding conflicts.
441   # this kind of assumes you've already checked them for any salient facts.
442   function clean_cvs_junk() {
443     for i in $*; do
444       find $i -follow -type f -iname ".#*" -exec perl $FEISTY_MEOW_SCRIPTS/files/safedel.pl {} ";" 
445     done
446   }
447
448   # overlay for nechung binary so that we can complain less grossly about it when it's missing.
449   function nechung() {
450     local wheres_nechung=$(which nechung 2>/dev/null)
451     if [ -z "$wheres_nechung" ]; then
452       echo "The nechung oracle program cannot be found.  You may want to consider"
453       echo "rebuilding the feisty meow applications with this command:"
454       echo "bash $FEISTY_MEOW_SCRIPTS/generator/produce_feisty_meow.sh"
455       echo
456     else
457       $wheres_nechung
458     fi
459   }
460   
461   # recreates all the generated files that the feisty meow scripts use.
462   function regenerate() {
463     # do the bootstrapping process again.
464     save_terminal_title
465     echo "regenerating feisty meow script environment."
466     bash $FEISTY_MEOW_SCRIPTS/core/reconfigure_feisty_meow.sh
467     echo
468     # force a full reload by turning off sentinel variables and methods.
469     unset -v CORE_VARIABLES_LOADED FEISTY_MEOW_LOADING_DOCK USER_CUSTOMIZATIONS_LOADED
470     unalias CORE_ALIASES_LOADED &>/dev/null
471     unset -f function_sentinel 
472     # reload feisty meow environment in current shell.
473     log_feisty_meow_event "reloading the feisty meow scripts for $USER in current shell."
474     source "$FEISTY_MEOW_SCRIPTS/core/launch_feisty_meow.sh"
475     # run nechung oracle to give user a new fortune.
476     nechung
477     restore_terminal_title
478   }
479
480   # copies a set of custom scripts into the proper location for feisty meow
481   # to merge their functions and aliases with the standard set.
482   function recustomize()
483   {
484     local custom_user="$1"; shift
485     if [ -z "$custom_user" ]; then
486       # default to login name if there was no name provided.
487       custom_user="$(logname)"
488         # we do intend to use logname here to get the login name and to ignore
489         # if the user has sudo root access; we don't want to provide a custom
490         # profile for root.
491     fi
492
493     save_terminal_title
494
495     if [ ! -d "$FEISTY_MEOW_SCRIPTS/customize/$custom_user" ]; then
496       echo -e "the customization folder for '$custom_user' is missing:
497
498     $FEISTY_MEOW_SCRIPTS/customize/$custom_user
499
500 we will skip recustomization, but these other customizations are available:
501 "
502       # a little tr and sed magic to fix the carriage returns into commas.
503       local line="$(find $FEISTY_MEOW_SCRIPTS/customize -mindepth 1 -maxdepth 1 -type d -exec basename {} ';' | tr '\n' '&' | sed 's/&/, /g' | sed -e 's/, $//')"
504         # make the line feeds and carriage returns manageable with tr.
505         # convert the ampersand, our weird replacement for EOL, with a comma + space in sed.
506         # last touch with sed removes the last comma.
507       echo "    $line"
508       return 1
509     fi
510
511     # prevent permission foul-ups.
512     my_user="$USER"
513       # here we definitely want the effective user name (in USER), since
514       # we don't want, say, fred (as logname) to own all of root's loading
515       # dock stuff.
516     chown -R "$my_user:$my_user" \
517         "$FEISTY_MEOW_LOADING_DOCK"/* "$FEISTY_MEOW_GENERATED_STORE"/* 2>/dev/null
518     continue_on_error "chowning feisty meow generated directories to $my_user"
519
520     regenerate >/dev/null
521     pushd "$FEISTY_MEOW_LOADING_DOCK/custom" &>/dev/null
522     incongruous_files="$(bash "$FEISTY_MEOW_SCRIPTS/files/list_non_dupes.sh" "$FEISTY_MEOW_SCRIPTS/customize/$custom_user" "$FEISTY_MEOW_LOADING_DOCK/custom")"
523
524     local fail_message="\n
525 are the perl dependencies installed?  if you're on ubuntu or debian, try this:\n
526     $(grep "apt-get.*perl" $FEISTY_MEOW_APEX/readme.txt)\n
527 or if you're on cygwin, then try this (if apt-cyg is available):\n
528     $(grep "apt-cyg.*perl" $FEISTY_MEOW_APEX/readme.txt)\n";
529
530     #echo "the incongruous files list is: $incongruous_files"
531     # disallow a single character result, since we get "*" as result when nothing exists yet.
532     if [ ${#incongruous_files} -ge 2 ]; then
533       log_feisty_meow_event "cleaning unknown older overrides..."
534       perl "$FEISTY_MEOW_SCRIPTS/files/safedel.pl" $incongruous_files
535       continue_on_error "running safedel.  $fail_message" 
536     fi
537     popd &>/dev/null
538     log_feisty_meow_event "copying custom overrides for $custom_user"
539     mkdir -p "$FEISTY_MEOW_LOADING_DOCK/custom" 2>/dev/null
540     perl "$FEISTY_MEOW_SCRIPTS/text/cpdiff.pl" "$FEISTY_MEOW_SCRIPTS/customize/$custom_user" "$FEISTY_MEOW_LOADING_DOCK/custom"
541     continue_on_error "running cpdiff.  $fail_message"
542
543     if [ -d "$FEISTY_MEOW_SCRIPTS/customize/$custom_user/scripts" ]; then
544       log_feisty_meow_event "copying custom scripts for $custom_user"
545 #hmmm: could save output to show if an error occurs.
546       rsync -avz "$FEISTY_MEOW_SCRIPTS/customize/$custom_user/scripts" "$FEISTY_MEOW_LOADING_DOCK/custom/" &>/dev/null
547       continue_on_error "copying customization scripts"
548     fi
549     regenerate
550
551     # prevent permission foul-ups, again.
552     chown -R "$my_user:$my_user" \
553         "$FEISTY_MEOW_LOADING_DOCK" "$FEISTY_MEOW_GENERATED_STORE" 2>/dev/null
554     continue_on_error "once more chowning feisty meow generated directories to $my_user"
555
556     restore_terminal_title
557   }
558
559   # generates a random password where the first parameter is the number of characters
560   # in the password (default 20) and the second parameter specifies whether to use
561   # special characters (1) or not (0).
562   # found function at http://legroom.net/2010/05/06/bash-random-password-generator
563   function random_password()
564   {
565     [ "$2" == "0" ] && CHAR="[:alnum:]" || CHAR="[:graph:]"
566     cat /dev/urandom | tr -cd "$CHAR" | head -c ${1:-32}
567     echo
568   }
569
570   # a wrapper for the which command that finds items on the path.  some OSes
571   # do not provide which, so we want to not be spewing errors when that
572   # happens.
573   function whichable()
574   {
575     to_find="$1"; shift
576     which which &>/dev/null
577     if [ $? -ne 0 ]; then
578       # there is no which command here.  we produce nothing due to this.
579       echo
580     fi
581     echo $(which $to_find)
582   }
583
584   function add_cygwin_drive_mounts() {
585     for i in c d e f g h q z ; do
586 #hmmm: improve this by not adding the link if already there, or if the drive is not valid.
587       ln -s /cygdrive/$i $i
588     done
589   }
590
591   ############################
592
593   # takes a file to modify, and then it will replace any occurrences of the
594   # pattern provided as the second parameter with the text in the third
595   # parameter.
596   function replace_pattern_in_file()
597   {
598     local file="$1"; shift
599     local pattern="$1"; shift
600     local replacement="$1"; shift
601     if [ -z "$file" -o -z "$pattern" -o -z "$replacement" ]; then
602       echo "replace_pattern_in_file: needs a filename, a pattern to replace, and the"
603       echo "text to replace that pattern with."
604       return 1
605     fi
606     sed -i -e "s%$pattern%$replacement%g" "$file"
607   }
608
609   # similar to replace_pattern_in_file, but also will add the new value
610   # when the old one did not already exist in the file.
611   function replace_if_exists_or_add()
612   {
613     local file="$1"; shift
614     local phrase="$1"; shift
615     local replacement="$1"; shift
616     if [ -z "$file" -o ! -f "$file" -o -z "$phrase" -o -z "$replacement" ]; then
617       echo "replace_if_exists_or_add: needs a filename, a phrase to replace, and the"
618       echo "text to replace that phrase with."
619       return 1
620     fi
621     grep "$phrase" "$file" >/dev/null
622     # replace if the phrase is there, otherwise add it.
623     if [ $? -eq 0 ]; then
624       replace_pattern_in_file "$file" "$phrase" "$replacement"
625     else
626       # this had better be the complete line.
627       echo "$replacement" >>"$file"
628     fi
629   }
630
631   ############################
632
633   # finds a variable (first parameter) in a particular property file
634   # (second parameter).  the expected format for the file is:
635   # varX=valueX
636   function seek_variable()
637   {
638     local find_var="$1"; shift
639     local file="$1"; shift
640     if [ -z "$find_var" -o -z "$file" -o ! -f "$file" ]; then
641       echo -e "seek_variable: needs two parameters, firstly a variable name, and\nsecondly a file where the variable's value will be sought." 1>&2
642       return 1
643     fi
644   
645     while read line; do
646       if [ ${#line} -eq 0 ]; then continue; fi
647       # split the line into the variable name and value.
648       IFS='=' read -a assignment <<< "$line"
649       local var="${assignment[0]}"
650       local value="${assignment[1]}"
651       if [ "${value:0:1}" == '"' ]; then
652         # assume the entry was in quotes and remove them.
653         value="${value:1:$((${#value} - 2))}"
654       fi
655       if [ "$find_var" == "$var" ]; then
656         echo "$value"
657       fi
658     done < "$file"
659   }
660   
661   # finds a variable (first parameter) in a particular XML format file
662   # (second parameter).  the expected format for the file is:
663   # ... name="varX" value="valueX" ...
664   function seek_variable_in_xml()
665   {
666     local find_var="$1"; shift
667     local file="$1"; shift
668     if [ -z "$find_var" -o -z "$file" -o ! -f "$file" ]; then
669       echo "seek_variable_in_xml: needs two parameters, firstly a variable name, and"
670       echo "secondly an XML file where the variable's value will be sought."
671       return 1
672     fi
673   
674     while read line; do
675       if [ ${#line} -eq 0 ]; then continue; fi
676       # process the line to make it more conventional looking.
677       line="$(echo "$line" | sed -e 's/.*name="\([^"]*\)" value="\([^"]*\)"/\1=\2/')"
678       # split the line into the variable name and value.
679       IFS='=' read -a assignment <<< "$line"
680       local var="${assignment[0]}"
681       local value="${assignment[1]}"
682       if [ "${value:0:1}" == '"' ]; then
683         # assume the entry was in quotes and remove them.
684         value="${value:1:$((${#value} - 2))}"
685       fi
686       if [ "$find_var" == "$var" ]; then
687         echo "$value"
688       fi
689     done < "$file"
690   }
691   
692   ############################
693
694   # goes to a particular directory passed as parameter 1, and then removes all
695   # the parameters after that from that directory.
696   function push_whack_pop()
697   {
698     local dir="$1"; shift
699     pushd "$dir" &>/dev/null
700     if [ $? -ne 0 ]; then echo failed to enter dir--quitting.; fi
701     rm -rf $* &>/dev/null
702     if [ $? -ne 0 ]; then echo received a failure code when removing.; fi
703     popd &>/dev/null
704   }
705
706   function spacem()
707   {
708     while [ $# -gt 0 ]; do
709       arg="$1"; shift
710       if [ ! -f "$arg" -a ! -d "$arg" ]; then
711         echo "failure to find a file or directory named '$arg'."
712         continue
713       fi
714
715       # first we will capture the output of the character replacement operation for reporting.
716       # this is done first since some filenames can't be properly renamed in perl (e.g. if they
717       # have pipe characters apparently).
718       intermediate_name="$(bash "$FEISTY_MEOW_SCRIPTS/files/replace_spaces_with_underscores.sh" "$arg")"
719       local saw_intermediate_result=0
720       if [ -z "$intermediate_name" ]; then
721         # make sure we report something, if there are no further name changes.
722         intermediate_name="'$arg'"
723       else 
724         # now zap the first part of the name off (since original name isn't needed).
725         intermediate_name="$(echo $intermediate_name | sed -e 's/.*=> //')"
726         saw_intermediate_result=1
727       fi
728
729       # first we rename the file to be lower case.
730       actual_file="$(echo $intermediate_name | sed -e "s/'\([^']*\)'/\1/")"
731       final_name="$(perl $FEISTY_MEOW_SCRIPTS/files/renlower.pl "$actual_file")"
732       local saw_final_result=0
733       if [ -z "$final_name" ]; then
734         final_name="$intermediate_name"
735       else
736         final_name="$(echo $final_name | sed -e 's/.*=> //')"
737         saw_final_result=1
738       fi
739 #echo intermed=$saw_intermediate_result 
740 #echo final=$saw_final_result 
741
742       if [[ $saw_intermediate_result != 0 || $saw_final_result != 0 ]]; then
743         # printout the combined operation results.
744         echo "'$arg' => $final_name"
745       fi
746     done
747   }
748
749   ##############
750
751 # new breed of definer functions goes here.  still in progress.
752
753   # defines an alias and remembers that this is a new or modified definition.
754   # if the feisty meow codebase is unloaded, then so are all the aliases that
755   # were defined.
756   function define_yeti_alias()
757   {
758 # if alias exists already, save old value for restore,
759 # otherwise save null value for restore,
760 # have to handle unaliasing if there was no prior value of one
761 # we newly defined.
762 # add alias name to a list of feisty defined aliases.
763
764 #hmmm: first implem, just do the alias and get that working...
765 alias "${@}"
766
767
768 return 0
769   }
770
771   ##############
772
773 #hmmm: this points to an extended functions file being needed; not all of these are core.
774
775   # displays documentation in "md" formatted files.
776   function show_md()
777   {
778     local file="$1"; shift
779     pandoc "$file" | lynx -stdin
780   }
781
782   ##############
783
784   # just shows a separator line for an 80 column console, or uses the first
785   # parameter as the number of columns to expect.
786   function separator()
787   {
788     count=$1; shift
789     if [ -z "$count" ]; then
790       count=79
791     fi
792     echo
793     local i
794     for ((i=0; i < $count - 1; i++)); do
795       echo -n "="
796     done
797     echo
798     echo
799   }
800   # alias for separator.
801   function sep()
802   {
803     separator $*
804   }
805
806   ##############
807
808   # count the number of sub-directories in a directory and echo the result.
809   function count_directories()
810   {
811     local subbydir="$1"; shift
812     numdirs="$(find "$subbydir" -mindepth 1 -maxdepth 1 -type d | wc -l)"
813     echo $numdirs
814   }
815
816   # takes a string and capitalizes just the first character.  any capital letters in the remainder of
817   # the string are made lower case.  the processed string is returned by an echo.
818   function capitalize_first_char()
819   {
820     local to_dromedary="$1"; shift
821     to_dromedary="$(tr '[:lower:]' '[:upper:]' <<< ${to_dromedary:0:1})$(tr '[:upper:]' '[:lower:]' <<< ${to_dromedary:1})"
822     echo "$to_dromedary"
823   }
824
825   # given a source path and a target path, this will make a symbolic link from
826   # the source to the destination, but only if the source actually exists.
827   function make_safe_link()
828   {
829     local src="$1"; shift
830     local target="$1"; shift
831   
832     if [ -d "$src" ]; then
833       ln -s "$src" "$target"
834       exit_on_error "Creating symlink from '$src' to '$target'"
835     fi
836     echo "Created symlink from '$src' to '$target'."
837   }
838
839   # pretty prints the json files provided as parameters.
840   function clean_json()
841   {
842     if [ -z "$*" ]; then return; fi
843     local show_list=()
844     while true; do
845       local file="$1"; shift
846       if [ -z "$file" ]; then break; fi
847       if [ ! -f "$file" ]; then "echo File '$file' does not exist."; continue; fi
848       temp_out="$TMP/$file.view"
849       cat "$file" | python -m json.tool > "$temp_out"
850       show_list+=($temp_out)
851       continue_on_error "pretty printing '$file'"
852     done
853     filedump "${show_list[@]}"
854     rm "${show_list[@]}"
855   }
856
857   function json_text()
858   {
859     # only print our special headers or text fields.
860     local CR=$'\r'
861     local LF=$'\n'
862     clean_json $* |
863         grep -i "\"text\":\|^=.*" | 
864         sed -e "s/\\\\r/$CR/g" -e "s/\\\\n/\\$LF/g"
865   }
866
867   ##############
868
869   # echoes the machine's hostname.  can be used like so:
870   #   local my_host=$(get_hostname)
871   function get_hostname()
872   {
873     # there used to be more variation in how to do this, but adopting mingw
874     # and cygwin tools really helped out.
875     local this_host=unknown
876     if [ "$OS" == "Windows_NT" ]; then
877       this_host=$(hostname)
878     elif [ ! -z "$(echo $MACHTYPE | grep apple)" ]; then
879       this_host=$(hostname)
880     elif [ ! -z "$(echo $MACHTYPE | grep suse)" ]; then
881       this_host=$(hostname --long)
882     elif [ -x "$(which hostname 2>/dev/null)" ]; then
883       this_host=$(hostname)
884     fi
885     echo "$this_host"
886   }
887
888   # makes sure that the provided "folder" is a directory and is writable.
889   function test_writeable()
890   {
891     local folder="$1"; shift
892     if [ ! -d "$folder" -o ! -w "$folder" ]; then return 1; fi
893     return 0
894   }
895
896   ##############
897
898   # given a filename and a string to seek and a number of lines, then this
899   # function will remove the first occurrence of a line in the file that
900   # matches the string, and it will also axe the next N lines as specified.
901   function create_chomped_copy_of_file()
902   {
903     local filename="$1"; shift
904     local seeker="$1"; shift
905     local numlines=$1; shift
906
907 #echo into create_chomped_copy...
908 #var filename seeker numlines 
909
910     # make a backup first, oy.
911     \cp -f "$filename" "/tmp/$(basename ${filename}).bkup-${RANDOM}" 
912     exit_on_error "backing up file: $filename"
913
914     # make a temp file to write to before we move file into place in bind.
915     local new_version="/tmp/$(basename ${filename}).bkup-${RANDOM}" 
916     \rm -f "$new_version"
917     exit_on_error "cleaning out new version of file from: $new_version"
918
919     local line
920     local skip_count=0
921     local found_any=
922     while read line; do
923       # don't bother looking at the lines if we're already in skip mode.
924       if [[ $skip_count == 0 ]]; then
925         # find the string they're seeking.
926         if [[ ! "$line" =~ .*${seeker}.* ]]; then
927           # no match.
928           echo "$line" >> "$new_version"
929         else
930           # a match!  start skipping.  we will delete this line and the next N lines.
931           ((skip_count++))
932 #echo first skip count is now $skip_count
933           found_any=yes
934         fi
935       else
936         # we're already skipping.  let's keep going until we hit the limit.
937         ((skip_count++))
938 #echo ongoing skip count is now $skip_count
939         if (( $skip_count > $numlines )); then
940           echo "Done skipping, and back to writing output file."
941           skip_count=0
942         fi
943       fi
944     done < "$filename"
945
946 #echo file we created looks like this:
947 #cat "$new_version"
948
949     if [ ! -z "$found_any" ]; then
950       # put the file back into place under the original name.
951       \mv "$new_version" "$filename"
952       exit_on_error "moving the new version into place in: $filename"
953     else
954       # cannot always be considered an error, but we can at least gripe.
955       echo "Did not find any matches for seeker '$seeker' in file: $filename"
956     fi
957   }
958
959   ##############
960
961   # site avenger aliases
962   function switchto()
963   {
964     THISDIR="$FEISTY_MEOW_SCRIPTS/site_avenger"
965     source "$FEISTY_MEOW_SCRIPTS/site_avenger/shared_site_mgr.sh"
966     switch_to "$1"
967   }
968
969   ##############
970
971   # NOTE: no more function definitions are allowed after this point.
972
973   function function_sentinel()
974   {
975     return 0; 
976   }
977   
978   if [ ! -z "$DEBUG_FEISTY_MEOW" ]; then echo "feisty meow function definitions done."; fi
979
980   ##############
981
982   # test code for set_var_if_undefined.
983   run_test=0
984   if [ $run_test != 0 ]; then
985     echo running tests on set_var_if_undefined.
986     flagrant=petunia
987     set_var_if_undefined flagrant forknordle
988     exit_on_error "testing if defined variable would be whacked"
989     if [ $flagrant != petunia ]; then
990       echo set_var_if_undefined failed to leave the test variable alone
991       exit 1
992     fi
993     unset bobblehead_stomper
994     set_var_if_undefined bobblehead_stomper endurance
995     if [ $bobblehead_stomper != endurance ]; then
996       echo set_var_if_undefined failed to set a variable that was not defined yet
997       exit 1
998     fi
999   fi
1000
1001 fi
1002