TFA (trace file analyzer

From Robs_Wiki
Jump to: navigation, search

Introduction

Trace File Analyzer (TFA) Collector simplifies diagnostic data collection on Oracle Cluster Ready Services (CRS), Oracle Grid Infrastructure (Oracle GI), and Oracle RAC systems. TFA centralizes and automates the collection of diagnostic information.

SECTION I Statements

[root@exa-dm1dbadm01 ~]# /u01/app/12.1.0.2/grid/bin/tfactl print status
[root@exa-dm1dbadm01 ~]# /u01/app/12.1.0.2/grid/bin/tfactl print config

Collect trace by a specific time

# /u01/app/grid/tfa/bin/tfactl diagcollect -all -from "Oct/18/2013 00:00:00" -to "Oct/18/2013 06:00:00" 

View all errors since the last day / 2 hours

[root@exa-dm1dbadm02 bin]# ./tfactl analyze -since 1d [2h]

View all occurrences of ORA-00600 errors

[root@exa-dm1dbadm02 bin]# ./tfactl analyze -search "ora-00600"

Gather TFA logfiles for a given time period:

root@exa-dm1dbadm01 ~]# /u01/app/12.1.0.2/grid/bin/tfactl diagcollect -all -from "Mar/16/2017 13:00:00" -to "Mar/16/2017 17:00:00"

Gather diagnostics for a specific database

[root@exa-dm1dbadm02 bin]# ./tfactl                                                                                                                                                                                                                                                                                                                             tfactl> database rac01
Set db to RAC01
tfactl> diagnosetfa 


SECTION II Statements with output

[root@exa-dm1dbadm01 ~]# /u01/app/12.1.0.2/grid/bin/tfactl print status

.------------------------------------------------------------------------------------------------------.
| Host           | Status of TFA | PID   | Port | Version    | Build ID             | Inventory Status |
+----------------+---------------+-------+------+------------+----------------------+------------------+
| exa-dm1dbadm01 | RUNNING       | 78063 | 5000 | 12.1.2.8.3 | 12128320161025194538 | COMPLETE         |
| exa-dm1dbadm02 | RUNNING       | 10231 | 5000 | 12.1.2.8.3 | 12128320161025194538 | COMPLETE         |
'----------------+---------------+-------+------+------------+----------------------+------------------'


[root@exa-dm1dbadm01 ~]# /u01/app/12.1.0.2/grid/bin/tfactl print config
.---------------------------------------------------------------.
|                         exa-dm1dbadm02                        |
+--------------------------------------------------+------------+
| Configuration Parameter                          | Value      |
+--------------------------------------------------+------------+
| TFA Version                                      | 12.1.2.8.3 |
| Java Version                                     | 1.6        |
| Public IP Network                                | ON         |
| Automatic diagnostic collection                  | OFF        |
| Alert Log Scan                                   | ON         |
| Trimming of files during diagcollection          | ON         |
| Repository current size (MB)                     | 0          |
| Repository maximum size (MB)                     | 10240      |
| Inventory Trace level                            | 1          |
| Collection Trace level                           | 1          |
| Scan Trace level                                 | 1          |
| Other Trace level                                | 1          |
| Max Size of TFA Log (MB)                         | 50         |
| Max Number of TFA Logs                           | 10         |
| Max Size of Core File (MB)                       | 20         |
| Max Collection Size of Core Files (MB)           | 200        |
| Automatic Purging                                | ON         |
| Minimum Age of Collections to Purge (Hours)      | 12         |
| Minimum Space Free to enable Alert Log Scan (MB) | 500        |
'--------------------------------------------------+------------'

.---------------------------------------------------------------.
|                         exa-dm1dbadm01                        |
+--------------------------------------------------+------------+
| Configuration Parameter                          | Value      |
+--------------------------------------------------+------------+
| TFA Version                                      | 12.1.2.8.3 |
| Java Version                                     | 1.6        |
| Public IP Network                                | ON         |
| Automatic diagnostic collection                  | OFF        |
| Alert Log Scan                                   | ON         |
| Trimming of files during diagcollection          | ON         |
| Repository current size (MB)                     | 0          |
| Repository maximum size (MB)                     | 10240      |
| Inventory Trace level                            | 1          |
| Collection Trace level                           | 1          |
| Scan Trace level                                 | 1          |
| Other Trace level                                | 1          |
| Max Size of TFA Log (MB)                         | 50         |
| Max Number of TFA Logs                           | 10         |
| Max Size of Core File (MB)                       | 20         |
| Max Collection Size of Core Files (MB)           | 200        |
| Automatic Purging                                | ON         |
| Minimum Age of Collections to Purge (Hours)      | 12         |
| Minimum Space Free to enable Alert Log Scan (MB) | 500        |
'--------------------------------------------------+------------'

[root@exa-dm1dbadm01 ~]# /u01/app/12.1.0.2/grid/bin/tfactl diagcollect -all -from "Mar/16/2017 13:00:00" -to "Mar/16/2017 17:00:00"

Collecting data for all components using above parameters...
Collecting data for all nodes and cells
Scanning files from Mar/16/2017 13:00:00 to Mar/16/2017 17:00:00

Collection Id : 20170328134259exa-dm1dbadm01

Repository Location in exa-dm1dbadm01 : /u01/app/oracle/tfa/repository

Collection monitor will wait up to 60 seconds for collections to start
2017/03/28 13:43:02 BST : Collection Name : tfa_Tue_Mar_28_13_42_59_BST_2017.zip
2017/03/28 13:43:02 BST : Sending diagcollect request to host : exa-dm1dbadm02
2017/03/28 13:43:02 BST : Scanning of files for Collection in progress...
2017/03/28 13:43:02 BST : Collecting extra files...
exa-dm1dbadm01 is Cell Master for exa-dm1celadm01
exa-dm1dbadm02 is Cell Master for exa-dm1celadm02
exa-dm1dbadm01 is Cell Master for exa-dm1celadm03
2017/03/28 13:45:35 BST : Completed collection of extra files...

2017/03/28 13:50:22 BST : Getting list of files satisfying time range [03/16/2017 13:00:00 GMT, 03/16/2017 17:00:00 GMT]
2017/03/28 13:50:22 BST : Starting Thread to identify stored files to collect
2017/03/28 13:50:22 BST : Getting List of Files to Collect
2017/03/28 13:50:23 BST : Trimming file : exa-dm1dbadm01/u01/app/oracle/crsdata/exa-dm1dbadm01/cvu/cvuhelper.log.0 with original file size : 872kB
2017/03/28 13:50:23 BST : Trimming file : exa-dm1dbadm01/u01/app/oracle/crsdata/exa-dm1dbadm01/cvu/cvutrc/cvuhelper.log.0 with original file size : 19MB
2017/03/28 13:50:23 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/alert.log with original file size : 1MB
2017/03/28 13:50:23 BST : exa-dm1dbadm01: Zipped 100 Files so Far
2017/03/28 13:50:23 BST : exa-dm1dbadm01: Zipped 200 Files so Far
2017/03/28 13:50:25 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/crsd_orarootagent_root_18.trc with original file size : 10MB
2017/03/28 13:50:25 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/crsd_scriptagent_oracle.trc with original file size : 9.1MB
2017/03/28 13:50:25 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/diskmon_19.trc with original file size : 10MB
2017/03/28 13:50:25 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/evmd_7.trc with original file size : 10MB
2017/03/28 13:50:28 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/octssd_15.trc with original file size : 10MB
2017/03/28 13:50:28 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/ohasd_20.trc with original file size : 10MB
2017/03/28 13:50:28 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/ohasd_cssdagent_root.trc with original file size : 3.1MB
2017/03/28 13:50:28 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/ohasd_cssdmonitor_root.trc with original file size : 2.7MB
2017/03/28 13:50:28 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/ohasd_oraagent_oracle.trc with original file size : 7MB
2017/03/28 13:50:28 BST : Trimming file : exa-dm1dbadm01/crs/exa-dm1dbadm01/crs/trace/osysmond.trc with original file size : 9.3MB
2017/03/28 13:50:28 BST : Trimming file : exa-dm1dbadm01/tnslsnr/exa-dm1dbadm01/mgmtlsnr/trace/mgmtlsnr.log with original file size : 23MB
2017/03/28 13:50:28 BST : exa-dm1dbadm01: Zipped 300 Files so Far
2017/03/28 13:50:29 BST : Finished Getting List of Files to Collect
2017/03/28 13:50:31 BST : Trimming file : exa-dm1dbadm01/rdbms/_mgmtdb/-MGMTDB/trace/-MGMTDB_mmon_66371.trc with original file size : 1.7MB
2017/03/28 13:50:31 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm01/dbm011/trace/dbm011_dbrm_197846.trc with original file size : 3.6MB
2017/03/28 13:50:31 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm01/dbm011/trace/dbm011_lmhb_197879.trc with original file size : 1.8MB
2017/03/28 13:50:32 BST : exa-dm1dbadm01: Zipped 400 Files so Far
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm01/dbm011/trace/dbm011_mmon_197923.trc with original file size : 659kB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm11g/dbm11g1/trace/dbm11g1_cjq0_110616.trc with original file size : 1.2MB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm11g/dbm11g1/trace/dbm11g1_dbrm_66407.trc with original file size : 3.8MB
2017/03/28 13:50:32 BST : exa-dm1dbadm01: Zipped 500 Files so Far
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm11g/dbm11g1/trace/dbm11g1_lgwr_66450.trc with original file size : 726kB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm11g/dbm11g1/trace/dbm11g1_lms0_66422.trc with original file size : 1.2MB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm11g/dbm11g1/trace/dbm11g1_lms1_66426.trc with original file size : 1.2MB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm11g/dbm11g1/trace/dbm11g1_lms2_66430.trc with original file size : 1.2MB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dbm11g/dbm11g1/trace/dbm11g1_mmon_66463.trc with original file size : 1.2MB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dggt01/dggt01_1/trace/dggt01_1_dbrm_256941.trc with original file size : 7.3MB
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dggt01/dggt01_1/trace/dggt01_1_lmhb_256971.trc with original file size : 835kB
2017/03/28 13:50:32 BST : exa-dm1dbadm01: Zipped 600 Files so Far
2017/03/28 13:50:32 BST : Trimming file : exa-dm1dbadm01/rdbms/dggt01/dggt01_1/trace/dggt01_1_mmon_257002.trc with original file size : 513kB
2017/03/28 13:50:32 BST : exa-dm1dbadm01: Zipped 700 Files so Far
2017/03/28 13:50:32 BST : exa-dm1dbadm01: Zipped 800 Files so Far
2017/03/28 13:50:35 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_arc0_81888.trc with original file size : 19GB
2017/03/28 13:50:41 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_arc1_81905.trc with original file size : 2.2GB
2017/03/28 13:50:48 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_arc2_81913.trc with original file size : 19GB
2017/03/28 13:50:56 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_arc3_81923.trc with original file size : 19GB
2017/03/28 13:51:00 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_dbrm_66521.trc with original file size : 11MB
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_dia0_66549_base_1.trc with original file size : 13MB
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_lmhb_66606.trc with original file size : 3.6MB
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_lms0_66574.trc with original file size : 558kB
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 900 Files so Far
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_lms1_66587.trc with original file size : 774kB
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1000 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1100 Files so Far
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/dsym01/dsym011/trace/dsym011_mmon_66687.trc with original file size : 3.1MB
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/rosb01/rosb011/trace/rosb011_dbrm_250656.trc with original file size : 13MB
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/rosb01/rosb011/trace/rosb011_lmhb_250685.trc with original file size : 3.2MB
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1200 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1300 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1400 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1500 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1600 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1700 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1800 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 1900 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 2000 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 2100 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 2200 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 2300 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 2400 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 2500 Files so Far
2017/03/28 13:51:01 BST : exa-dm1dbadm01: Zipped 2600 Files so Far
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/rosb01/rosb011/trace/rosb011_pr00_251405.trc with original file size : 1.4MB
2017/03/28 13:51:01 BST : Trimming file : exa-dm1dbadm01/rdbms/rsoa01/rsoa011/trace/rsoa011_lmhb_315363.trc with original file size : 235MB
2017/03/28 13:51:02 BST : Trimming file : exa-dm1dbadm01/rdbms/rsoa01/rsoa011/trace/rsoa011_nsv0_74427.trc with original file size : 4.9MB
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 2700 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 2800 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 2900 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3000 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3100 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3200 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3300 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3400 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3500 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3600 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3700 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3800 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 3900 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4000 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4100 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4200 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4300 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4400 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4500 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4600 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4700 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4800 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 4900 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 5000 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 5100 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 5200 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 5300 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 5400 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 5500 Files so Far
2017/03/28 13:51:02 BST : exa-dm1dbadm01: Zipped 5600 Files so Far
2017/03/28 13:51:02 BST : Trimming file : exa-dm1dbadm01/rdbms/rsoa01/rsoa011/trace/rsoa011_pr00_18996.trc with original file size : 1.3MB
2017/03/28 13:51:02 BST : Trimming file : exa-dm1dbadm01/rdbms/rwcp01/rwcp011/trace/rwcp011_lmhb_262558.trc with original file size : 408MB
2017/03/28 13:51:02 BST : Trimming file : exa-dm1dbadm01/tnslsnr/exa-dm1dbadm01/listener/trace/listener.log with original file size : 183MB
2017/03/28 13:51:02 BST : Trimming file : exa-dm1dbadm01/asm/+asm/+ASM1/trace/+ASM1_gmon_54285.trc with original file size : 2.2MB
2017/03/28 13:51:02 BST : Trimming file : exa-dm1dbadm01/asm/+asm/+ASM1/trace/+ASM1_lmhb_54267.trc with original file size : 426MB
2017/03/28 13:51:03 BST : Trimming file : exa-dm1dbadm01/asm/+asm/+ASM1/trace/+ASM1_lms0_54263.trc with original file size : 1.4MB
2017/03/28 13:51:03 BST : exa-dm1dbadm01: Zipped 5700 Files so Far
2017/03/28 13:51:03 BST : Trimming file : exa-dm1dbadm01/asm/+asm/+ASM1/trace/+ASM1_ora_66697.trc with original file size : 2.3MB
2017/03/28 13:51:03 BST : Trimming file : exa-dm1dbadm01/tnslsnr/exa-dm1dbadm01/listener_scan1/trace/listener_scan1.log with original file size : 12MB
2017/03/28 13:51:03 BST : Trimming file : exa-dm1dbadm01/tnslsnr/exa-dm1dbadm01/listener_scan2/trace/listener_scan2.log with original file size : 57MB
2017/03/28 13:51:03 BST : Trimming file : exa-dm1dbadm01/tnslsnr/exa-dm1dbadm01/listener_scan3/trace/listener_scan3.log with original file size : 57MB
2017/03/28 13:51:05 BST : Collecting ADR incident files...
2017/03/28 13:51:06 BST : Completed Zipping of all files
2017/03/28 13:51:06 BST : Cleaning up temporary files
2017/03/28 13:51:06 BST : Finished Cleaning up temporary files
2017/03/28 13:51:06 BST : Finalizing the Collection Zip File
2017/03/28 13:51:06 BST : Finished Finalizing the Collection Zip File
2017/03/28 13:51:06 BST : Total Number of Files checked : 196626
2017/03/28 13:51:06 BST : Total Size of all Files Checked : 72GB
2017/03/28 13:51:06 BST : Number of files containing required range : 5780
2017/03/28 13:51:06 BST : Total Size of Files containing required range : 62GB
2017/03/28 13:51:06 BST : Number of files trimmed : 53
2017/03/28 13:51:06 BST : Total Size of data prior to zip : 1.9GB
2017/03/28 13:51:06 BST : Saved 61GB by trimming files
2017/03/28 13:51:06 BST : Zip file size : 124MB
2017/03/28 13:51:06 BST : Total time taken : 484s
2017/03/28 13:51:06 BST : Remote Collection in Progress...
2017/03/28 13:51:06 BST : exa-dm1dbadm02:Completed Collection
2017/03/28 13:51:06 BST : Completed collection of zip files.

Logs are being collected to: /u01/app/oracle/tfa/repository/collection_Tue_Mar_28_13_42_59_BST_2017_node_all_cell_all
/u01/app/oracle/tfa/repository/collection_Tue_Mar_28_13_42_59_BST_2017_node_all_cell_all/exa-dm1dbadm02.tfa_Tue_Mar_28_13_42_59_BST_2017.zip
/u01/app/oracle/tfa/repository/collection_Tue_Mar_28_13_42_59_BST_2017_node_all_cell_all/exa-dm1celadm01.tfa_tue_mar_28_13_42_59_bst_2017.zip
/u01/app/oracle/tfa/repository/collection_Tue_Mar_28_13_42_59_BST_2017_node_all_cell_all/exa-dm1dbadm01.tfa_Tue_Mar_28_13_42_59_BST_2017.zip
/u01/app/oracle/tfa/repository/collection_Tue_Mar_28_13_42_59_BST_2017_node_all_cell_all/exa-dm1celadm02.tfa_tue_mar_28_13_42_59_bst_2017.zip