Implement sched switch latency analysis

The sched switch latency analysis allows to measure latencies between
sched_wakeup or sched_waking events and their corresponding
sched_switch event.

It features log, top, and stats output modes.

Signed-off-by: Antoine Busque <abusque@efficios.com>

TMP: add MI test script

Use Babeltrace's dummy output to check lost events

Suggested-by: Antoine Busque <abusque@efficios.com>
Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Add doc/mi.md

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

command.py: colored error if possible

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

cli: add copyright

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

cli: remove shebangs

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Fix: extract_timerange(): always return a pair

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Fix: analysis.py: use appropriate attributes

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Fix: _process_date_args(): use appropriate attributes

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

automaton/mem: handle `kmem_` prefix

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

setup.py: add MI console scripts

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

setup.py: chmod +x

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

date_to_epoch_nsec(): support ns only

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Implement MI mode

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

date_to_epoch_nsec(): fix and improve regexes

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Merge pull request #25 from abusque/periodic

Periodic analysis implementation

Allow user to specify fields forming the period marker key

Signed-off-by: Antoine Busque <abusque@efficios.com>

Prevent division by zero in core/cputop.py

When an extremely short period is generated (usually at the end of a
trace), there is a chance that the duration will be zero. Instead of
trying to divide by this value, set the usage percent for that
(degenerate) period to 0.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add support for periods with sub-second units

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add string to ns method and clean-up string to bytes method

Signed-off-by: Antoine Busque <abusque@efficios.com>

Initial implementation of periodic events analysis

Signed-off-by: Antoine Busque <abusque@efficios.com>

Merge pull request #24 from abusque/cli-refactor

Refactor and clean-up cli and core

Refactor and clean-up cli and core

This refactor mainly refactors modules within the cli package in order
to reduce the duplicated code between separate commands. This allows
for new analyses to be added in a much simpler fashion.

The second significant portion of the refactor is the removal of all
refresh/reset or otherwise analysis-state affecting code from the cli,
and its reimplementation within the analysis itself. The cli now
simply feeds events to the analysis (and state automaton), and
receives notifications to which it can react. For now, the only
notification type is received whenever an analysis period has ended,
in which case the default cli behaviour is to output the results.

Some other minor style clean-up is also performed where was deemed
necessary.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add lttng-iolog wrapper script

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: remove superfluous disk name formatting in io.py

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: prevent division by zero in cputop

Signed-off-by: Antoine Busque <abusque@efficios.com>

fix: filter also block requests

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix: tid is not necessarily available

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix: pip is not required if we install the distro packages

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Changelog for v0.3

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge pull request #23 from mjeanson/master

Refactor in a single package with subpackages

Convert README to reStructuredText

Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

Fix pep8 errors

Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

Refactor in a single package with subpackages

Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

fix: stats with 0 requests

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Check for babeltrace python package on installation

Define version once per package only

Add ChangeLog file

Merge pull request #22 from abusque/refactor-syscallstats

Refactor syscallstats and bump version

Bump version to 0.2

Refactor syscallstats script to use new analysis backend

Rename min/max attributes to avoid collision with built-ins

Merge pull request #21 from abusque/decouple-io

Refactor/Rewrite I/O state system and analysis

Implement check for --end argument before start of trace

Style: fix indentation in _get_io_requests

Fix: set pid correctly on FileStats init

Fix typo in _fix_context_pid

Fix: use TID instead of PID in file stats if PID is None

Refactor io latency freq output

Lint: remove unused import, fix 'dangerous' default args

Refactor io top and log views

Remove deprecated --extra argument

Fix: correct typo and existence test in fd getter

Fix: correct typo in ns_to_hour_nsec output

Style: fix pylint/pep8 style issues

Replace map() by list comprehension in disk latency stats

Refactor IO Latency stats output methods

Add generators to iterate over io requests

Add method to compare equivalent io operations

Fix: properly handle empty filters for IO file stats

Fix FileStats reset() function

Move _filter_process method to base command class

Make _arg_pid_list list of ints instead of strings

Refactor iotop per file analysis and output

Refactor iotop output methods

Add _print_ascii_graph method to simplify output of graphs

Rename filter predicates to indicate visibility

Remove deprecated breakcb in IO command

Remove unused _compute_stats method from commands

Rename IO command for consistency with other commands

Track FDs chronologically in IO analysis

Add timestamp to create/close FD notifications

Remove dead code from IO cli

Reset FD in IO Analysis

Add support for pwrite* and pread* I/O syscalls

Implement syscall I/O analysis

Move returned_size attribute from SyscallIORequest into ReadWriteIORequest

Send create process and fd notification on statedump events

Send fd create and close notifications on sched events

Fix: send create_fd notification for open io requests

Add OP_READ_WRITE IO operation type for syscalls which both read and write

Use a single method to track io request exits

Refactor/rewrite IO state provider

Refactor syscall analysis to use new SyscallEvent class

Refactor NetStateProvider to use new SyscallEvent and io rq objects

Refactor MemStateProvider to use new SyscallEvent and io rq objects

Remove pending_syscalls array from State class

Refactor statedump provider to track only state and not analysis related attributes

Don't set deprecated parent_pid on FD object

Use SyscallEvent objects in syscall state provider

Remove Syscalls_stats class

Remove analysis related attributes from FD class, add factory to create from open rq

Add get_fd_type method to retrieve fd type from syscall name

Add more IORequest classes, and io_rq attr to SyscallEvent

Set SyscallEvent name using get_syscall_name method

Remove analysis related attributes from Process state class

Add more dup open syscalls, remove generic filenames from SyscallConsts

Fix get_syscall_name string indexing

Move IO syscalls handling into separate provider