changelog for v0.4.3

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge pull request #39 from abusque/save-test-results

Fix: keep the trace and output if a test fails

Tests: clean-up test utility functions

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: keep the trace and output if a test fails

Instead of always removing the traces and only outputting a diff, if the
test fails, we now keep the trace and the output we got, so it is easy
to reproduce afterwards or just copy the new output to the "expected"
folder if it is correct.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix: test lines too long

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix: use GMT clock for tests

Force the use of the GMT reference clock for our tests to run outside
the eastern time zone.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge pull request #37 from abusque/license-copyright

Add year and copyright holder to license file

Merge pull request #36 from mjeanson/master

Add license and Changelog to sdist

Add year and copyright holder to license file

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add license and Changelog to sdist

changelog for v0.4.2

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge pull request #35 from mjeanson/master

Fix: Add wrapper scripts to sdist for tests

Fix: Add wrapper scripts to sdist for tests

Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

changelog for v0.4

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge pull request #34 from mjeanson/master

Fix: Include tests dir in source dist

Fix: Include tests dir in source dist

Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

Merge pull request #33 from abusque/staging

Staging fixes

Extract prio list formatting into format_utils

Signed-off-by: Antoine Busque <abusque@efficios.com>

Set SyscallEvent.ret to None if missing due to lttng bug

Signed-off-by: Antoine Busque <abusque@efficios.com>

fix test for new formatting

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Add spaces where columns are too close

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Compact priority list

Instead of displaying the full list of priorities a process had, only
display a summary (number of time a process had each priority).

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Warn if ret field missing in syscall

Detect and output a warning if a system call does not have a "ret"
field, it happened with development version of lttng-modules and it is
good to detect it instead of crashing or ignoring it silently.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge pull request #31 from abusque/staging

v0.4 changeset

Fix: check for current_task_start_ts, not last_sched_ts, in cputop

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: remove reference to deprecated ascii_graph module in setup.py

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: generic filename formatting

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: correctly fill per proc block I/O write data

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: erroneous iadd operator for Stats.IO

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: set proc name in I/O analysis if previously unknown

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: handle max values of 0 in termgraph

Signed-off-by: Antoine Busque <abusque@efficios.com>

Handle multiple hard IRQ handler names

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: handle missing vec and empty softirq list on exit

Signed-off-by: Antoine Busque <abusque@efficios.com>

fix: double append in rq_list

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Remove accept from net_open syscalls

accept and accept4 block voluntarily, so computing latencies on these
system calls do not make much sense.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix: vec presence check

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Style: indentation issues

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Tests: refactor test framework to eliminate py.test

This replaces the external py.test dependency with the standard
`unittest` package.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Tests: clean-up and pythonify test framework

Signed-off-by: Antoine Busque <abusque@efficios.com>

Tests: initial test framework implementation

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Try to read the text metadata if babeltrace failed

Reading a trace with babeltrace -o ctf-metadata fails if the metadata is
in text format instead of binary format. When we detect this error, try
to read the metadata with 'cat'.

Also, the traces generated with the CTFWriter API can only write strings
in the environment section for now, so we add optional quotes around the
version regex to allow extracting the version in these traces.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Remove eventual trailing slash in trace path

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Replace Pyasciigraph by termgraph for freq graphs

The only remaining uses of Pyasciigraph were limited to frequency
graphs, so this commit introduces a replacement under the termgraph
module to display such frequency graphs.

This effectively eliminates the Pyasciigraph dependency, which is now
removed from the source tree.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Remove obsolete convert_size function

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: remove unused proc from io_rq filter

Signed-off-by: Antoine Busque <abusque@efficios.com>

Replace Pyasciigraph by termgraph for bar graphs in io.py

Signed-off-by: Antoine Busque <abusque@efficios.com>

Replace Pyasciigraph by termgraph in memtop

Signed-off-by: Antoine Busque <abusque@efficios.com>

Replace Pyasciigraph by termgraph in cputop, display prios

Signed-off-by: Antoine Busque <abusque@efficios.com>

Style: fix spacing issue

Signed-off-by: Antoine Busque <abusque@efficios.com>

Initial implementation of the termgraph module

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add a format_utils module to the common package

Signed-off-by: Antoine Busque <abusque@efficios.com>

Remove temporary mitest files

Signed-off-by: Antoine Busque <abusque@efficios.com>

Use core/stats in cputop and sched, add prio_list support

Signed-off-by: Antoine Busque <abusque@efficios.com>

Use core/stats in memtop and syscalls analysis

Signed-off-by: Antoine Busque <abusque@efficios.com>

Use core/stats classes in IO analysis

Signed-off-by: Antoine Busque <abusque@efficios.com>

Initial core/stats module implementation

Signed-off-by: Antoine Busque <abusque@efficios.com>

Merge pull request #30 from jgalar/master

Add a LICENSE file and a stand-alone copy of the MIT license

Add a LICENSE file and a stand-alone copy of the MIT license

A LICENSE file is provided for all other LTTng projects. These
files are added to maintain uniformity among the projects'
organization.

Signed-off-by: Jérémie Galarneau <jeremie.galarneau@efficios.com>

Merge pull request #29 from mjeanson/master

Doc: Use git url for pip install in README

Doc: Use git url for pip install in README

Signed-off-by: Michael Jeanson <mjeanson@efficios.com>

Merge pull request #28 from lttng/staging

Staging for 0.4

Merge pull request #27 from abusque/staging

Priority analysis and fixes

Fix: cputop: sort CPUs by ID instead of usage

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: don't override prio value from statedump event

If a process already has a prio value, gathered from sched_* events,
don't override it with the value extracted from an
lttng_statedump_process_state event.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: use path to kernel trace to look up tracer version

Currently, only the lttng-modules version is of use for the
analyses. However, multi-domain traces, combining UST and modules,
could lead to unpredictable results wherein the tracer_version was
erroneously identified as that of the userspace tracer, which was
problematic when its version differed from that of the kernel tracer.

Extracting the version directly from the kernel trace's metadata
corrects this issue.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add prio list to per-tid schedstats output

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: sched: track prio at process creation

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: sched: keep current prio for next analysis period

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: compute correct prio value on older tracer versions

Versions of lttng-modules prior to 2.7.1 did not subtract the
MAX_RT_PRIO (whose value is 100) from the prio fields in
sched_wak{eup, eup_new, ing} events.

Now that we keep the tracer version information in the automaton,
compute the offset if necessary, depending on the version.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Read tracer version and keep it in the automaton

Signed-off-by: Antoine Busque <abusque@efficios.com>

Use version_utils for _MI_VERSION

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add version_utils modules in a new common package

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix: sched: sort procnames regardless of capitalization

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add support for different period begin/end keys, constant keys

This allows using differently named fields as a period key for begin
and end events. For instance, comparing the `tid` field from a
`sched_waking` event to that of `next_tid` in `sched_switch`.

This also adds support for constant or fixed key value. That is to
say, with the same TID example, one can specify a particular TID
value, and only periods for which the key matches this value will be
accounted for.

In both new features, the order of fields and values must be
consistent across all arguments for multi-field keys.

Signed-off-by: Antoine Busque <abusque@efficios.com>

PEP 8: place standard library imports first

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add current prio to proc state, track prio changes

This adds a prio field to the Process class from linuxautomaton, which
contains the process' current priority value. On priority change, a
notification is sent, allowing analyses to track priority
changes. Currently, the sched analysis tracks these priority changes
via a per-process PrioEvent list, formed by (timestamp, prio) tuples.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Allowing filename in IO analysis from statedump events

Signed-off-by: Antoine Busque <abusque@efficios.com>

Refactor state providers __init__ and process_event

This minor refactor minimises code duplication by removing identical
implementations of process_event in classes derived from
StateProvider, and also by moving duplicated parts of the __init__
methods in these class to the parent.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Implement sched latency frequency distribution

This includes MI and text output implementations, for total, per-tid,
and per-prio sched latencies.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add lttng-schedfreq wrapper script

Signed-off-by: Antoine Busque <abusque@efficios.com>

fix: missing wakeup/waking events

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix: reset analysis when beginning a new period

Previously, the analysis was reset when a period ended. Although the
effect was strictly equivalent when using a single event to mark both
the beginning and end of the period, or a fixed length period, when
using distinct begin and end events the effect is quite different.

Resetting at the end of a period instead of the beginning had the
effect of accumulating analysis results during the periodless gap
before the next begin event and wrongly considering them as part of
the next period. Resetting at the beginning of the next period fixes
this issue.

Signed-off-by: Antoine Busque <abusque@efficios.com>

Exit gracefully on SIGINT in run()

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix pylint issues

Signed-off-by: Antoine Busque <abusque@efficios.com>

Fix pep8 style issues

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add target CPU to sched analysis

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add scheduling latencies frequencies MI results

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

IRQ freq distribution: consolidate as series table

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Output last process priority in cputop

Signed-off-by: Antoine Busque <abusque@efficios.com>

Implement uniform freq mode for IRQ analysis

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add duration property for IRQs

Signed-off-by: Antoine Busque <abusque@efficios.com>

Add filtering by CPU ID to analyses

Signed-off-by: Antoine Busque <abusque@efficios.com>

Remove shebangs on non-executable modules

Signed-off-by: Antoine Busque <abusque@efficios.com>

Use TIDs for proc filtering, and filter in core

Signed-off-by: Antoine Busque <abusque@efficios.com>

Implement sched switch latency analysis

The sched switch latency analysis allows to measure latencies between
sched_wakeup or sched_waking events and their corresponding
sched_switch event.

It features log, top, and stats output modes.

Signed-off-by: Antoine Busque <abusque@efficios.com>

TMP: add MI test script

Use Babeltrace's dummy output to check lost events

Suggested-by: Antoine Busque <abusque@efficios.com>
Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

Add doc/mi.md

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

command.py: colored error if possible

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>

cli: add copyright

Signed-off-by: Philippe Proulx <eeppeliteloop@gmail.com>