remove the # from the command lines for easier copy/paste

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

update doc

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

track sync latencies + pages flushed

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

cleanup

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix doc

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix: v4addr is now a sequence of 4 integers and not an int

Signed-off-by: Jérémie Galarneau <jeremie.galarneau@efficios.com>

Track page cache ownership

During the latencies, display the known state of the page cache.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

missing mm file

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

latency display allocated pages/buffers during the latency period

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix: prepare for the new syscall names

lttng-modules is not even in RC yet, so don't rush the cleanup too much,
just a quick fixup to make sure it is compatible.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge branch 'master' of github.com:jdesfossez/lttng-analyses

Use FD events nomenclature instead of latencies

Track number of bytes read or written by fd syscalls

Fix: remove typo in function call (_write) and merge duplicate code

Add tracking of multiple FDs for single syscall, as in sys_splice

Refactor fd event logging into smaller logical units

Merge pull request #2 from jgalar/master

Make dependency on the progressbar module optional

Make dependency on the progressbar module optional

Signed-off-by: Jérémie Galarneau <jeremie.galarneau@efficios.com>

Merge branch 'jgalar-master'

Merge and delete conflicting imports of socket

Merge branch 'master' of github.com:jdesfossez/lttng-analyses

Remove IntEnums for compatibility with Python 3.3

Remove references to socket.AddressFamily

Removed references to socket.AddressFamily and IntEnum which were
introduced as of Python 3.4.

Signed-off-by: Jérémie Galarneau <jeremie.galarneau@efficios.com>

readme: usage of kswapd/writeback analysis

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Pages freed and writeback accounting

During the syscall latency tracking, take into account the number of
pages written on disk by the writeback mechanism.
Also, if a process wakes up kswapd, account the number of pages freed
(most likely evicted from cache).

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix typo

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Improve netword FD type detection

Fix mapping between family and fdtype.
Add heuristic to set the FDtype to net if a process does a net_dev_xmit
during a write syscall. For now, we use the maybe_net type because we do
not guarantee this information to be exact.

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Add process/thread hierarchy to metadata

Fix: correct path name pasted over from fd-info

Fix: rename inner fd variable shadowing outer one

Don't create capped collections

Handle merging metadata from multiple analyses of same trace

Clean-up perf-info and fd-info for consistency

Eliminated all confusion between PID/TID by referring only to the TID,
standardized function names and argument names in prevision of unified
analysis API.

perf-info cleanup

Fix: create CPU during sched switch if it doesn't exist

A previous commit made the sched_switch event handling return early if
the CPU hadn't yet been entered into the self.cpus dictionary, which
meant that the newly scheduled TID would not be added to the self.tids
dictionary, thereby raising a KeyError on the subsequent event that
expected this TID to exist (e.g. the following exit_syscall).

Instead, the CPU is simply created as needed, and execution follows as
expected.

Add fd state tracking to json/mongo formats

Fix: don't long null FDs to database

Add errno tracking to database

Merge branch 'master' of github.com:jdesfossez/lttng-analyses

compute the scheduling latency

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix: set proper session name from path with trailing slash

fix: initial perf counter value

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix: initial perf counter value

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

make sure we only look for perf_ in the stream event context to avoid clashes with event fields

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Perf-info: track perf PMU counter changes per-tid and output in text,json,mongodb

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

sched_switch can return a dict of what changed during the scheduling period (useful for perf counters)

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

support perf counters on sched_switch

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix order of the display in iotop

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

extract ip+port from connect

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Merge remote-tracking branch 'upstream/master'

MongoDB ip and port are now specified through the cli, not hardcoded

quick fix on the readme

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

quick fix on the readme

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

quick fix on the readme

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

add README

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

handle the case where family is not available

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Index latencies by timestamp in mongodb

Use int values for PID in MongoDB metadata

Track sessions in mongodb collection

Fix path index for session name

Handle collection creation and insertion for fd latencies

Change latencies format from array to object notation

Use time conversion constants

Use constants for mongodb connection

Initial storing of metadata to mongo

Move fd-info json logging to separate function

Add time conversion constants to fd-info for legibility

Add quiet argument to fd-info to silence terminal output

Update gitignore for emacs file locks

Add clearer output format to nettop

Update nettop to support ipv4/6 filtering

Add address family to network syscalls/FDs

Fix process name in metadata

Start enums at 0 for direct use with arrays in the frontend

Add fdtype to metadata for visualization

Create FDType enum

Create IOCategory enum

Add distinction between network and disk FDs

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix name of block events for graphite report

handle bio_remap events, so we now have the real per-partition usage

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Add better path handling fd-info json output option

Merge remote-tracking branch 'upstream/master'

reset also the block read/write when needed

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

real block usage in iotop

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Fix: division by zero sometimes in the ascii_graph lib

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

fix: prevent crash if error code does not exit (-512 in my test case)

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

cleanup block events, we only need block_rq_issue and block_rq_complete

Signed-off-by: Julien Desfossez <jdesfossez@efficios.com>

Add FD and filename metadata for JSON output

Output process metadata for json visualizations

Add IO syscall category to json output for fd-info

Add support for floating point durations, units

The user can now specify one of ns, us, ms or s as a unit when
specifying a minimum syscall duration for the fd-info script.
Floating-point values are also allowed, except for the ns unit
which is the finest granularity allowed.

Add flag to toggle json output for fd-info

Remove visualizations dir, moved to another repo

Add basic IO latency visualization

Completed basic ctf-filter functionality

It is still lacking support for certain types of fields,
but the basic event filtering works

Add progress bar to filter

ctf-filter: add basic support for writing events to new trace

Don't expect this to work correctly, it's a partial implementation

Add support for more integer and string fields to ctf-filter

Add basic structure for ctf filtering

Currently only supports integer fields and
writing them to the metadate

Allow filtering by time range