1a5448fdcSMinwoo Im /* SPDX-License-Identifier: GPL-2.0 */
2a5448fdcSMinwoo Im /*
3a5448fdcSMinwoo Im * NVM Express target device driver tracepoints
4a5448fdcSMinwoo Im * Copyright (c) 2018 Johannes Thumshirn, SUSE Linux GmbH
5a5448fdcSMinwoo Im *
6a5448fdcSMinwoo Im * This is entirely based on drivers/nvme/host/trace.h
7a5448fdcSMinwoo Im */
8a5448fdcSMinwoo Im
9a5448fdcSMinwoo Im #undef TRACE_SYSTEM
10a5448fdcSMinwoo Im #define TRACE_SYSTEM nvmet
11a5448fdcSMinwoo Im
12a5448fdcSMinwoo Im #if !defined(_TRACE_NVMET_H) || defined(TRACE_HEADER_MULTI_READ)
13a5448fdcSMinwoo Im #define _TRACE_NVMET_H
14a5448fdcSMinwoo Im
15a5448fdcSMinwoo Im #include <linux/nvme.h>
16a5448fdcSMinwoo Im #include <linux/tracepoint.h>
17a5448fdcSMinwoo Im #include <linux/trace_seq.h>
18a5448fdcSMinwoo Im
19a5448fdcSMinwoo Im #include "nvmet.h"
20a5448fdcSMinwoo Im
21a5448fdcSMinwoo Im const char *nvmet_trace_parse_admin_cmd(struct trace_seq *p, u8 opcode,
22a5448fdcSMinwoo Im u8 *cdw10);
23a5448fdcSMinwoo Im const char *nvmet_trace_parse_nvm_cmd(struct trace_seq *p, u8 opcode,
24a5448fdcSMinwoo Im u8 *cdw10);
25a5448fdcSMinwoo Im const char *nvmet_trace_parse_fabrics_cmd(struct trace_seq *p, u8 fctype,
26a5448fdcSMinwoo Im u8 *spc);
27a5448fdcSMinwoo Im
28a5448fdcSMinwoo Im #define parse_nvme_cmd(qid, opcode, fctype, cdw10) \
29a5448fdcSMinwoo Im ((opcode) == nvme_fabrics_command ? \
30a5448fdcSMinwoo Im nvmet_trace_parse_fabrics_cmd(p, fctype, cdw10) : \
31a5448fdcSMinwoo Im (qid ? \
32a5448fdcSMinwoo Im nvmet_trace_parse_nvm_cmd(p, opcode, cdw10) : \
33a5448fdcSMinwoo Im nvmet_trace_parse_admin_cmd(p, opcode, cdw10)))
34a5448fdcSMinwoo Im
350e716cecSDaniel Wagner const char *nvmet_trace_ctrl_id(struct trace_seq *p, u16 ctrl_id);
360e716cecSDaniel Wagner #define __print_ctrl_id(ctrl_id) \
370e716cecSDaniel Wagner nvmet_trace_ctrl_id(p, ctrl_id)
38a5448fdcSMinwoo Im
39a5448fdcSMinwoo Im const char *nvmet_trace_disk_name(struct trace_seq *p, char *name);
40a5448fdcSMinwoo Im #define __print_disk_name(name) \
41a5448fdcSMinwoo Im nvmet_trace_disk_name(p, name)
42a5448fdcSMinwoo Im
43a5448fdcSMinwoo Im #ifndef TRACE_HEADER_MULTI_READ
nvmet_req_to_ctrl_id(struct nvmet_req * req)440e716cecSDaniel Wagner static inline u16 nvmet_req_to_ctrl_id(struct nvmet_req *req)
45a5448fdcSMinwoo Im {
460e716cecSDaniel Wagner /*
470e716cecSDaniel Wagner * The queue and controller pointers are not valid until an association
480e716cecSDaniel Wagner * has been established.
490e716cecSDaniel Wagner */
500e716cecSDaniel Wagner if (!req->sq || !req->sq->ctrl)
510e716cecSDaniel Wagner return 0;
520e716cecSDaniel Wagner return req->sq->ctrl->cntlid;
53a5448fdcSMinwoo Im }
54a5448fdcSMinwoo Im
__assign_req_name(char * name,struct nvmet_req * req)553c3751f2SChaitanya Kulkarni static inline void __assign_req_name(char *name, struct nvmet_req *req)
56a5448fdcSMinwoo Im {
57d86481e9SChaitanya Kulkarni if (!req->ns) {
58a5448fdcSMinwoo Im memset(name, 0, DISK_NAME_LEN);
59d86481e9SChaitanya Kulkarni return;
60d86481e9SChaitanya Kulkarni }
61d86481e9SChaitanya Kulkarni
624ee7ffebSArnd Bergmann strscpy_pad(name, req->ns->device_path, DISK_NAME_LEN);
63a5448fdcSMinwoo Im }
64a5448fdcSMinwoo Im #endif
65a5448fdcSMinwoo Im
66a5448fdcSMinwoo Im TRACE_EVENT(nvmet_req_init,
67a5448fdcSMinwoo Im TP_PROTO(struct nvmet_req *req, struct nvme_command *cmd),
68a5448fdcSMinwoo Im TP_ARGS(req, cmd),
69a5448fdcSMinwoo Im TP_STRUCT__entry(
70a5448fdcSMinwoo Im __field(struct nvme_command *, cmd)
710e716cecSDaniel Wagner __field(u16, ctrl_id)
72a5448fdcSMinwoo Im __array(char, disk, DISK_NAME_LEN)
73a5448fdcSMinwoo Im __field(int, qid)
74a5448fdcSMinwoo Im __field(u16, cid)
75a5448fdcSMinwoo Im __field(u8, opcode)
76a5448fdcSMinwoo Im __field(u8, fctype)
77a5448fdcSMinwoo Im __field(u8, flags)
78a5448fdcSMinwoo Im __field(u32, nsid)
79a5448fdcSMinwoo Im __field(u64, metadata)
80a5448fdcSMinwoo Im __array(u8, cdw10, 24)
81a5448fdcSMinwoo Im ),
82a5448fdcSMinwoo Im TP_fast_assign(
83a5448fdcSMinwoo Im __entry->cmd = cmd;
840e716cecSDaniel Wagner __entry->ctrl_id = nvmet_req_to_ctrl_id(req);
853c3751f2SChaitanya Kulkarni __assign_req_name(__entry->disk, req);
86a5448fdcSMinwoo Im __entry->qid = req->sq->qid;
87a5448fdcSMinwoo Im __entry->cid = cmd->common.command_id;
88a5448fdcSMinwoo Im __entry->opcode = cmd->common.opcode;
89a5448fdcSMinwoo Im __entry->fctype = cmd->fabrics.fctype;
90a5448fdcSMinwoo Im __entry->flags = cmd->common.flags;
91a5448fdcSMinwoo Im __entry->nsid = le32_to_cpu(cmd->common.nsid);
92a5448fdcSMinwoo Im __entry->metadata = le64_to_cpu(cmd->common.metadata);
93*a7de1deaSArnd Bergmann memcpy(__entry->cdw10, &cmd->common.cdws,
94a5448fdcSMinwoo Im sizeof(__entry->cdw10));
95a5448fdcSMinwoo Im ),
96a5448fdcSMinwoo Im TP_printk("nvmet%s: %sqid=%d, cmdid=%u, nsid=%u, flags=%#x, "
97a5448fdcSMinwoo Im "meta=%#llx, cmd=(%s, %s)",
980e716cecSDaniel Wagner __print_ctrl_id(__entry->ctrl_id),
99a5448fdcSMinwoo Im __print_disk_name(__entry->disk),
100a5448fdcSMinwoo Im __entry->qid, __entry->cid, __entry->nsid,
101a5448fdcSMinwoo Im __entry->flags, __entry->metadata,
102a5448fdcSMinwoo Im show_opcode_name(__entry->qid, __entry->opcode,
103a5448fdcSMinwoo Im __entry->fctype),
104a5448fdcSMinwoo Im parse_nvme_cmd(__entry->qid, __entry->opcode,
105a5448fdcSMinwoo Im __entry->fctype, __entry->cdw10))
106a5448fdcSMinwoo Im );
107a5448fdcSMinwoo Im
108a5448fdcSMinwoo Im TRACE_EVENT(nvmet_req_complete,
109a5448fdcSMinwoo Im TP_PROTO(struct nvmet_req *req),
110a5448fdcSMinwoo Im TP_ARGS(req),
111a5448fdcSMinwoo Im TP_STRUCT__entry(
1120e716cecSDaniel Wagner __field(u16, ctrl_id)
113a5448fdcSMinwoo Im __array(char, disk, DISK_NAME_LEN)
114a5448fdcSMinwoo Im __field(int, qid)
115a5448fdcSMinwoo Im __field(int, cid)
116a5448fdcSMinwoo Im __field(u64, result)
117a5448fdcSMinwoo Im __field(u16, status)
118a5448fdcSMinwoo Im ),
119a5448fdcSMinwoo Im TP_fast_assign(
1200e716cecSDaniel Wagner __entry->ctrl_id = nvmet_req_to_ctrl_id(req);
121a5448fdcSMinwoo Im __entry->qid = req->cq->qid;
122a5448fdcSMinwoo Im __entry->cid = req->cqe->command_id;
123a5448fdcSMinwoo Im __entry->result = le64_to_cpu(req->cqe->result.u64);
124a5448fdcSMinwoo Im __entry->status = le16_to_cpu(req->cqe->status) >> 1;
1253c3751f2SChaitanya Kulkarni __assign_req_name(__entry->disk, req);
126a5448fdcSMinwoo Im ),
127a5448fdcSMinwoo Im TP_printk("nvmet%s: %sqid=%d, cmdid=%u, res=%#llx, status=%#x",
1280e716cecSDaniel Wagner __print_ctrl_id(__entry->ctrl_id),
129a5448fdcSMinwoo Im __print_disk_name(__entry->disk),
130a5448fdcSMinwoo Im __entry->qid, __entry->cid, __entry->result, __entry->status)
131a5448fdcSMinwoo Im
132a5448fdcSMinwoo Im );
133a5448fdcSMinwoo Im
134696ece75SChaitanya Kulkarni #define aer_name(aer) { aer, #aer }
135696ece75SChaitanya Kulkarni
136696ece75SChaitanya Kulkarni TRACE_EVENT(nvmet_async_event,
137696ece75SChaitanya Kulkarni TP_PROTO(struct nvmet_ctrl *ctrl, __le32 result),
138696ece75SChaitanya Kulkarni TP_ARGS(ctrl, result),
139696ece75SChaitanya Kulkarni TP_STRUCT__entry(
140696ece75SChaitanya Kulkarni __field(int, ctrl_id)
141696ece75SChaitanya Kulkarni __field(u32, result)
142696ece75SChaitanya Kulkarni ),
143696ece75SChaitanya Kulkarni TP_fast_assign(
144696ece75SChaitanya Kulkarni __entry->ctrl_id = ctrl->cntlid;
145696ece75SChaitanya Kulkarni __entry->result = (le32_to_cpu(result) & 0xff00) >> 8;
146696ece75SChaitanya Kulkarni ),
147696ece75SChaitanya Kulkarni TP_printk("nvmet%d: NVME_AEN=%#08x [%s]",
148696ece75SChaitanya Kulkarni __entry->ctrl_id, __entry->result,
149696ece75SChaitanya Kulkarni __print_symbolic(__entry->result,
150696ece75SChaitanya Kulkarni aer_name(NVME_AER_NOTICE_NS_CHANGED),
151696ece75SChaitanya Kulkarni aer_name(NVME_AER_NOTICE_ANA),
152696ece75SChaitanya Kulkarni aer_name(NVME_AER_NOTICE_FW_ACT_STARTING),
153696ece75SChaitanya Kulkarni aer_name(NVME_AER_NOTICE_DISC_CHANGED),
154696ece75SChaitanya Kulkarni aer_name(NVME_AER_ERROR),
155696ece75SChaitanya Kulkarni aer_name(NVME_AER_SMART),
156696ece75SChaitanya Kulkarni aer_name(NVME_AER_CSS),
157696ece75SChaitanya Kulkarni aer_name(NVME_AER_VS))
158696ece75SChaitanya Kulkarni )
159696ece75SChaitanya Kulkarni );
160696ece75SChaitanya Kulkarni #undef aer_name
161696ece75SChaitanya Kulkarni
162a5448fdcSMinwoo Im #endif /* _TRACE_NVMET_H */
163a5448fdcSMinwoo Im
164a5448fdcSMinwoo Im #undef TRACE_INCLUDE_PATH
165a5448fdcSMinwoo Im #define TRACE_INCLUDE_PATH .
166a5448fdcSMinwoo Im #undef TRACE_INCLUDE_FILE
167a5448fdcSMinwoo Im #define TRACE_INCLUDE_FILE trace
168a5448fdcSMinwoo Im
169a5448fdcSMinwoo Im /* This part must be outside protection */
170a5448fdcSMinwoo Im #include <trace/define_trace.h>
171