赵绰不管隋文帝怎样威吓，还是坚持自己的意见。隋文帝怎样骂他赶他，他也不走。隋文帝没法，很不高兴地进内宫去了。
后来，由于别的官员也上奏章谏阻，隋文帝终于取消了杀人的命令。
又有一次，官员辛穊（音ｄǎｎ）被人告发搞不法的迷信活动。隋文帝又命令大理把辛穊处死。
赵绰上朝对隋文帝说：“辛穊没有死罪，我不能接受这个命令。”
隋文帝气得浑身发抖，说：“你想救辛穊，就没有你自己的命。”说着，喝令左右侍从把赵绰拉下殿去。
赵绰面不改色，说：“陛下可以杀我，但是不该杀辛穊。”
左右侍从真的把赵绰扭下朝堂，剥了他的官服，摘掉他的官帽，准备处斩。这时候，隋文帝也想到杀赵绰太没道理，就派人跟赵绰说：“你还有什么话说？”
赵绰跪在地上，挺直了腰说：“臣一心执法，不怕一死。”
隋文帝并不真想杀赵绰，磨蹭了一阵子，气也平了。他想赵绰能忠于执法，毕竟是有利于他的统治的，就把赵绰放了，过了一天，还派人慰问了赵绰。
在大理官署里，有一个官员名叫来旷，听说隋文帝对赵绰不满意，想迎合隋文帝，就背着赵绰给隋文帝上了一道奏章，认为大理衙门执法太宽。隋文帝看了奏章，认为来旷说得很中肯，就把他提升了官职。
来旷自以为受到皇帝的赏识，就昧着良心，诬告赵绰徇私舞弊，把不该赦免的犯人放了。
隋文帝虽然嫌赵绰办事不顺他的心，但是对来旷的上告，却有点怀疑。他派亲信官员去调查，根本没有这回事。隋文帝弄清真相，勃然大怒，立刻下命令把来旷处死。
