ここでクオリアまで表象として読んでしまうと、非表象(物自体)は(主体にとって)非在になってしまう
それでは言葉として、つまり「物自体」という言葉としてすら表現し得なくなる
ラカン(派)が現実界という言葉で想定している事態が似てるようには感じるけど

ただ、あらゆる表現されし存在は必ず表象化を経ていて、
その表象化の極限に位置するのがクオリアである以上、
「物自体」はクオリアとしても絶対的に(レトリックなどではなく)表象され得ないとする立場は、
「物自体」を「表象はされたが表象されないものを意味する」というに等しく、
ロジック構造の破綻に極めて近しく首肯し難い(と考えます)

他にもモナドとして理解するとか、いろんな読む手段自体はあるとは思うけどね