Круто. Верить отладчику надо, только не в этом случае.
Отладчик берёт число 192 и считает его signed. Потому 1й (или 8й) бит считается знаковым и интерпретирует число как -60. А на деле это 196 и всегда им останется
PS вы заметьте, что байт занимает 2 знака (FF/AA/0A). А отладчик вам показывает значение что то типа 0xFFFFFFC4. Но Char хранит только 1 байт. C4.