Чтение с файла

[Alex Custov]

текстовый в какой кодировке? Ты можешь этот файл приложить?

[demaker]

текстовый в какой кодировке? Ты можешь этот файл приложить?

Да, конечно

[Авварон]

Это 16й UTF, там половина байт нули.

[demaker]

Это 16й UTF, там половина байт нули.

Спасибо

[demaker]

Только я вот сделал так и опять не пашет

Код

C++ (Qt)
bool MainWindow::parserFile(QString path)
{
    qDebug()<<"path = "<<path;
    QFile pFile(path);
    QByteArray baLine;
    if(pFile.exists()){
        if(!pFile.open(QIODevice::ReadOnly)){
            qCritical()<<"file not open";
            return false;
        }
        else{
            while(!pFile.atEnd()){
                baLine = pFile.readLine();
                qDebug()<<"line size = "<<baLine.size();
                QTextCodec *codec = QTextCodec::codecForName("UTF-16");
                QString str = codec->toUnicode(baLine.data());
                str.append(baLine);
                qDebug()<<"str = "<<str;
                str.clear();
                baLine.clear();
            }
            pFile.close();
            return true;
        }
    qCritical()<<"file not exists load file";    
    return false;
}
 

Строки в консоле пустые

[Авварон]

Код:

-                QString str = codec->toUnicode(baLine.data());
+                QString str = codec->toUnicode(baLine);

Угадайте почему.
Upd:

Код:

-    if(!pFile.open(QIODevice::ReadOnly)){
+    if(!pFile.open(QIODevice::ReadOnly | QIODevice::Text)){

(это выкосит \r)

И это ещё не всё

[demaker]

Код:

-                QString str = codec->toUnicode(baLine.data());
+                QString str = codec->toUnicode(baLine);

Угадайте почему.
Upd:

Код:

-    if(!pFile.open(QIODevice::ReadOnly)){
+    if(!pFile.open(QIODevice::ReadOnly | QIODevice::Text)){

(это выкосит \r)

И это ещё не всё

  и что же еще

[Авварон]

Код:

#include <QCoreApplication>
#include <QFile>
#include <QDebug>
#include <QTextCodec>

int main(int argc, char *argv[])
{
    QCoreApplication a(argc, argv);

    QString path = "/home/abbapoh/Загрузки/Base_triton.txt";

    qDebug()<<"path = "<<path;
    QFile pFile(path);
    if(pFile.exists()){
        if(!pFile.open(QIODevice::ReadOnly | QIODevice::Text)){
//        if(!pFile.open(QIODevice::ReadOnly)){
            qCritical()<<"file not open";
            return false;
        }
        else{
            QByteArray baLine = pFile.readAll();
            // если не хочется юзать кодек
            //                QString str((QChar*)baLine.data(), baLine.size() / 2);
            QTextCodec *codec = QTextCodec::codecForName("UTF-16");
            QString str = codec->toUnicode(baLine);
            qDebug() << str;
            pFile.close();
            return true;
        }
    qCritical()<<"file not exists load file";
    return false;
    }

    return a.exec();
}

Почему глючит readLine я понять не смог.
Была попытка читать блоками по 256 байт, но текст содержит китайщину, а значит там есть суррогатные пары, которые интерпретируются неверно, если конец блока попадает в середину пары.

[__Heaven__]

Предполагаю, что вы пытаетесь декодировать 1 байт из utf-16 в utf-8, но utf-16 должен содержать 2 байта на символ.