Правильное использование многопоточности

[__Heaven__]

А вот интересен вопрос реализации и прироста скорости.
У меня имеется подобная задачка, отложенная на потом.
Как эффективнее использовать потоки?
Я полагаю, что должен быть 1 поток, который будет читать данные в QStringList, тем самым формируя очередь для парсинга. В это время другие потоки начинают парсить полученные данные в QList результатов. Причём потоков для парсинга должно соответствовать QThread::idealThreadCount().

Как считаете? Жизнеспособно? Прирост скорости получится значительный?

[Bepec]

Тут надо смотреть именно на объем работ. Если простой парсинг, прирост будет незначительный. Если парсинг с созданием структур, выделением памяти и преобразованиями - прирост возможно будет, а мб будет замедление из-за малой нагрузки на поток.
PS как говаривал сенсей, нужно разбирать каждый конкретный случай. Одно условие может поменять всё

[Igors]

1) Выясните сколько % времени уходит чисто на чтение, просто отключите теперешний парсинг. Учтите что эффект будет/возможен только для разницы между "полным" временем и "только чтение"

2) Выясните насколько в данном случае притормаживает удобный но жирный QString. Для чтения попробуйте читать файл как двоичный (raw data), для парсинга - смотрите сами

Потом о чем-то уже можно будет говорить

[egorsmkv]

Исправил

Освойте https://github.com/ / https://bitbucket.org/ -- проще же будет проекты хранить, иметь к ним доступ, тут и знания о контролях версий появятся, а они в it-компаниях всегда используются, да и не нужно будет перезаливать
Не раз было, что в некоторых статья на хабре можно было встретить, выложенный автором проект на файлообменник, ссылка которого, конечно, давно дохлая

Я его использую, но не хочу пока туда такой сырой код выкладывать

[__Heaven__]

egorsmkv, заведите отдельную ветку для сырого кода. А потом сольёте со стабильной.

[egorsmkv]

Сделал - https://github.com/egorsmkv/qt-multithreading

[gil9red]

Сделал - https://github.com/egorsmkv/qt-multithreading

Интересно будет посмотреть

[egorsmkv]

Сделал - https://github.com/egorsmkv/qt-multithreading

Интересно будет посмотреть

Там всё довольно тривиально реализовано. Покритикуйте хотя-бы то, что есть.

[Igors]

Там всё довольно тривиально реализовано. Покритикуйте хотя-бы то, что есть.

Здесь нужно захватить мутекс

Код

C++ (Qt)
void Worker::resumeThreads() {
 //  QMutexLocker lock(&sync);
  pause = 0;
  cond.wakeAll();
}
 

Вообще QWaitCondition здесь не очень лепится, обычно он связывается с выемкой задач из очереди, но тут это уже делает Qt

[egorsmkv]

Там всё довольно тривиально реализовано. Покритикуйте хотя-бы то, что есть.

Здесь нужно захватить мутекс

Код

C++ (Qt)
void Worker::resumeThreads() {
 //  QMutexLocker lock(&sync);
  pause = 0;
  cond.wakeAll();
}
 

Вообще QWaitCondition здесь не очень лепится, обычно он связывается с выемкой задач из очереди, но тут это уже делает Qt

Мьютекс для pause?

[Old]

Мьютекс для pause?

В первую очередь для условной переменной.

[egorsmkv]

Мьютекс для pause?

В первую очередь для условной переменной.

Это не простая переменная, а QAtomicInt

[Old]

Это не простая переменная, а QAtomicInt

Условная переменная это cond.

[egorsmkv]

Понял.

Вместо QWaitCondition что лучше использовать?

[Old]

Вместо QWaitCondition что лучше использовать?

Это зависит от того, что хотим получить.
Если вам нужна эта пауза, то условная переменная для этого подходит.