Другой технический вопрос

[yakov_a_jerkov]

Есть в этом какая-то проблема, если на Windows в одном folder миллион (один миллион, буквально) файлов?

У меня сейчас в одном фолдере триста тысяч -- небольшие jpg-файлы, общий размер всего 4 GB -- вроде, никаких проблем нет. Но я не знаю, какой-то предел должен быть, наверное.

Поясню, зачем мне это нужно. Я с ноября пытаюсь научиться разному в области machine learning, и, в частности, neural networks. Сейчас пытаюсь сделать что-то с этой задачей на Kaggle.com, и там training set как раз имеет 1.1 миллиона картинок.

Comments

[gegmopo4.livejournal.com]

Проблемы могут проявиться на миллионах файлов. https://bugs.python.org/issue32453 Но может быть это только на Linux, и Windows умнее. Кстати, диск SSD или HDD? На SDD вроде проблема мягче.