Как уменьшить объем памяти в приложениях .NET с интенсивным использованием строк?

К сожалению, вы не можете изменить внутреннее представление строки .Net. Я предполагаю, что CLR оптимизирована для многобайтовых строк.

Вы имеете дело со знаменитой парадигмой компромисса пространства и времени., в котором говорится, что для получения памяти вам придется использовать больше процессора, или вы можете сэкономить процессор, используя немного памяти.

Тем не менее, взгляните на некоторые соображения здесь. Если бы я был вами, как только вы установили, что прироста памяти вам будет достаточно, попробуйте написать свой собственный «строковый» класс, который использует кодировку ASCII. Этого, наверное, будет достаточно.

ОБНОВИТЬ:

Подробнее о деньгах вы должны проверить этот пост, "Of memory and strings", написанный легендой StackOverflow Джоном Скитом, который решает проблему, с которой вы столкнулись. Извините, что не упомянул об этом сразу, мне потребовалось некоторое время, чтобы найти точный пост от Джона.

Есть ли способ сохранить строку в памяти в кодировке UTF-8, разрешив при этом стандартные строковые > функции? (Мои потребности включают в основном IndexOf с StringComparison.OrdinalIgnoreCase).

Вы можете сохранить как массив байтов и предоставить свою собственную реализацию IndexOf (поскольку преобразование обратно в строку для IndexOf, вероятно, будет огромным ударом по производительности). Используйте для этого функции System.Text.Encoding (лучше всего было бы выполнить шаг сборки для преобразования в байты, а затем прочитать массивы байтов с диска - только преобразовать обратно в строку для отображения, если это необходимо).

Вы можете хранить их в библиотеке C/C++, позволяя использовать однобайтовые строки. Вы, вероятно, не захотите упорядочивать их обратно, но, возможно, вы можете просто упорядочить результаты (я предполагаю, что здесь происходит какой-то поиск) без особого удара по производительности. C++/CLI может упростить эту задачу (благодаря возможности писать поисковый код на C++/CLI, а строку «база данных» — на C++).

Или вы можете вернуться к своим первоначальным проблемам с производительностью, которые требуют, чтобы все строки находились в памяти. Встроенная база данных, индексация и т. д. могут ускорить процесс и сократить использование памяти, а также упростить обслуживание.

Что, если вы сохраните его как байтовый массив? Просто восстановите строку, когда вам нужно выполнить с ней какие-то операции. Я бы создал класс для установки и получения строк, которые внутренне сохраняют его как bytearrays.

в байтовый массив:

string s = "whatever";
byte[] b = System.Text.Encoding.UTF8.GetBytes(s);

нанизывать:

string s = System.Text.Encoding.UTF8.GetString(b);

попробуйте использовать базу данных в памяти в качестве «хранилища» и SQL для взаимодействия с данными... Например, SQLite можно развернуть как часть вашего приложения (состоит всего из 1-2 DLL, которые можно поместить в одну и ту же папку). как ваше приложение)...

Что, если вы создадите свой собственный строковый класс UTF-8 (UTF8String?) и предоставите неявное приведение к String? Вы пожертвуете скоростью ради памяти, но это может быть то, что вы ищете.