Limpando Strings

Limpar strings é uma tarefa comum em nossas aplicações. Entretanto, .NET torna fácil cometer erros de implementação que levam a alocações em demasia e, consequentemente, a muitas ocorrências de garbage collection.

Este post mostra como aliviar essa pressão.

Comecei utilizando o mesmo mecanismo de comparação que utilizei no post anterior.

Ponto de partida

Mais uma vez, vamos começar com um código que está em produção.

public static string RemoverCaracteres(this string valor, params string[] caract)
{
    if (String.IsNullOrWhiteSpace(valor))
    {
        return String.Empty;
    }

    foreach (var s in caract)
    {
        valor = valor.Replace(s, "");
    }

    return valor;
}

Cada chamada ao método Replace aloca uma nova string na memória. Logo, aumenta a pressão pela intervenção do GC.

Vejamos o resultado (1_000_000 de execuções sobre um RG, removendo os caracteres ‘/’, ‘.’, ‘-‘):

Obviamente, há um milhão de strings novas sendo geradas, pelo menos. Logo, é natural que o GC entre em atuação.

A saída nem sempre é StringBuilder

Minha primeira ideia foi substituir ingenuamente a string por um stringbuilder antes de fazer os replaces.

public static string RemoverCaracteres(this string valor, params string[] caract)
{
    if (String.IsNullOrWhiteSpace(valor))
    {
        return String.Empty;
    }

    var sb = new StringBuilder(valor);
    foreach (var s in caract)
    {
        sb.Replace(s, "");
    }

    return sb.ToString();
}

Infelizmente, o resultado não foi o mais animador.

Vamos usar chars?

Um problema, na implementação original é que ela propõe (pelo nome) a remover caracteres. Entretanto, por alguma razão que desconheço, ela aceita uma lista de strings. Vamos adotar uma abordagem mais simples removendo apenas caracteres, reconstruindo strings quando possível.

public static string RemoverCaracteres(this string valor, params char[] caract)
{
    if (String.IsNullOrWhiteSpace(valor))
    {
        return String.Empty;
    }
            
    var sb = new StringBuilder(valor.Length);
    for (var i = 0; i < valor.Length; i++)
    {
        bool adicionar = true;
        for (var j = 0; j < caract.Length; j++)
        {
            if (caract[j] == valor[i])
            {
                adicionar = false;
                break;
            }
        }
        if (adicionar)
        { 
            sb.Append(valor[i]);
        }
    }

    return sb.ToString();
}

Resultado:

Bem melhor.

Reaproveitando instâncias de StringBuilder

Há algum tempo, compartilhei uma técnica usada pelo time do Roslyn para salvar memória (e execuções do GC) salvando algumas instâncias de string builder. Vamos adotar a mesma técnica aqui.

public static string RemoverCaracteres(this string valor, params char[] caract)
{
    if (String.IsNullOrWhiteSpace(valor))
    {
        return String.Empty;
    }

    var sb = PooledStringBuilder.GetInstance();

    for (var i = 0; i < valor.Length; i++)
    {
        bool adicionar = true;
        for (var j = 0; j < caract.Length; j++)
        {
            if (caract[j] == valor[i])
            {
                adicionar = false;
                break;
            }
        }
        if (adicionar)
        {
            sb.Builder.Append(valor[i]);
        }
    }

    return sb.ToStringAndFree();
}

Resultado:

Melhoramos, mas, nem tanto. O fato do GC ser executado não implica, necessariamente, em penalidade de performance. O GC é muito eficiente para desalocar objetos com vida muito curta. Mesmo assim, a melhoria se justifica quando pensamos na aplicação como um todo.

Vamos usar foreach

Sempre que tenho que percorrer vetor, faço testes com for e com foreach. Em muitos casos, foreach é mais rápido. Vejamos:

public static string RemoverCaracteres(this string valor, params char[] caract)
{
    if (String.IsNullOrWhiteSpace(valor))
    {
        return String.Empty;
    }

    var sb = PooledStringBuilder.GetInstance();

    foreach (var c in valor)
    {
        bool adicionar = true;
        for (var j = 0; j < caract.Length; j++)
        {
            if (caract[j] == c)
            {
                adicionar = false;
                break;
            }
        }
        if (adicionar)
        {
            sb.Builder.Append(c);
        }
    }

    return sb.ToStringAndFree();
}

Resultado:

Unsafe!

Eis uma estratégia que não recomendo. Geralmente, adotar unsafe deve ser uma alternativa apenas em cenários onde performance é um aspecto realmente crítico. De qualquer forma...

public static unsafe string RemoverCaracteres(this string valor, params char[] caract)
{
    if (String.IsNullOrWhiteSpace(valor))
    {
        return String.Empty;
    }

    char* resultado = stackalloc char[valor.Length];
    char* current = resultado;

    foreach (var c in valor)
    {
        bool adicionar = true;
        foreach (var o in caract)
        {
            if (o == c)
            {
                adicionar = false;
                break;
            }
        }

        if (adicionar)
        {
            *current++ = c ;
        }
    }

    return new string(resultado, 0, (int)(current - resultado)); ;
}

Resultado:

Fazendo comparações mais precisas

Quando diferentes execuções retornam valores muito diferentes (é o caso do código que estamos tratando nesse post), recorro a mecanismos de medida mais confiáveis.

Para testar performance de algoritmos, recomendo fortemente a adoção do BenchmarkDotNet.

public class Program
{
    static void Main(string[] args)
    {
        var summary = BenchmarkRunner.Run<Program>();
    }

    [Benchmark]
    public void NoOptimizations() =>
        Original.RemoverCaracteres("00.816.794/0001-66", ".", "/", "-");

    [Benchmark]
    public void UsingStringBuilder() =>
        Version1.RemoverCaracteres("00.816.794/0001-66", ".", "/", "-");

    [Benchmark]
    public void UsingStringBuilderWithChars() =>
        Version2.RemoverCaracteres("00.816.794/0001-66", '.', '/', '-');

    [Benchmark]
    public void UsingPooledStringBuilderWithChars() =>
        Version3.RemoverCaracteres("00.816.794/0001-66", '.', '/', '-');

    [Benchmark]
    public void UsingPooledStringBuilderWithCharsAndForEach() =>
        Version4.RemoverCaracteres("00.816.794/0001-66", '.', '/', '-');

    [Benchmark]
    public void Unsafe() =>
        Version5.RemoverCaracteres("00.816.794/0001-66", '.', '/', '-');
}

Eis os resultados:

Frequency=2835935 Hz, Resolution=352.6174 ns, Timer=TSC
.NET Core SDK=2.1.104
  [Host]     : .NET Core 2.0.6 (CoreCLR 4.6.26212.01, CoreFX 4.6.26212.01), 64bit RyuJIT
  DefaultJob : .NET Core 2.0.6 (CoreCLR 4.6.26212.01, CoreFX 4.6.26212.01), 64bit RyuJIT


                                      Method |      Mean |     Error |     StdDev |
-------------------------------------------- |----------:|----------:|-----------:|
                             NoOptimizations | 289.76 ns | 5.8188 ns | 13.1341 ns |
                          UsingStringBuilder | 477.36 ns | 9.2958 ns | 11.7562 ns |
                 UsingStringBuilderWithChars | 115.18 ns | 0.8101 ns |  0.7182 ns |
           UsingPooledStringBuilderWithChars | 101.00 ns | 1.6023 ns |  1.4988 ns |
 UsingPooledStringBuilderWithCharsAndForEach |  97.72 ns | 1.9388 ns |  2.3080 ns |
                                      Unsafe |  63.11 ns | 1.4262 ns |  2.1347 ns |

Resumindo

Mais uma vez, o GC exerceu influência na performance. Entretanto, como vimos, ele não é definitivo. Unsafe é sempre uma opção para cenários extremos, mas o código fica menos legível e o ganho pode não se justificar.

De qualquer forma, no fim do dia, ganhamos 80 coletas do GC e melhoramos a performance em mais de 400%.

Lição mais importante: MEDIR, MEDIR, MEDIR

Compartilhe este insight:

3 respostas

  1. Olá Elemar!
    Achei muito bom o post! Agradeço por compartilhar seu grande conhecimento e experiência!

    Eu confesso que não fiz muitos testes, mas acreditava que o for era mais rápido que o foreach.
    O Parallel.ForEach costuma ser mais rápido que o Parallel.For também?

  2. No C# moderno é capaz de utilizar stackalloc sem a necessidade de unsafe, algo como

    public static string RemoverCaracteres(this string valor, params char[] caract)
    {
    if (string.IsNullOrWhiteSpace(valor))
    return String.Empty;

    Span resultado = stackalloc char[valor.Length];
    var index = 0;

    foreach (var c in valor)
    {
    var add = true;
    foreach (var o in caract)
    {
    if (o == c)
    {
    add = false;
    break;
    }

    }

    if (add)
    resultado[index++] = c;
    }

    return resultado.Slice(0, index).ToString();
    }

Deixe um comentário

O seu endereço de e-mail não será publicado. Campos obrigatórios são marcados com *

Elemar Júnior

Sou fundador e CEO da EximiaCo e atuo como tech trusted advisor ajudando diversas empresas a gerar mais resultados através da tecnologia.

Elemar Júnior

Sou fundador e CEO da EximiaCo e atuo como tech trusted advisor ajudando diversas empresas a gerar mais resultados através da tecnologia.

Mais insights para o seu negócio

Veja mais alguns estudos e reflexões que podem gerar alguns insights para o seu negócio:

For years, I have known developers who designed beautiful architectures. A lot of them are questioning the need for a...
In this post, I will show how to do your first steps with OpenCV quickly using Visual Studio 2017 and...
Este exemplo é inspirado no livro do Ayende Se você deseja aprender RavenDB, recomendo que se inscreva no RavenDB bootcamp...
O comportamento que descrevo nesse post é extremamente nocivo a carreira de todo técnico. Geralmente resulta em desgaste desnecessário e...
When designing systems that need to scale you always need to remember that [tweet]more computing power does not necessarily mean...
In the previous post, I asked which function, in the following code, would fill the array with 1’s faster and...