O MS Excel^{(MS Excel)} pode exibir 1.048.576 linhas. Embora isso possa parecer um número muito grande no uso normal, há muitos cenários em que isso não é suficiente.

Esteja você olhando para arquivos de log ou grandes conjuntos de dados, é fácil encontrar arquivos CSV com milhões de linhas ou arquivos de texto enormes. Como o Excel não suporta arquivos tão grandes, como exatamente você os abre? Vamos descobrir.

Por que os editores de texto normais^{(Normal Text Editors)} não abrem arquivos muito grandes^{(Open Really Large Files)} ?

Um computador tem gigabytes de armazenamento, então por que os editores de texto não podem abrir arquivos grandes?

Há dois fatores em jogo aqui. Alguns aplicativos têm um limite codificado de quantos dados podem exibir. Não importa quanta memória seu PC tenha, eles simplesmente não a usarão.

A segunda questão é a RAM . Muitos editores de texto não têm um limite rígido no número de linhas, mas não podem exibir arquivos grandes devido a limitações de memória. Eles carregam o arquivo inteiro na RAM do sistema , portanto, se essa memória não for grande o suficiente, o processo falhará.

Método nº 1: usando editores gratuitos

A melhor maneira de visualizar arquivos de texto extremamente grandes é usar… um editor de texto. Não apenas qualquer editor de texto, mas as ferramentas destinadas a escrever código. Esses aplicativos geralmente podem lidar com arquivos grandes sem problemas e são gratuitos.

O Large Text File Viewer^{(Large Text File Viewer)} é provavelmente o mais simples desses aplicativos. É realmente fácil de usar, funciona rápido e tem uma pegada de recursos muito baixa. A única desvantagem? Ele não pode editar os arquivos. Mas se você deseja apenas visualizar arquivos CSV grandes , esta é a melhor ferramenta para o trabalho.

Para editar arquivos de texto grandes também, você deve tentar o Emacs . Originalmente criado para sistemas Unix , funciona perfeitamente bem no Windows também e pode lidar com arquivos grandes. Da mesma forma, Neovim e Sublime Text são dois ^{(Sublime Text)}IDEs leves que podem ser usados ​​para abrir arquivos de texto CSV de tamanho gigabyte.^(CSV)

Se tudo o que você está procurando é pesquisar dados através de grandes arquivos de log, então o klogg é a ferramenta certa para você. Um fork de atualização do popular glogg , este aplicativo permite realizar operações de pesquisa complexas através de enormes arquivos de texto com facilidade. Como os arquivos de log gerados por computador geralmente podem ter milhões de linhas, o klogg foi projetado para funcionar com esses tamanhos de arquivo sem problemas.

Método^(Method) #2: Dividir em várias partes^{(Into Multiple Parts)}

Todo o problema de tentar abrir arquivos CSV grandes é que eles são muito grandes. ^(CSV)Mas e se você os dividisse em vários arquivos menores?

Esta é uma solução popular, pois geralmente não envolve ter que aprender a interface de um novo editor de texto. Em vez disso, você pode usar um dos muitos divisores de CSV disponíveis online^{(one of the many CSV splitters available online)} para dividir o arquivo grande em vários arquivos fáceis de abrir. Cada um desses arquivos pode ser acessado normalmente.

No entanto, esta não é a melhor maneira de fazer isso. A divisão de um arquivo grande geralmente pode levar a erros de digitação estranhos ou arquivos configurados incorretamente. Além disso, abrir cada bloco separadamente evita que você filtre todos os dados de uma só vez.

Método nº 3: Importar para um banco de dados

Arquivos de texto e .csv que se estendem a vários gigabytes geralmente são grandes conjuntos de dados. Então, por que não apenas importá-los para um banco de dados?

SQL é a linguagem de marcação de banco de dados mais comum usada atualmente. Existem muitas versões do SQL^{(many versions of SQL)} em uso, mas o mais fácil é provavelmente o MySQL . E por sorte, é possível converter um arquivo CSV em uma tabela MySQL^{(convert a CSV file into a MySQL table)} .

Este não é de forma alguma o método mais fácil de lidar com arquivos CSV grandes , por isso só recomendamos isso se você quiser lidar com grandes conjuntos de dados regularmente. Se o MySQL parecer muito difícil, você sempre pode importar seus arquivos .csv para o MS Access .

Método^(Method) #4: Analisar com bibliotecas Python

Quando você está trabalhando com um arquivo .csv com milhões de linhas de dados, obviamente não conseguirá entender muito manualmente. Você provavelmente deseja filtrar os dados e executar consultas específicas para entender as tendências.

Então, por que não escrever código Python^{(write Python code)} para fazer exatamente isso?

Mais uma vez, este não é o método mais amigável. Embora o Python não seja a linguagem de programação mais difícil de aprender^{(Python isn’t the hardest programming language to learn)} , é codificação, portanto, pode não ser a melhor abordagem para você. Ainda assim, se você precisar analisar arquivos CSV realmente grandes diariamente, talvez queira automatizar a tarefa com algum código Python^{(automate the task with some Python code)} .

Método #5: Com Ferramentas Premium

Os editores de texto que vimos no primeiro método não eram ferramentas dedicadas destinadas ao processamento de CSV . Eram ferramentas de uso geral que também podiam ser usadas para trabalhar com arquivos .csv grandes.

Mas e as aplicações especializadas? Não existem aplicativos criados para resolver esse problema?

Existem, na verdade. O CSV Explorer^{(CSV Explorer)} , por exemplo, se baseia no próprio processo que descrevemos nos dois últimos métodos ( banco de dados SQL e código Python ) para criar um aplicativo capaz de visualizar e editar arquivos CSV de qualquer tamanho. ^(CSV)Você pode fazer tudo o que espera de uma ferramenta de planilha, como criar gráficos ou filtrar os dados no CSV Explorer .

Outra opção é o UltraEdit^(UltraEdit) . Ao contrário da ferramenta anterior, isso não se destina apenas a arquivos .csv, mas a qualquer tipo de arquivo de texto. Ele pode lidar facilmente com arquivos de texto e CSV de alguns gigabytes, com uma interface semelhante a muitos dos editores gratuitos que discutimos anteriormente. 

A única desvantagem dessas ferramentas é que elas são aplicativos premium, exigindo que você obtenha uma licença paga para poder usá-las. Você sempre pode experimentar suas versões de avaliação gratuitas para conferir seus recursos ou se você tiver apenas um uso único.

Qual é a melhor maneira de abrir arquivos grandes de texto^{(Large Text)} e CSV^{(CSV Files)} ?

Nesta era de Big Data , não é incomum encontrar arquivos de texto com gigabytes, que podem ser difíceis de visualizar até mesmo com ferramentas integradas como o Bloco^(Notepad) de Notas ou o MS Excel . Para poder abrir arquivos CSV tão grandes , você precisa baixar e usar um aplicativo de terceiros.

Se tudo o que você deseja é visualizar esses arquivos, o Large Text File Viewer é a melhor escolha para você. Para realmente editá-los, você pode experimentar um editor de texto rico em recursos como o Emacs ou optar por uma ferramenta premium como o CSV Explorer .

Técnicas como dividir o arquivo CSV ou importá-lo para um banco de dados envolvem muitas etapas. É melhor obter uma licença paga de uma ferramenta premium dedicada se estiver trabalhando muito com arquivos de texto enormes.

How to Open Really Large Text and CSV Files

MЅ Excel cаn displaу 1,048,576 rows. While that may seem like a really large number in normal usage, there are plenty of scenarios where that isn’t quite еnough.

Whether you’re looking at log files or large data sets, it’s easy to come across CSV files with millions of rows or enormous text files. Since Excel cannot support files this large, how exactly do you open them? Let’s find out.

Why Can Normal Text Editors Not Open Really Large Files?

A computer has gigabytes of storage, so why can’t text editors open large files?

There are two factors at play here. Some applications have a hardcoded limit on how much data they can display. It doesn’t matter how much memory your PC has, they just won’t use it.

The second issue is RAM. Many text editors do not have a hard limit on the number of rows, but cannot display large files due to memory limitations. They load the entire file into the system RAM, so if this memory isn’t large enough, the process fails.

Method #1: Using Free Editors

The best way to view extremely large text files is to use… a text editor. Not just any text editor, but the tools meant for writing code. Such apps can usually handle large files without a hitch and are free.

Large Text File Viewer is probably the simplest of these applications. It’s really easy to use, works fast and has a very low resource footprint. The only downside? It cannot edit the files. But if you only want to view large CSV files, this is hands down the best tool for the job.

For editing large text files as well, you should try Emacs. Originally created for Unix systems, it works perfectly well on Windows as well, and can handle large files. Similarly, Neovim and Sublime Text are two lightweight IDEs that can be used to open gigabyte-sized CSV text files.

If all you’re looking for is to search for data through large log files, then klogg is just the tool for you. An updating fork of the popular glogg, this application allows you to perform complex search operations through enormous text files with ease. Since computer-generated log files can often have millions of rows, klogg is designed to work with such file sizes without an issue.

Method #2: Split Into Multiple Parts

The whole problem with trying to open large CSV files is that they are too large. But what if you were to split these into multiple smaller files?

This is a popular solution, as it generally doesn’t involve having to learn the interface of a new text editor. Instead, you can use one of the many CSV splitters available online to break up the large file into a number of easy-to-open files. Each of these files can then be accessed normally.

However, this isn’t the best way to go about this. Splitting a large file can often lead to weird typos or improperly configured files. Moreover, opening each chunk separately prevents you from filtering through the whole data at once.

Method #3: Import Into a Database

Text and .csv files extending to multiple gigabytes are generally large datasets. So why not just import them into a database?

SQL is the most common database markup language used these days. There are many versions of SQL in use, but the easiest is probably MySQL. And as luck would have it, it is possible to convert a CSV file into a MySQL table.

This is by no means the easiest method of dealing with large CSV files, so we only recommend this if you want to deal with large datasets on a regular basis. If MySQL sounds too tough, you can always import your .csv files to MS Access instead.

Method #4: Analyze With Python Libraries

When you’re working with a .csv file with millions of rows of data, you’re obviously not going to be able to make much sense of it manually. You probably want to filter the data and run specific queries to understand trends.

So why not write Python code to do just that?

Once again, this is not the most user-friendly method. While Python isn’t the hardest programming language to learn, it is coding, so it might not be the best approach for you. Still, if you find yourself having to parse through really large CSV files on a daily basis, you might want to automate the task with some Python code.

Method #5:  With Premium Tools

The text editors we saw in the first method weren’t dedicated tools meant for CSV processing. They were general-purpose tools that could be used to work with large .csv files as well.

But what about specialized applications? Are there no apps out there that are created to solve this problem?

There are, actually. CSV Explorer, for example, builds on the very process we described in the last two methods (SQL database and Python code) to create an app capable of viewing and editing CSV files of any size. You can do everything you expect from a spreadsheet tool like create graphs or filter the data in CSV Explorer.

Another option is UltraEdit. Unlike the previous tool, this is meant not just for .csv files but for any type of text file. It can easily handle text and CSV files ranging to a few gigabytes, with an interface similar to many of the free editors we discussed earlier. 

The only drawback with these tools is that they are premium applications, requiring you to get a paid license to be able to use them. You can always try out their free trial versions to check out their features, or if you only have a one-time use.

What Is the Best Way To Open Large Text and CSV Files?

In this age of Big Data, it’s not uncommon to run into text files running into gigabytes, which can be hard to even view with built-in tools like Notepad or MS Excel. To be able to open such large CSV files, you need to download and use a third-party application.

If all you want is to view such files, then Large Text File Viewer is the best choice for you. For actually editing them, you can try a feature-rich text editor like Emacs, or go for a premium tool like CSV Explorer.

Techniques like splitting the CSV file or importing it into a database involve just too many steps. You’re better off getting a paid license of a dedicated premium tool if you find yourself working with huge text files a lot.

Related posts

• Como pesquisar texto dentro de vários arquivos PDF de uma só vez

• Como enviar um Anonymous Text Message que podem não Be Traced Back to You

• Como para Format Text em Discord: Font, Bold, Italicize, Strikethrough, e mais

• Como converter Multiple Images em PDF Files

• Como mover ou copiar arquivos automaticamente no Windows

• Como alterar extensões de arquivo em lote para arquivos do Windows

• Como abrir ou extrair arquivos RAR no Windows e Mac

• Como descriptografar arquivos criptografados do Windows

• Como abrir arquivos no Windows com diferentes extensões de arquivo

• Como pesquisar uma palavra ou texto em uma página da Web em qualquer navegador da Web

• Como Search Facebook Friends por Location, Job, ou School

• Como alterar a data da última modificação, a data de criação e a data do último acesso para arquivos e pastas

• Como ocultar mensagens de texto no iPhone (desativar a visualização)

• Método alternativo para ocultar arquivos e pastas no Windows

• Como visualizar arquivos do Mac em um PC com Windows

• Não consegue reproduzir arquivos MP4 no seu XBox 360?

• Como ler e abrir arquivos .DAT no Windows

• Como recuperar arquivos do Windows usando um Live CD do Linux

• Como criar, montar e gravar arquivos de imagem ISO gratuitamente

• Como inverter o texto em um caminho no Illustrator