MS Excel có thể hiển thị 1.048.576 hàng. Mặc dù đó có vẻ là một con số thực sự lớn trong mức sử dụng bình thường, nhưng vẫn có rất nhiều trường hợp mà điều đó vẫn chưa đủ.

Cho dù bạn đang xem tệp nhật ký hay tập dữ liệu lớn, thật dễ dàng bắt gặp tệp CSV^(CSV) với hàng triệu hàng hoặc tệp văn bản khổng lồ. Vì Excel không thể hỗ trợ các tệp lớn như vậy, chính xác thì bạn mở chúng bằng cách nào? Hãy cùng tìm hiểu.

Tại sao các trình soạn thảo văn bản bình thường^{(Normal Text Editors)} không thể mở các tệp thực sự lớn^{(Open Really Large Files)} ?

Máy tính có dung lượng lưu trữ hàng gigabyte, vậy tại sao trình soạn thảo văn bản không thể mở các tệp lớn?

Có hai yếu tố đang diễn ra ở đây. Một số ứng dụng có giới hạn mã cứng về lượng dữ liệu mà chúng có thể hiển thị. Không quan trọng PC của bạn có bao nhiêu bộ nhớ, chỉ là chúng sẽ không sử dụng nó.

Vấn đề thứ hai là RAM . Nhiều trình soạn thảo văn bản không có giới hạn cứng về số hàng, nhưng không thể hiển thị các tệp lớn do giới hạn bộ nhớ. Chúng tải toàn bộ tệp vào RAM hệ thống , vì vậy nếu bộ nhớ này không đủ lớn, quá trình sẽ không thành công.

Phương pháp # 1: Sử dụng trình chỉnh sửa miễn phí

Cách tốt nhất để xem các tệp văn bản cực lớn là sử dụng… trình soạn thảo văn bản. Không chỉ là bất kỳ trình soạn thảo văn bản nào, mà còn là các công cụ dùng để viết mã. Các ứng dụng như vậy thường có thể xử lý các tệp lớn mà không gặp trở ngại và miễn phí.

Large Text File Viewer có lẽ là ứng dụng đơn giản nhất trong số các ứng dụng này. Nó thực sự dễ sử dụng, hoạt động nhanh và ít tốn tài nguyên. Nhược điểm duy nhất? Nó không thể chỉnh sửa các tập tin. Nhưng nếu bạn chỉ muốn xem các tệp CSV^(CSV) lớn , đây là công cụ tốt nhất cho công việc.

Để chỉnh sửa các tệp văn bản lớn, bạn nên thử Emacs . Ban đầu được tạo ra cho các hệ thống Unix , nó hoạt động hoàn toàn tốt trên Windows và có thể xử lý các tệp lớn. Tương tự, Neovim và Sublime Text là hai IDE nhẹ có thể được sử dụng để mở các tệp văn bản ^(IDEs)CSV có kích thước gigabyte .

Nếu tất cả những gì bạn đang tìm kiếm là tìm kiếm dữ liệu thông qua các tệp nhật ký lớn, thì klogg chính^(klogg) là công cụ dành cho bạn. Là một nhánh cập nhật của glogg phổ biến , ứng dụng này cho phép bạn thực hiện các thao tác tìm kiếm phức tạp thông qua các tệp văn bản khổng lồ một cách dễ dàng. Vì các tệp nhật ký do máy tính tạo ra thường có thể có hàng triệu hàng, klogg được thiết kế để hoạt động với các kích thước tệp như vậy mà không gặp sự cố.

Phương pháp^(Method) # 2: Chia thành nhiều phần^{(Into Multiple Parts)}

Toàn bộ vấn đề khi cố gắng mở các tệp CSV^(CSV) lớn là chúng quá lớn. Nhưng điều gì sẽ xảy ra nếu bạn chia chúng thành nhiều tệp nhỏ hơn?

Đây là một giải pháp phổ biến, vì nó thường không liên quan đến việc phải học giao diện của một trình soạn thảo văn bản mới. Thay vào đó, bạn có thể sử dụng một trong nhiều bộ tách CSV có sẵn trực tuyến^{(one of the many CSV splitters available online)} để chia tệp lớn thành một số tệp dễ mở. Mỗi tệp này sau đó có thể được truy cập bình thường.

Tuy nhiên, đây không phải là cách tốt nhất để giải quyết vấn đề này. Việc chia nhỏ một tệp lớn thường có thể dẫn đến lỗi chính tả kỳ lạ hoặc các tệp được định cấu hình không đúng cách. Hơn nữa, việc mở từng đoạn riêng biệt ngăn bạn lọc toàn bộ dữ liệu cùng một lúc.

Phương pháp # 3: Nhập vào cơ sở dữ liệu

Các tệp văn bản và .csv mở rộng đến nhiều gigabyte thường là các tập dữ liệu lớn. Vậy tại sao không chỉ nhập chúng vào cơ sở dữ liệu?

SQL là ngôn ngữ đánh dấu cơ sở dữ liệu phổ biến nhất được sử dụng ngày nay. Có nhiều phiên bản SQL^{(many versions of SQL)} được sử dụng, nhưng dễ nhất có lẽ là MySQL . Và may mắn thay, có thể chuyển đổi tệp CSV thành một bảng MySQL^{(convert a CSV file into a MySQL table)} .

Đây hoàn toàn không phải là phương pháp dễ dàng nhất để xử lý các tệp CSV^(CSV) lớn , vì vậy chúng tôi chỉ đề xuất phương pháp này nếu bạn muốn xử lý các tập dữ liệu lớn một cách thường xuyên. Nếu MySQL nghe có vẻ quá khó, bạn luôn có thể nhập các tệp .csv của mình vào MS Access .

Phương pháp^(Method) # 4: Phân tích với thư viện Python

Khi bạn đang làm việc với tệp .csv với hàng triệu hàng dữ liệu, rõ ràng là bạn sẽ không thể hiểu rõ về nó theo cách thủ công. Bạn có thể muốn lọc dữ liệu và chạy các truy vấn cụ thể để hiểu xu hướng.

Vậy tại sao không viết mã Python^{(write Python code)} để làm điều đó?

Một lần nữa, đây không phải là phương pháp thân thiện với người dùng nhất. Mặc dù Python không phải là ngôn ngữ lập trình khó học nhất^{(Python isn’t the hardest programming language to learn)} , nhưng nó là ngôn ngữ viết mã, vì vậy nó có thể không phải là cách tiếp cận tốt nhất cho bạn. Tuy nhiên, nếu bạn thấy mình phải phân tích cú pháp qua các tệp CSV^(CSV) thực sự lớn hàng ngày, bạn có thể muốn tự động hóa tác vụ bằng một số mã Python^{(automate the task with some Python code)} .

Phương pháp # 5: Với các công cụ cao cấp

Các trình soạn thảo văn bản mà chúng tôi thấy trong phương pháp đầu tiên không phải là các công cụ chuyên dụng dành cho xử lý CSV . Chúng là những công cụ có mục đích chung cũng có thể được sử dụng để làm việc với các tệp .csv lớn.

Nhưng những ứng dụng chuyên biệt thì sao? Không có ứng dụng nào được tạo ra để giải quyết vấn đề này?

Thực ra là có. Ví dụ: CSV Explorer^{(CSV Explorer)} xây dựng dựa trên quá trình mà chúng tôi đã mô tả trong hai phương pháp cuối cùng ( cơ sở dữ liệu SQL và mã Python ) để tạo một ứng dụng có khả năng xem và chỉnh sửa các tệp CSV^(CSV) ở bất kỳ kích thước nào. Bạn có thể làm mọi thứ bạn mong đợi từ công cụ bảng tính như tạo đồ thị hoặc lọc dữ liệu trong CSV Explorer .

Một tùy chọn khác là UltraEdit . Không giống như công cụ trước, điều này không chỉ dành cho các tệp .csv mà còn cho bất kỳ loại tệp văn bản nào. Nó có thể dễ dàng xử lý các tệp văn bản và tệp CSV^(CSV) có dung lượng tới vài gigabyte, với giao diện tương tự như nhiều trình chỉnh sửa miễn phí mà chúng tôi đã thảo luận trước đó. 

Hạn chế duy nhất của các công cụ này là chúng là các ứng dụng cao cấp, yêu cầu bạn phải có giấy phép trả phí để có thể sử dụng chúng. Bạn luôn có thể dùng thử các phiên bản dùng thử miễn phí của chúng để kiểm tra các tính năng của chúng hoặc nếu bạn chỉ sử dụng một lần.

Cách tốt nhất để mở tệp văn bản lớn^{(Large Text)} và tệp CSV^{(CSV Files)} là gì?

Trong thời đại Dữ liệu lớn^{(Big Data)} này, không có gì lạ khi bạn gặp phải các tệp văn bản có dung lượng hàng gigabyte, thậm chí khó có thể xem được bằng các công cụ tích hợp sẵn như Notepad hoặc MS Excel . Để có thể mở các tệp CSV^(CSV) lớn như vậy , bạn cần tải xuống và sử dụng ứng dụng của bên thứ ba.

Nếu tất cả những gì bạn muốn là xem các tệp như vậy, thì Trình xem tệp văn bản lớn^{(Large Text File Viewer)} là lựa chọn tốt nhất cho bạn. Để thực sự chỉnh sửa chúng, bạn có thể thử một trình soạn thảo văn bản giàu tính năng như Emacs hoặc sử dụng một công cụ cao cấp như CSV Explorer .

Các kỹ thuật như chia nhỏ tệp CSV^(CSV) hoặc nhập tệp đó vào cơ sở dữ liệu chỉ bao gồm quá nhiều bước. Tốt hơn hết bạn nên nhận được giấy phép trả phí của một công cụ cao cấp chuyên dụng nếu bạn thấy mình làm việc nhiều với các tệp văn bản lớn.

How to Open Really Large Text and CSV Files

MS Excel can display 1,048,576 rows. While that may seem like a really large number in normal υsage, there are plenty of scenarios where that isn’t quite enough.

Whether you’re looking at log files or large data sets, it’s easy to come across CSV files with millions of rows or enormous text files. Since Excel cannot support files this large, how exactly do you open them? Let’s find out.

Why Can Normal Text Editors Not Open Really Large Files?

A computer has gigabytes of storage, so why can’t text editors open large files?

There are two factors at play here. Some applications have a hardcoded limit on how much data they can display. It doesn’t matter how much memory your PC has, they just won’t use it.

The second issue is RAM. Many text editors do not have a hard limit on the number of rows, but cannot display large files due to memory limitations. They load the entire file into the system RAM, so if this memory isn’t large enough, the process fails.

Method #1: Using Free Editors

The best way to view extremely large text files is to use… a text editor. Not just any text editor, but the tools meant for writing code. Such apps can usually handle large files without a hitch and are free.

Large Text File Viewer is probably the simplest of these applications. It’s really easy to use, works fast and has a very low resource footprint. The only downside? It cannot edit the files. But if you only want to view large CSV files, this is hands down the best tool for the job.

For editing large text files as well, you should try Emacs. Originally created for Unix systems, it works perfectly well on Windows as well, and can handle large files. Similarly, Neovim and Sublime Text are two lightweight IDEs that can be used to open gigabyte-sized CSV text files.

If all you’re looking for is to search for data through large log files, then klogg is just the tool for you. An updating fork of the popular glogg, this application allows you to perform complex search operations through enormous text files with ease. Since computer-generated log files can often have millions of rows, klogg is designed to work with such file sizes without an issue.

Method #2: Split Into Multiple Parts

The whole problem with trying to open large CSV files is that they are too large. But what if you were to split these into multiple smaller files?

This is a popular solution, as it generally doesn’t involve having to learn the interface of a new text editor. Instead, you can use one of the many CSV splitters available online to break up the large file into a number of easy-to-open files. Each of these files can then be accessed normally.

However, this isn’t the best way to go about this. Splitting a large file can often lead to weird typos or improperly configured files. Moreover, opening each chunk separately prevents you from filtering through the whole data at once.

Method #3: Import Into a Database

Text and .csv files extending to multiple gigabytes are generally large datasets. So why not just import them into a database?

SQL is the most common database markup language used these days. There are many versions of SQL in use, but the easiest is probably MySQL. And as luck would have it, it is possible to convert a CSV file into a MySQL table.

This is by no means the easiest method of dealing with large CSV files, so we only recommend this if you want to deal with large datasets on a regular basis. If MySQL sounds too tough, you can always import your .csv files to MS Access instead.

Method #4: Analyze With Python Libraries

When you’re working with a .csv file with millions of rows of data, you’re obviously not going to be able to make much sense of it manually. You probably want to filter the data and run specific queries to understand trends.

So why not write Python code to do just that?

Once again, this is not the most user-friendly method. While Python isn’t the hardest programming language to learn, it is coding, so it might not be the best approach for you. Still, if you find yourself having to parse through really large CSV files on a daily basis, you might want to automate the task with some Python code.

Method #5:  With Premium Tools

The text editors we saw in the first method weren’t dedicated tools meant for CSV processing. They were general-purpose tools that could be used to work with large .csv files as well.

But what about specialized applications? Are there no apps out there that are created to solve this problem?

There are, actually. CSV Explorer, for example, builds on the very process we described in the last two methods (SQL database and Python code) to create an app capable of viewing and editing CSV files of any size. You can do everything you expect from a spreadsheet tool like create graphs or filter the data in CSV Explorer.

Another option is UltraEdit. Unlike the previous tool, this is meant not just for .csv files but for any type of text file. It can easily handle text and CSV files ranging to a few gigabytes, with an interface similar to many of the free editors we discussed earlier. 

The only drawback with these tools is that they are premium applications, requiring you to get a paid license to be able to use them. You can always try out their free trial versions to check out their features, or if you only have a one-time use.

What Is the Best Way To Open Large Text and CSV Files?

In this age of Big Data, it’s not uncommon to run into text files running into gigabytes, which can be hard to even view with built-in tools like Notepad or MS Excel. To be able to open such large CSV files, you need to download and use a third-party application.

If all you want is to view such files, then Large Text File Viewer is the best choice for you. For actually editing them, you can try a feature-rich text editor like Emacs, or go for a premium tool like CSV Explorer.

Techniques like splitting the CSV file or importing it into a database involve just too many steps. You’re better off getting a paid license of a dedicated premium tool if you find yourself working with huge text files a lot.

Related posts

• Cách tìm kiếm văn bản bên trong nhiều tệp PDF cùng một lúc

• Làm thế nào để Gửi Anonymous Text Message có thể không Be Traced Back cho Bạn

• Làm thế nào để Format Text trong Discord: Font, Bold, Italicize, Strikethrough, and Nhiều hơn

• Cách chuyển đổi Multiple Images thành PDF Files

• Cách tự động di chuyển hoặc sao chép tệp trong Windows

• Không thể phát tệp AVI trong Window Media Player?

• Phương pháp thay thế để ẩn tệp và thư mục trong Windows

• 4 Ways Để tìm Internet tốt nhất Options (ISPs) trong khu vực của bạn

• Cách ẩn tệp trong ảnh JPG

• Cách tìm kiếm từ hoặc văn bản trên trang web trong bất kỳ trình duyệt web nào

• Cách chuyển tập tin qua Bluetooth sang PC của bạn

• Cách lật văn bản trên đường dẫn trong Illustrator

• Cách nhanh nhất để quét số lượng lớn ảnh tại nhà

• Cách sửa chữa và phát các tệp video bị hỏng hoặc bị hỏng

• 10 Best Ways lên Child Proof Your Computer

• Cách xem tệp Mac trên PC Windows

• Uber Passenger Rating and How là gì để kiểm tra nó

• Làm thế nào để tìm các máy chủ bất hòa tốt nhất

• Cách truy cập tệp Mac từ PC chạy Windows

• 6 cách để gửi tệp lớn dưới dạng tệp đính kèm email