Đọc ghi file nhị phân trong python 3.x

hell6w9rld · October 25, 2018, 10:43am

Xin chào

Mình mới học python. Mình chọn học py 3.x. Hiện tại cũng đã nắm được py cơ bản, nhưng còn phần cuối đọc ghi file nhị phân thì mình mắc chút chíu. Mình sử dụng các tài liệu của py 2.x thì đọc ghi bị văng ra exception, traceback. Tìm các trên mạng cũng toàn đọc ghi file văn bản. Các thao tác về file, đọc ghi file văn bản, lý thuyết về file io mình đã nắm được. Mình chỉ muốn hỏi 1 chỗ duy nhất là đọc và ghi file nhị phân thôi

ví dụ, ta cần đọc và ghi các dữ liệu sau vào file

a = 1
b = 1.2
c = "hello"
lst = [1,2,3]
tupl = ("a","b","c")
dct = {"a":1, "b":2}

file_ouput = open("output.bin", "wb")
file_ouput.write(1)
file_ouput.close()

Xin cảm ơn

Phong_Ky_Vo · October 18, 2018, 9:15am

Hi HelloWorld.
Mình thường dùng struct để pack và unpack dữ liệu.

hell6w9rld · October 25, 2018, 9:22am

nếu không dùng các module import thêm thì đọc ghi bằng cách nào bạn nhỉ?

noname00 · October 25, 2018, 10:53am

Bạn encode lại data đã.

Dùng repr để lấy ra string biểu thị cho data, rồi dùng encode() để chuyển sang binary string.

x = (1, 2)
file_output.write(repr(x).encode())  # không phải ouput

repr() compute the “official” string representation of an object (a representation that has all information about the abject) and str() is used to compute the “informal” string representation of an object (a representation that is useful for printing the object).

- nguồn https://www.geeksforgeeks.org/str-vs-repr-in-python/ -

hell6w9rld · October 25, 2018, 1:38pm

ghi cách này vào file nhị phân nó ra text luôn bạn

file_output = open("output.dat","wb")
a=1
file_output.write(repr(a).encode())
file_output.close()

Phong_Ky_Vo · October 25, 2018, 2:39pm

Hi HelloWorld.

nếu không dùng các module import thêm thì đọc ghi bằng cách nào bạn nhỉ? Không có chuyện không dùng module. Có thành hành xác nhau.
Có 2 cách. Tìm mã nguồn của nó rồi tống vào. Hoặc tự viết. Cũng không khó đọc tài liệu về chuẩn ghi byte là có thể chuyển từ byte sang kiểu giá trị được.

noname00 · October 25, 2018, 3:12pm

Bạn tưởng là xâu thường, nhưng thực tế thì không phải.

Bạn in kết quả ra file thì file chỉ hiển thị ra xâu thường, thực tế là file đó vẫn là file binary, vẫn chứa binary string.

Hình như do Notepad++ hiển thị kí tự ASCII trên file binary vẫn là chính nó chứ không phải các byte. Nếu không tin file không chứa xâu thường thì bạn đọc ngược lại và in xem nội dung file là kiểu gì, string hay binary string.

Bonus thêm cho bạn:

hell6w9rld · October 25, 2018, 3:29pm

file_output = open("output.dat", "wb")
a = 1
file_output.write(repr(a).encode())
b = 1.2
file_output.write(b.__repr__().encode())
c = "hello"
file_output.write(repr(c).encode())
file_output.close()

mình xem thử trên notepad, vscode, notepad++ ra text cả

nhưng trong c/c++, ghi file nhị phân nó sẽ ntn

thật sự mình chưa hiểu file nhị phân trên python là ntn

noname00 · October 25, 2018, 3:30pm

Quote lại cho bạn nhìn

hell6w9rld · October 25, 2018, 3:36pm

mình biết là nó kiểu bytes. nhưng vấn đề là ở cái file binary ấy
sao mình thấy nó khác c/c++ vậy

File text = dữ liệu sẽ được tách từng kí tự và chuyển về mã ascii (mapping &
encoding, 8 bit = 1 byte = 1 kí tự ) có thể mở bằng trình soạn thảo văn bản để đọc,
khi mở file notepad sẽ load dữ liệu có trong file, là mã ascii nên có thể hiện thị
int x = 1297;
biến x tồn tại dưới dạng mã nhị phân và chiếm 4 byte (kiểu int) trong bộ nhớ
khi ghi vào file , x được biểu diễn thành các kí tự ‘1’, ‘2’, ‘9’, ‘7’
‘1’ có mã ascii 000 0001
‘2’ có mã ascii 000 0010
‘9’ có mã ascii 000 1001
‘7’ có mã ascii 000 0111
Các biểu diễn ascii này được ghi vào file text  có thể mở và đọc được
quá trình đọc file tương tự, đọc mã ascii rồi mapping thành dữ liệu ở mã nhị
phân, để lưu trữ trong bộ nhớ

File binary = dữ liệu ở dạng thô chưa được mã hóa, đọc ghi theo byte, không thể
mở bằng trình soạn thảo và đọc như file text (trừ kí tự, vì kí tự có thể hiển thị
được với mã ascii)
int x = 1297;
biến x tồn tại dưới dạng mã nhị phân và chiếm 4 byte (kiểu int) trong bộ nhớ
khi ghi vào file, x sẽ được chuyển về hệ nhị phân = 10100010001
dữ liệu sẽ được ghi dưới dạng thô này và không được mã hóa, ghi theo byte (
1byte = 8bit)
quá trình đọc tương tự, đọc theo byte

noname00 · October 25, 2018, 3:37pm

Dùng built-in bytearray() xem.

hell6w9rld · October 25, 2018, 3:41pm

bytearray trả về 1 mảng bytes với n phần tử hoặc xâu cho trước

file_output = open("output.dat", "wb")
data = bytearray(1.3) # error, chả lẽ lại str(1.3) :smile: . Tương tự bytes, chỉ là cái bytes này immutable, còn bytearray thì mutable
file_output.write(data)

TypeError: ‘float’ object is not iterable

noname00 · October 25, 2018, 3:41pm

Bạn đang dùng sai rồi.

hell6w9rld · October 25, 2018, 3:45pm

Theo mình biết là dùng ntn

data = bytes(5)
print(data)

data = bytes("123 abc @#$", 'utf-8')
print(data)

data = bytearray(5)
print(data)
data[0] = 1
print(data)

data = bytearray("123 abc @#$", 'utf-8')
print(data)

nhưng mục tiêu là ghi số 1.3 vào file nhị phân mà

chả lẽ ntn

a = 1.3
data = bytearray(repr(a), 'utf-8')

vẫn ra

sorry bạn, post bài mà để bạn sửa cho nhiều quá tks

hell6w9rld · October 25, 2018, 3:48pm

Thôi chắc mình dùng đại 1 cách nào đó vậy
Mà bình thường bạn ghi

a = 1
b= 1.3 
c= "hello"

vào file nhị phân bạn ghi ntn?
Mình qua phần file bên python thấy khác bên c/c++ quá
C/C++ tuy dài dòng nhưng kiểm soát tốt hơn

noname00 · October 25, 2018, 3:52pm

Mình cũng không có nhu cầu in số ra file binary lắm, toàn in xâu nên cũng không để ý gì nhiều, toàn in trực tiếp bằng file.write(...).

Xem qua thì thấy dùng struct có vẻ vẫn tối ưu.

hell6w9rld · October 25, 2018, 4:19pm

Như này error mà

file_output = open("output.dat", "wb")
file_output.write("hello")

TypeError: a bytes-like object is required, not 'str'

Mình xem thấy nhiều cách lắm:

b"something string"
encode, decode, repr
bytes, bytearray

Còn import thêm thì có

struct
pickle

Nhưng mở ra toàn thấy text luôn, cảm giác như nó mapping r. Là file văn bản, nhưng đọc lên check type thì lại là bytes

Phong_Ky_Vo · October 25, 2018, 4:14pm

Hi.

Muốn check file nhị phân hay văn bản thì kiểm tra dung lượng của nó.
VD: Ghi 1 số float xuống thì nó 4 byte. Nếu nó ghi thành sâu thì size nó phụ thuộc vào số chứ số. 10 chữ số thì nó thành 10byte, Ghi một mảng tấm 100 phần tử là rõ.
Bạn có thể dùng numpy save aray
https://docs.scipy.org/doc/numpy-1.15.0/reference/generated/numpy.save.html
Nghe như quảng cáo khoa học ý.

doanguyen · October 25, 2018, 4:19pm

Em thử viết 1 đoạn code C/C++ lưu binary của 1 string/float xem sao. Cũng không khác biệt nhiều lắm đâu.

hell6w9rld · October 25, 2018, 4:23pm

kí tự thì bên c/c++ ghi nhị phân xong vẫn thấy, nhưng ví dụ như số 1.2 thì sẽ ra các kí tự đặc biệt, còn với những cách trên bên py thì ra rõ text 1.2 anh ơi