Xử lý big data json

[tungnhuxua (caybang)]

ngữ cảnh mình là như này : khi mình lấy dữ liệu từ web service về, nhưng dữ liệu nó nặng đến 50MB
( big data.)
thì mình sài câu lệnh lấy json về không được, minh hiểu dữ liệu nó khá nặng. vậy theo các bạn có giải pháp gì hay cho việc xử lý này.
xử lý ở web hay ở dưới app, bạn nào làm qua chỉ bảo dùm. thanks

• sự apdate liên tục của web service thì làm sao có thể update ở dưới app 1 cách tốt nhất, các bạn cứ ý kiến nhá, mình cảm ơn.

[kingvhit (Võ Anh Kiệt)]

Mục đích bạn tạo ra big data cho T/H này là gì ?

Để chỉ load dữi liệu 1 lần và dùng cho sau này hay là liên tục ?

Vì nếu liên tục sẽ ảnh hưởng tới performance hệ thống

[tungnhuxua (caybang)]

@kingvhit

Mục đích bạn tạo ra big data cho T/H này là gì ?

ngữ cảnh bắt buộc có nhiều nên sẽ tạo ra big data,

@kingvhit

Để chỉ load dữi liệu 1 lần và dùng cho sau này hay là liên tục ?

nó liên tục chứ ban.

@tungnhuxua

sự apdate liên tục của web service thì làm sao có thể update ở dưới app 1 cách tốt nhất, các bạn cứ ý kiến nhá, mình cảm ơn.

@kingvhit

Vì nếu liên tục sẽ ảnh hưởng tới performance hệ thống

vậy không được hử ban?

[kingvhit (Võ Anh Kiệt)]

Không phải là không được mà mình không rõ mục đích bạn lấy dữ liệu lớn như vậy về làm gì, duwxl iệu đó là gì . Bạn phải nói rõ thì mọi người mới tìm giải pháp cho bạn tốt nhất chứ

[nghuuquyen (Nguyễn Hữu Quyền)]

Nếu dữ liệu lớn quá thì bạn nên lưu về local máy người dùng ( Nếu dữ liệu không nhạy cảm) rồi chỉ kiểm tra khi cần cập nhật dữ liệu, nếu dữ liệu quan trọng mà bạn đổ về 50mb thì quá nhiều đó thường thì với để đổ dữ liệu lớn thì bạn tìm hiểu về HTTP Stream . Bạn cũng nên tính toán dữ liệu phù hợp để tiết kiệm băng thông và tăng tốc độ ứng dụng.