Các kiểu dữ liệu của Google Cloud Bigquery

Bigquery suppost nhiều kiểu dữ liệu, có thể là những kiểu cơ bản như Interger, Boolean, hay những kiểu phức tạp hơn như Array, Struct. Chúng ta sẽ đi tìm hiểu khái quát từng kiểu dữ liệu.

Khi lưu trữ cũng như truy vấn dữ liệu, hãy chú ý tới các thuộc tính của kiểu dữ liệu sau:

Gồm các giá trị kiểu số nguyên:

Các string input và output phải là UTF-8 encoded. Tất cả các hàm và toán tử hoạt động trên các giá trị STRING hoạt động trên các ký tự Unicode thay vì byte. Chẳng hạn như, các function SUBSTR hay LENGTH được áp dụng trên kiểu dữ liệu String là Unicode, chứ không phải Byte.

String và Byte là 2 kiểu dữ liệu riêng biệt, và không thể thay thế cho nhau. Hầu hết các function trên string cũng được định nghĩa trên byte.

Kiểu dữ liệu date biểu thị 1 ngày chắn trong lịch, độc lập với múi giờ. Giá trị DATE không đại diện cho một khoảng thời gian cụ thể 24h. format:

    'YYYY-[M]M-[D]D'
    - YYYY: Four-digit year
    - [M]M: One or two digit month
    - [D]D: One or two digit day

Không giống như TIMESTAMP, một đối tượng DATETIME không biểu thị một thời gian tuyệt đối, mà chỉ là một thời gian nào đó trên đồng hồ hoặc lịch. Format:

    YYYY-[M]M-[D]D[( |T)[H]H:[M]M:[S]S[.DDDDDD]]
    - YYYY: Four-digit year
    - [M]M: One or two digit month
    - [D]D: One or two digit day
    - ( |T): A space or a T separator
    - [H]H: One or two digit hour (valid values from 00 to 23)
    - [M]M: One or two digit minutes (valid values from 00 to 59)
    - [S]S: One or two digit seconds (valid values from 00 to 59)
    - [.DDDDDD]: Up to six fractional digits (i.e. up to microsecond precision)

Format:

    [H]H:[M]M:[S]S[.DDDDDD]
    - [H]H: One or two digit hour (valid values from 00 to 23)
    - [M]M: One or two digit minutes (valid values from 00 to 59)
    - [S]S: One or two digit seconds (valid values from 00 to 59)
    - [.DDDDDD]: Up to six fractional digits (i.e. up to microsecond precision)

format:

    YYYY-[M]M-[D]D[( |T)[H]H:[M]M:[S]S[.DDDDDD]][time zone]
    - YYYY: Four-digit year
    - [M]M: One or two digit month
    - [D]D: One or two digit day
    - ( |T): A space or a T separator
    - [H]H: One or two digit hour (valid values from 00 to 23)
    - [M]M: One or two digit minutes (valid values from 00 to 59)
    - [S]S: One or two digit seconds (valid values from 00 to 59)
    - [.DDDDDD]: Up to six fractional digits (i.e. up to microsecond precision)
    - [time zone]: String representing the time zone. See the time zones section for details.

Timezone phải được chỉ định khi hiển thị kiểu dữ liệu timestamp. Nếu giá trị múi giờ không được chỉ định thì được hiểu đó là mặc định UTC.

Mảng của mảng là không được suppost. Và cả các truy vấn mà kết quả sinh ra một mảng của các mảng cũng raise lỗi. Thay vào đó, nên dùng một STRUCT chèn vào giữa các ARRAY và sử dụng cấu trúc SELECT AS STRUCT. Hiện tại, BigQuery có 2 giới hạn sau đối với NULLs và ARRAYs:

• Bigquery sẽ raise ra lỗi nếu kết quả của truy vấn có mảng chứa những phần tử NULL mặc dù array có thể được dùng trong câu truy vấn
• Bigquery sẽ dịch mảng null thành mảng rỗng trong kết quả của truy vấn mặc dù truy vấn mảng NULL và mảng rỗng là 2 khái niệm hoàn toàn khác nhau

Kiểu dữ liệu ARRAY được khai báo sử dụng cú pháp : (< and >), kiểu các phần tử của mảng có thể tùy ý, miễn là không phải kiểu mảng format:

    ARRAY<T>

Ví du:

• ARRAY<INT64> : Một mảng đơn giản, các phần tử là các số nguyên 64 bit.
• ARRAY<STRUCT<INT64, INT64>> : Một mảng, mỗi phần tử của mảng là là 1 struct. mỗi cấu trúc chứa 2 số nguyên 64 bit.
• ARRAY<ARRAY<INT64>> (not supported): Đây là một khai báo invalid, mảng không thể chứa trực tiếp 1 mảng
• ARRAY<STRUCT<ARRAY<INT64>>>: Một mảng gồm các mảng chứa số nguyên 64 bit. Chú ý rằng, Struct được chèn giữa 2 mảng vì mảng không thể chứa trực tiếp mảng.

Để khai báo struct, sử dụng dấu (< and >), với kiểu dữ liệu các phần tử của struct có thể tùy ý

    STRUCT<T>

Ví dụ:

• STRUCT<INT64> : Một struct đơn giản với một trường kiểu số nguyên 64 bit và không có tên.
• STRUCT<x STRUCT<y INT64, z INT64>>: Một STRUCT với một trường kiểu STRUCT có tên là x. Struct này có 2 trường y và z đều là kiểu số nguyên 64 bit.
• STRUCT<inner_array ARRAY<INT64>>: Một struct có trường là 1 mảng với tên inner_array, mảng này gồm các phần tử kiểu số nguyên 64 bit