私は@JacquelineSYC19にAIのデータ問題について尋ねました: 「データを動かすのは一見単純なことのように感じる。しかし、あなたは異種系を扱っています。PostgresはSnowflakeとは異なる構造になっています。 データタイプや文字数も異なります。データの一貫性を保つために、途中で小さな変換を積み重ねる必要があります。 システムを構築する際には、コピーされるすべてのデータが正確であることを確認しなければなりません。そして、途中で何も落とさないこと。 ほとんどのシステムは数百テラバイト、場合によってはペタバイトのデータに相当します。Uberを呼んだり、ホテルにチェックインしたり、メッセージを送ったり、アプリを開いたりするたびに、すべてが記録されています。こうした例外は成長するにつれて積み重なっていきます。 データが蓄積されると、一部の企業はデータベースをシャーディングします。これがさらに複雑にしています。 一部の企業は、中央のデータウェアハウスに何百ものデータベースを流しています。さらに、複数のデータウェアハウスを持つ企業もあります。 これにより、大量のデータを単純に保存・扱うことが非常に難しい問題となり、私たちはそこで解決しました。 @artie_labs。」