在android中将大量JSON数据插入SQLite DB的方法是什么

Question

我有一个大的 json 请求，也就是说，它有大约 50k 行和 15 列，我必须将它们插入到具有相同结构的 SQLite DB 中。也就是说，我必须将在 postgres db 中分配的相同数据复制到我的应用程序中的 sqlite db 中。有什么有效的方法吗？是否有一些 api 或可以帮助工作的东西？

我必须告诉我，我可以使用 OMRLite 处理不大的 JSON 数据，但是当我尝试处理更大的数据时，我的应用程序崩溃并且 内存错误。

如果您有一些想法或一些我可以遵循的示例，我将不胜感激！提前致谢！

Answer 1

您还可以使用 Google 的官方 Gson 流媒体库。

Gson 流媒体：Gson Streaming

JsonReader 在使用 Streaming 库解析 json 中起着非常重要的作用。

Answer 2

由于 JSON 太大，您无法将其完全加载到内存中。即使使用标准 JSONObject 也会导致许多设备上的内存不足。

我在类似情况下所做的是使用 Jackson 来解析它。杰克逊可以从流中做到这一点，所以内存使用根本不是问题。缺点是 API 与普通选项相比使用起来不那么直接。

这是我找到的一个例子：Jackson Streaming

Answer 3

GSON 流适用于我Gson - streaming，但我不得不说这需要他的时间，例如 10 列的 68K 行大约需要 4 分钟。但无论如何解决了我的问题。所以我有这个 JSON 响应：

- preciosArtPK: {
                   codLista: 1,
                   codArticulo: 11348,
                   cansiVenta: 1,
                   fecVigencia: 1435781252000
},
  siglaVenta: "UN",
  precioVenta: 0,
  margenPct: 100,
  codUsuario: 1,
  vigente: "S",
  nomModulo: "MIGRACION"

JSON 以上是数组响应的一部分，但我将那些“preciosArtPK”包含在使用 gson 的序列化中。我怎么能那样做？我有处理我的序列化的类：

@DatabaseTable(tableName = "preciosart")
public class PreciosArt {

public static final String PRECIOS_COD_LISTA = "_id";
public static final String PRECIOS_COD_ARTICULO = "cod_articulo";
public static final String PRECIOS_CANSI_VENTA = "cansi_venta";
public static final String PRECIOS_FEC_VIGENCIA = "fec_vigencia";
public static final String PRECIOS_SIGLA_VENTA = "sigla_venta";
public static final String PRECIOS_PRECIO_VENTA = "precio_venta";
public static final String PRECIOS_MARGEN_PCT = "margen_pct";
public static final String PRECIOS_COD_USUARIO = "cod_usuario";
public static final String PRECIOS_VIGENTE = "vigente";
public static final String PRECIOS_NOM_MODULO = "nom_modulo";


@DatabaseField(id = true, unique = true, columnName = PRECIOS_COD_LISTA)    
private Integer codLista;

@DatabaseField(unique = true, columnName = PRECIOS_COD_ARTICULO)
@SerializedName("codArticulo") // probar
private Integer codArticulo;

@DatabaseField(unique = true, columnName = PRECIOS_CANSI_VENTA)
private Integer cansiVenta;

@DatabaseField(unique = true, columnName = PRECIOS_FEC_VIGENCIA)
private Long fecVigencia;

@DatabaseField(columnName = PRECIOS_SIGLA_VENTA)
@SerializedName("siglaVenta")
private String siglaVenta;

@DatabaseField(columnName = PRECIOS_PRECIO_VENTA)
@SerializedName("precioVenta")
private Double precioVenta;

@DatabaseField(columnName = PRECIOS_MARGEN_PCT)
@SerializedName("margenPct")
private Float margenPct;

@DatabaseField(columnName = PRECIOS_COD_USUARIO)
@SerializedName("codUsuario")
private Integer codUsuario;

@DatabaseField(columnName = PRECIOS_VIGENTE)
@SerializedName("vigente")
private String vigente;

@DatabaseField(columnName = PRECIOS_NOM_MODULO)
@SerializedName("nomModulo")
private String nomModulo;

但这并不能填满这些字段（codArticulo、cansiVenta 和 fecVigencia）。我读到要反序列化这些 json 格式，使其成为另一类，所以我做了同样的事情：

@SerializedName("codLista")
private Integer codLista;

@SerializedName("codArticulo")
private Integer codArticulo;

@SerializedName("cansiVenta")
private Integer cansiVenta;

@SerializedName("fecVigencia")
private Long fecVigencia;

问题是：如何用反序列化的 json 填充这些字段？我使用 OMRLite 来完成这项工作，这个类就是为此目的：

public long updatePreciosart(PreciosArt preciosArt){
    long resultUpdate = -1;
    try {
        getHelper().getPreciosartDao().createOrUpdate(preciosArt);
        resultUpdate = 0;
    } catch (SQLException e) {
        e.printStackTrace();
        resultUpdate = -1;
    }
    return resultUpdate;
}

希望您了解问题所在，并希望您能帮助我解决这个问题！再次感谢！