如何将数组与新创建的List Java比较

Question

我有一个字符串数组，其信息如下：

name          street         streetnumber         City      house     flat
jetsons     jetstreet        12                  london       yes      no
jetsons     jetstreet        10                  washingston  n        y
jetsons     jetstreet        10                  washingston  n        y
jetsons     jetstreet        10                  washingston  yes      no 
ALF         alfStreet         3                  Shanghai      y        y

...等等

现在的工作是创建一个包含唯一数据的新列表，并对其进行分析。

livingDataArray分析数据列表

while(livingDataArray=reader.readLine() != null){
        street = livingDataArray[1];
        streetNumber = livinDataArray[2];
        city = livingDataArray[3;]

    if(analyzedDataList.isEmpty()) {
        createNewEntry in analyzedDataList(); // that line is fine. ;)
    } else {
        int analyzedDataSize = analyzedData.size();
        for (int i = 0; i <= analyzedDataSize; i++){

                  if(analyzedData.get(i)[1] == street && 
                    analyzedData.get(i)[2] == streetNumber &&
                    analyzedData.get(i)[3] == city ) {

                   categorize(); // this line is fine also
                   addToAnalyzedData();
                  break;
                  } else if (!(analyzedData.get(i)[1] == street && 
                    analyzedData.get(i)[2] == streetNumber &&
                    analyzedData.get(i)[3] == city) && (i+1 ==
                    livingData.size())) {

                             categorize();
                             addToAnalyzedData();
                             break;
                    }


             }
        }
}

我的问题是，它足够有效地用于真正的大数据吗？ 像100.000行或更多？ 因为我不是关于if else语句。 有人可以帮我吗？

Answer 1

String比较通过equals而不是== （ 我如何在Java中比较字符串？ ）。 下一步：看起来像普通SELECT DISTINCT * FROM someWhere -SQL中Java声明的Java实现。 那么，为什么不简单地将代码外包给数据库呢？ 如果这不可能，那么Set将最有可能是最有效的集合。 尽管我建议使用SQL来提高性能，并节省本地PC上的资源。 最后一点：在相同数据上循环修改数据，如下所示：

int analyzedDataSize = analyzedData.size();
for (int i = 0; i <= analyzedDataSize; i++){
    ...
        addToAnalyzedData();

非常容易出现错误/异常。 例如，您要在上述循环中检索和修改集合，而无需更新集合的大小。 在此示例中，此行为不会造成任何损害，但您应谨慎处理。