如何在命名空间之间复制数据存储区实体

Question

我想将一个名称空间中的所有数据（例如www.mysite.com）复制到另一个名称空间，比如nightly.latest.mysite.appspot.com。 最好的方法是什么？

示例命名空间不是随机的：它们是NamespaceFilter为服务应用程序的给定域设置的命名空间。

我希望能够将所有“生产”数据拉入“非生产”命名空间进行测试。

Answer 1

命名空间是Key的一部分。 因此您无法将所有数据从一个名称空间更改或复制到另一个名称空间 据我所知，你所能做的就是从一个命名空间中获取所有对象，并在另一个命名空间中创建具有相同属性的NEW对象。

Answer 2

我正在使用appengine-mapreduce 。 我不会详细介绍它。 您可以阅读该信息的入门指南 。

现在你必须输入要复制的每个类名。 TODO正在计算如何以编程方式遍历所有__Stat_Kind__结果，因此不必单独指定每种类/类。

import java.util.logging.Logger;

import org.apache.hadoop.io.NullWritable;

import com.google.appengine.api.NamespaceManager;
import com.google.appengine.api.datastore.DatastoreService;
import com.google.appengine.api.datastore.DatastoreServiceFactory;
import com.google.appengine.api.datastore.Entity;
import com.google.appengine.api.datastore.Key;
import com.google.appengine.api.datastore.KeyFactory;
import com.google.appengine.tools.mapreduce.AppEngineMapper;

public class DatastoreCopyMapper extends
        AppEngineMapper<Key, Entity, NullWritable, NullWritable> {

    private static final Logger log = Logger
            .getLogger(DatastoreCopyMapper.class.getName());
    private static String destination;

    public DatastoreCopyMapper() {
    }

    @Override
    public void taskSetup(Context context) {
        log.warning("Doing per-task setup");
        destination = context.getConfiguration().get("destination");
        log.warning("destination: " + destination);
    }

    @Override
    public void map(Key key, Entity value, Context context) {

        NamespaceManager.set(destination);
        String name = key.getName();
        long id = key.getId();
        Key destinationKey = null;
        if (name != null) {
            destinationKey = KeyFactory.createKey(key.getKind(), name);
        } else if (id != 0) {
            destinationKey = KeyFactory.createKey(key.getKind(), id);
        }
        Entity destinationEntity = new Entity(destinationKey);
        destinationEntity.setPropertiesFrom(value);
        DatastoreService datastore = DatastoreServiceFactory
                .getDatastoreService();

        datastore.put(destinationEntity);

    }
}

mapreduce.xml

<configurations>
  <configuration name="Copy between namespaces">
    <property>
      <name>mapreduce.map.class</name>
      <value>com.mysite.server.DatastoreCopyMapper</value>
    </property>
    <property>
      <name>mapreduce.inputformat.class</name>
      <value>com.google.appengine.tools.mapreduce.DatastoreInputFormat</value>
    </property>
    <property>
      <name human="Entity Kind to Map Over">mapreduce.mapper.inputformat.datastoreinputformat.entitykind</name>
      <value template="optional">User</value>
    </property>

    <property>
      <name human="Destination Namespace">mapreduce.mapper.inputformat.datastoreinputformat.destination</name>
      <value template="optional">dev.mysite.com</value>
    </property>

  </configuration>
</configurations>

Answer 3

不幸的是，目前没有自动化的方法来做到这一点。

您将不得不遍历所有数据并将其重新保存到新的命名空间。 您可以在多租户文档中阅读有关Java和名称空间的信息。