首页
\
问答
\
Hadoop MapReduce迭代reduce调用的输入值(Hadoop MapReduce iterate over input values of a reduce call)
Hadoop MapReduce迭代reduce调用的输入值(Hadoop MapReduce iterate over input values of a reduce call)
我正在测试一个简单的mapreduce应用程序,但是当我迭代reduce调用的输入值时,我试图理解发生了什么。
这是一段表现奇怪的代码。
public void reduce(Text key, Iterable<E> values, Context context) throws IOException, InterruptedException{ Iterator<E> iterator = values.iterator(); E first = (E)statesIter.next(); while(statesIter.hasNext()){ E state = statesIter.next(); System.out.println(first.toString()); // some other stuff } // some other stuff }
所以没什么奇怪的..除了每个println调用实际打印不同的字符串这一事实。 因此,每次调用
next()
方法时,first
引用的对象都会更改。那为什么这种奇怪的行为?
I'm testing a simple mapreduce application, but I'm getting a little stuck trying to understand what happen when I iterate over input values of a reduce call.
This is the piece of code which behaves strangely..
public void reduce(Text key, Iterable<E> values, Context context) throws IOException, InterruptedException{ Iterator<E> iterator = values.iterator(); E first = (E)statesIter.next(); while(statesIter.hasNext()){ E state = statesIter.next(); System.out.println(first.toString()); // some other stuff } // some other stuff }
so nothing strange.. except the fact that each println invocation actually prints a different string. So, every time I call the
next()
method, the object referenced byfirst
changes.So why this strange behavior?
原文:https://stackoverflow.com/questions/15976981
更新时间:2021-10-08 08:10
最满意答案
有几种方法可以做到:
- 将常用配置设置放在machine.config中,如下所示
- 将常用配置设置放在中心文件中,并链接到每个项目的app.config中,如下所示
- 将配置设置存储在注册表中
相关问答
更多-
没有。 可以做的最好的事情是使用每个文件属性中的“始终复制”的常规“构建操作”将文件复制到“bin”文件夹中。 如果您尝试在脚本或内容文件夹之间共享文件,这没用多少,就像我一样。 No. The best that can be done is to copy files into the "bin" folder using the normal "Build Action" of "Copy Always" in the properties of each file. This isn't much ...
-
这就是我对这个问题的解决方案: namespace DBLibrary { public enum Models { Model1, Model2 } public static class Database { public static string EntitiesConnectionString(Models model) { SqlConnectionStrin ...
-
foreach (ConnectionStringSettings c in System.Configuration.ConfigurationManager.ConnectionStrings) { //use c.Name } foreach (ConnectionStringSettings c in System.Configuration.ConfigurationManager.ConnectionStrings) { //us ...
-
有没有办法在Visual Studio解决方案中使用多个Web项目构建单个WDP,或者使用MSBuild和几个脚本? 由于您有一个为每个项目构建Web部署包的脚本,因此您可以尝试将这些项目部署到本地文件夹,您可以将其视为“中间发布文件夹”。 从那里你可以构建一个zip任务到所有包到一个zip文件,然后发布/复制这个zip文件直接发布。 要完成此操作,可以使用以下代码创建一个.csproj文件:
如何在多个实体数据模型之间共享连接字符串(How to share a connection string between multiple entity data model)[2022-12-02]
首先假设DbContext和model / database。 将生成的EF连接字符串保留在app.config文件中。 正如Arthur所说,它们包含EF元数据的路径(csdl / ssdl / msl)。 它们也在模型设计者的开发过程中使用。 添加一个名为“SharedConnection”的商店连接字符串。 这是唯一需要在生产中修改的连接字符串。 创建一个派生自DbContext的基类,并从该类派生所有上下文。 在基类中明确创建默认EF连接。 然后修改它以使用这样的共享连接字符串: public cl ...如果您使用的是VS2010 RTM Web Publishing,则不会。 但是,如果您使用的是VS2012(或VS2010 + Azure SDK),则只需在项目文件中定义参数文件,声明其他ParametersXMLFiles ,wpp.targets或发布配置文件:这些将与每个项目根目录中的Parameters. ... 指定从多个项目使用的实体框架的连接字符串(Specify Connection string for Entity Framework used from multiple projects)[2024-03-13]
您可以将连接字符串作为第一个参数传递给ObjectContext构造函数。 如果您想要的话,请从您喜欢的任何地方阅读并明确传递。 You can pass a connection string as the first argument to the ObjectContext constructor. Read it from wherever you like and pass it explicitly, if that's what you want.有几种方法可以做到: 将常用配置设置放在machine.config中,如下所示 将常用配置设置放在中心文件中,并链接到每个项目的app.config中,如下所示 将配置设置存储在注册表中 There's a few ways you could do it: put common configuration settings in machine.config as shown here put common configuration settings in a central file and lin ...与此帖相关,有可能: servicebus webjob输出或触发器的不同连接字符串 在您的情况下,您希望绑定到不同的存储帐户,以便您的功能看起来像这样: public static void JobQueue1( [QueueTrigger("queueName1"), StorageAccount("storageAccount1ConnectionString")] string message) { } public static void JobQueue2( [Que ...实体框架,多个edmx共享连接字符串 - 是否可能?(Entity framework, multiple edmx to share connection string - is it possible?)[2022-10-08]
是的,但是您无法使用配置中的EF连接字符串。 您必须在应用程序中手动构建连接字符串。 ObjectContext支持多个重载的构造函数。 其中一个是接受EntityConnection 。 反过来,EntityConnection可以从MetadataWorkspace (从EF元数据文件创建的类)和DbConnection构建。 您可以将自定义工厂方法添加到派生上下文中,该方法将从共享数据库连接字符串构建MetadataWorkspace和DbConnection ,并在EntityConnection传 ...相关文章
更多- Hadoop之MapReduce
- Hadoop:mapreduce程序reduce输出控制
- Hadoop MapReduce程序 不包含Reduce的设置
- 使用Hadoop构建MapReduce应用
- 理解Hadoop的MapReduce
- Hadoop应用:剖解MapReduce
- 使用Hadoop MapReduce 进行排序
- Hadoop - Map/Reduce 通过理解org.apache.hadoop.mapreduce.Job类来学习hadoop的执行逻辑
- Hadoop Map/Reduce内存限制
- Hadoop -- MapReduce过程
最新问答
更多- 您如何使用git diff文件,并将其应用于同一存储库的副本的本地分支?(How do you take a git diff file, and apply it to a local branch that is a copy of the same repository?)
- 将长浮点值剪切为2个小数点并复制到字符数组(Cut Long Float Value to 2 decimal points and copy to Character Array)
- OctoberCMS侧边栏不呈现(OctoberCMS Sidebar not rendering)
- 页面加载后对象是否有资格进行垃圾回收?(Are objects eligible for garbage collection after the page loads?)
- codeigniter中的语言不能按预期工作(language in codeigniter doesn' t work as expected)
- 在计算机拍照在哪里进入
- 使用cin.get()从c ++中的输入流中丢弃不需要的字符(Using cin.get() to discard unwanted characters from the input stream in c++)
- No for循环将在for循环中运行。(No for loop will run inside for loop. Testing for primes)
- 单页应用程序:页面重新加载(Single Page Application: page reload)
- 在循环中选择具有相似模式的列名称(Selecting Column Name With Similar Pattern in a Loop)
- System.StackOverflow错误(System.StackOverflow error)
- KnockoutJS未在嵌套模板上应用beforeRemove和afterAdd(KnockoutJS not applying beforeRemove and afterAdd on nested templates)
- 散列包括方法和/或嵌套属性(Hash include methods and/or nested attributes)
- android - 如何避免使用Samsung RFS文件系统延迟/冻结?(android - how to avoid lag/freezes with Samsung RFS filesystem?)
- TensorFlow:基于索引列表创建新张量(TensorFlow: Create a new tensor based on list of indices)
- 企业安全培训的各项内容
- 错误:RPC失败;(error: RPC failed; curl transfer closed with outstanding read data remaining)
- C#类名中允许哪些字符?(What characters are allowed in C# class name?)
- NumPy:将int64值存储在np.array中并使用dtype float64并将其转换回整数是否安全?(NumPy: Is it safe to store an int64 value in an np.array with dtype float64 and later convert it back to integer?)
- 注销后如何隐藏导航portlet?(How to hide navigation portlet after logout?)
- 将多个行和可变行移动到列(moving multiple and variable rows to columns)
- 提交表单时忽略基础href,而不使用Javascript(ignore base href when submitting form, without using Javascript)
- 对setOnInfoWindowClickListener的意图(Intent on setOnInfoWindowClickListener)
- Angular $资源不会改变方法(Angular $resource doesn't change method)
- 在Angular 5中不是一个函数(is not a function in Angular 5)
- 如何配置Composite C1以将.m和桌面作为同一站点提供服务(How to configure Composite C1 to serve .m and desktop as the same site)
- 不适用:悬停在悬停时:在元素之前[复制](Don't apply :hover when hovering on :before element [duplicate])
- 常见的python rpc和cli接口(Common python rpc and cli interface)
- Mysql DB单个字段匹配多个其他字段(Mysql DB single field matching to multiple other fields)
- 产品页面上的Magento Up出售对齐问题(Magento Up sell alignment issue on the products page)