运行hadoop程序，hbase卡在htable声明中(running hadoop program with hbase stuck at htable declaration)
我正在实现需要hbase的hadoop程序。 我正在使用Hadoop 2.5.1和HBase 0.20.6（我第一次使用0.94.8但面对问题之后我只是尝试更改为0.20.6，因为我原始源代码的文档告诉我，遗憾的是没有解决问题。）
使用'javac'编译代码并运行jar文件后，作业停留在地图67％（基于输入的百分比变化）。
https://dl.dropboxusercontent.com/u/51053996/Pics/map_stuck.jpg我尝试通过注释代码的一部分来调查问题，并发现HTable启动在某种程度上是行。
https://dl.dropboxusercontent.com/u/51053996/Pics/htable.jpg还有一些线索我不知道它涉及与否：
当我尝试使用'sudo'运行“hadoop jar ...”时的权限问题（但是，我通过发出一些命令来解决这个问题，例如“sudo -u hduser hadoop fs -chown ...和-chmod ...”）
https://dl.dropboxusercontent.com/u/51053996/Pics/hbase_permission.jpg在start-hbase之后运行的'jps'：我需要发出'sudo jps'以便我可以看到H ..进程（如果不是我将只看到hadoops'）并且在运行hadoop之后某些进程如HMaster消失了。
https://dl.dropboxusercontent.com/u/51053996/Pics/jps.jpg任何帮助将非常感激 ：）
I'm implementing hadoop program which requires hbase. I'm using Hadoop 2.5.1 and HBase 0.20.6 (I first used 0.94.8 but after facing the problem I just try changing to 0.20.6 because the document of my original source code tell me, unfortunately that didn't solve the problem.)
After compiling the code using 'javac' and running the jar file, the jobs stuck at map 67% (the % changing based on the inputs).
https://dl.dropboxusercontent.com/u/51053996/Pics/map_stuck.jpgI tried investigate the problem by commenting parts of the code and find out that the HTable initiation is somehow the line.
https://dl.dropboxusercontent.com/u/51053996/Pics/htable.jpgThere are still some clues that I have no idea it involve or not:
The permission problem when I tried running "hadoop jar ..." by using 'sudo' (however, I had fixed this by issued some commands like "sudo -u hduser hadoop fs -chown ... and -chmod ...)
https://dl.dropboxusercontent.com/u/51053996/Pics/hbase_permission.jpgThe 'jps' running after start-hbase: I need to issue 'sudo jps' so that I can see the H.. processes (if not I will see only the hadoops') and after running hadoop some processes such as HMaster disappears.
https://dl.dropboxusercontent.com/u/51053996/Pics/jps.jpgAny help would be really appreciated :)
原文：https://stackoverflow.com/questions/28831564
最满意答案
PHP脚本与通过FTP登录的用户不同。
使用另一个php脚本更改文件的permisions或通过SSH以root身份登录。
PHP script is a different user than the one that is logging in through FTP.
Either change the permisions of the file using another php script or log in as root through SSH.
相关问答
更多-
尝试下面它为我工作： CHMOD（THIS_DIR “DEFINE.php”，0777）; 代替 CHMOD（THIS_DIR “DEFINE.php”，777）; Try below its worked for me: chmod(THIS_DIR."DEFINE.php",0777); instead chmod(THIS_DIR."DEFINE.php",777);
-
这个函数只返回string array 。 您可以使用ftp_rawlist函数。 Documnetation 在这里你可以得到TYPE如下： $children = ftp_rawlist($connetion, $directory); foreach ($children as $child) { $chunks = preg_split("/\s+/", $child); $type=($chunks[0]{0} === 'd' ? 'directory' : 'file') ...
-
对于使用PHP副本创建的文件，无法更改FTP的权限(Can not change permissions on FTP for files created with PHP copy)[2022-11-14]
PHP脚本与通过FTP登录的用户不同。 使用另一个php脚本更改文件的permisions或通过SSH以root身份登录。 PHP script is a different user than the one that is logging in through FTP. Either change the permisions of the file using another php script or log in as root through SSH. -
无法删除使用PHP创建的目录或文件（也称为权限地狱）(Cannot delete directory or files created with PHP (a.k.a permissions hell))[2023-01-10]
移动上传的文件后，尝试执行以下操作： @chmod($path ."/" . $_FILES["file"]["name"], 0777); 或者其他的东西。 您可能希望将权限更改为更好的内容。 After you move the uploaded file, try doing: @chmod($path ."/" . $_FILES["file"]["name"], 0777); or something. You might want to change the permissions to s ... -
PHP和权限(PHP & Permissions)[2022-04-02]
是的，php可以更改文件的所有权。 使用chown($file, $user) 。 您可以编写一个简单的递归脚本来使用chown更改每个文件的所有者。 Yeah, php can change ownership of a file. Use chown($file, $user). You could write a simple recursive script to change owner for each file using chown. -
尝试chmod功能。 例如chmod("/somedir/somefile", 0755) Try chmod function. For example chmod("/somedir/somefile", 0755)
-
有没有办法在不使用FTP的情况下更改PHP的文件夹权限？(Is there a way to change folder permissions from PHP without using FTP?)[2024-01-08]
chmod('/home/path/directory/', 0777) http://php.net/manual/en/function.chmod.php chmod('/home/path/directory/', 0777) http://php.net/manual/en/function.chmod.php -
通过在文件或目录所在的目录中使用它，可以设置文件的权限： ftpClient.sendSiteCommand("chmod " + "755" + " example.html"); 注意：为什么没有人知道FTPFile中的setPermission（）如何工作对我来说是一个谜。 因为它似乎是一种更好的方式，而不是使用命令行在apache commons网络库中设置ftpFile的权限！ Setting the permission of a file can be achieved by using t ...
-
FTP上传错误的权限(FTP upload wrong permissions)[2023-12-18]
您的网络服务器无权读取该文件。 通常，ftp服务器有一个名为“umask”的配置值，它是一个定义不授予权限的值（你给chmod的值的二进制反转） 为了更好的安全性，像vsftp这样的大多数ftp服务器都带有默认的umask 055或077 如您所见，您的index.php不可执行。 虽然技术上只是读取 ，但从语义上讲，脚本正由您的Web服务器执行 。 并且web服务器以用户www-data运行 。 要使其工作，请更改以下内容： - Make youri's default group www-data: u ... -
PHP - 使用FTP合并文件(PHP - Merging files with FTP)[2022-12-17]
首先，我认为你不需要创建tmp文件。 您可以使用手册中定义的“附加模式”（ a ）或使用带有FILE_APPEND标志的file_put_contents附加到目标文件。 file_put_contents确实将文件名作为参数而不是文件句柄，因此它基本上为你做了fopen ，这意味着如果你经常写，它会频繁fopen ，这与使用文件句柄ad fwrite相比不太理想。相关文章
更多- HBase多线程建立HTable问题
- Hadoop Hive与Hbase整合
- Hbase 使用经验
- Hadoop集群间的hbase数据迁移
- Hadoop的Hbase环境搭建
- Hadoop + HBase 集群
- Hadoop之HBase快速入门
- Hadoop HBase入门
- HBase+Hadoop运维的一点经验
- 单独启动Hadoop datanode和hbase regionserver
最新问答
更多- 您如何使用git diff文件，并将其应用于同一存储库的副本的本地分支？(How do you take a git diff file, and apply it to a local branch that is a copy of the same repository?)
- 将长浮点值剪切为2个小数点并复制到字符数组(Cut Long Float Value to 2 decimal points and copy to Character Array)
- OctoberCMS侧边栏不呈现(OctoberCMS Sidebar not rendering)
- 页面加载后对象是否有资格进行垃圾回收？(Are objects eligible for garbage collection after the page loads?)
- codeigniter中的语言不能按预期工作(language in codeigniter doesn' t work as expected)
- 在计算机拍照在哪里进入
- 使用cin.get（）从c ++中的输入流中丢弃不需要的字符(Using cin.get() to discard unwanted characters from the input stream in c++)
- No for循环将在for循环中运行。(No for loop will run inside for loop. Testing for primes)
- 单页应用程序：页面重新加载(Single Page Application: page reload)
- 在循环中选择具有相似模式的列名称(Selecting Column Name With Similar Pattern in a Loop)
- System.StackOverflow错误(System.StackOverflow error)
- KnockoutJS未在嵌套模板上应用beforeRemove和afterAdd(KnockoutJS not applying beforeRemove and afterAdd on nested templates)
- 散列包括方法和/或嵌套属性(Hash include methods and/or nested attributes)
- android - 如何避免使用Samsung RFS文件系统延迟/冻结？(android - how to avoid lag/freezes with Samsung RFS filesystem?)
- TensorFlow：基于索引列表创建新张量(TensorFlow: Create a new tensor based on list of indices)
- 企业安全培训的各项内容
- 错误：RPC失败;(error: RPC failed; curl transfer closed with outstanding read data remaining)
- C＃类名中允许哪些字符？(What characters are allowed in C# class name?)
- NumPy：将int64值存储在np.array中并使用dtype float64并将其转换回整数是否安全？(NumPy: Is it safe to store an int64 value in an np.array with dtype float64 and later convert it back to integer?)
- 注销后如何隐藏导航portlet？(How to hide navigation portlet after logout?)
- 将多个行和可变行移动到列(moving multiple and variable rows to columns)
- 提交表单时忽略基础href，而不使用Javascript(ignore base href when submitting form, without using Javascript)
- 对setOnInfoWindowClickListener的意图(Intent on setOnInfoWindowClickListener)
- Angular $资源不会改变方法(Angular $resource doesn't change method)
- 在Angular 5中不是一个函数(is not a function in Angular 5)
- 如何配置Composite C1以将.m和桌面作为同一站点提供服务(How to configure Composite C1 to serve .m and desktop as the same site)
- 不适用：悬停在悬停时：在元素之前[复制](Don't apply :hover when hovering on :before element [duplicate])
- 常见的python rpc和cli接口(Common python rpc and cli interface)
- Mysql DB单个字段匹配多个其他字段(Mysql DB single field matching to multiple other fields)
- 产品页面上的Magento Up出售对齐问题(Magento Up sell alignment issue on the products page)