HTCondor 有用的资源

原创 2015年11月18日 06:00:49


Getting started: Creating a multiple node Condor pool

 

[1] HTCondor默认使用TCP向condor_collector服务器发送更新请求.  condor_collector 服务器 由 CONDOR_VIEW_HOST设定


UPDATE_COLLECTOR_WITH_TCP


    默认值为True. HTCondor 使用TCP更新 condor_collector.如设置为 False, the HTCondor daemons 将使用 UDP 来更新 condor_collector.


UPDATE_VIEW_COLLECTOR_WITH_TCP


     When set to True, the HTCondor collector will use TCP to forward updates to condor_collector daemons specified by CONDOR_VIEW_HOST, instead of the default UDP. Defaults to False.


TCP_UPDATE_COLLECTORS


当 UPDATE_COLLECTOR_WITH_TCP 或 UPDATE_VIEW_COLLECTOR_WITH_TCP 被设置为 False时,.使用 TCP 更新 一组 condor_collector 服务器



[2]  within the collector log of the form

DaemonCore: PERMISSION DENIED to host <xxx.xxx.xxx.xxx> for command 0 (UPDATE_STARTD_AD)
indicates a permissions problem. The condor_startd daemons do not have write permission to the condor_collector daemon. This could be because you used domain names in your HOSTALLOW_WRITE and/orHOSTDENY_WRITE configuration macros, but the domain name server (DNS) is not properly configured at your site. Without the proper configuration, HTCondor cannot resolve the IP addresses of your machines into fully-qualified domain names (an inverse look up). If this is the problem, then the solution takes one of two forms:
  1. Fix the DNS so that inverse look ups (trying to get the domain name from an IP address) works for your machines. You can either fix the DNS itself, or use the DEFAULT_DOMAIN_NAME setting in your HTCondor configuration file.
  2. Use numeric IP addresses in the HOSTALLOW_WRITE and/or HOSTDENY_WRITE configuration macros instead of domain names. As an example of this, assume your site has a machine such as foo.your.domain.com, and it has two subnets, with IP addresses 129.131.133.10, and 129.131.132.10. If the configuration macro is set as

     HOSTALLOW_WRITE = *.your.domain.com
    

    and this does not work, use

     HOSTALLOW_WRITE = 192.131.133.*, 192.131.132.*
    

Alternatively, this permissions problem may be caused by being too restrictive in the setting of your HOSTALLOW_WRITE and/or HOSTDENY_WRITE configuration macros. If it is, then the solution is to change the macros, for example from

 HOSTALLOW_WRITE = condor.your.domain.com
to
 HOSTALLOW_WRITE = *.your.domain.com
or possibly
 HOSTALLOW_WRITE = condor.your.domain.com, foo.your.domain.com, \
 bar.your.domain.com

Another likely error message within the collector log of the form

DaemonCore: PERMISSION DENIED to host <xxx.xxx.xxx.xxx> for command 5 (QUERY_STARTD_ADS)
indicates a similar problem as above, but read permission is the problem (as opposed to write permission). Use the solutions given above.


 只在安装了特定软件的计算节点上运行计算任务,应如何配置?


  具体方法[4]分两步:
   步骤1:
     在安装了特定软件的计算节点的配置文件添加 参数 
     HAS_MY_SOFTWARE = True
     然后 添加 
      STARTD_ATTRS = HAS_MY_SOFTWARE, $(STARTD_ATTRS) 


   步骤2:
     在计算任务submit文件中添加
      Requirements = (HAS_MY_SOFTWARE =?= True)


参考文献

[1] Using TCP to Send Updates to the condor_collector

[2 ]collector permission problem

[3] https://github.com/htcondor/htcondor

[4 http://research.cs.wisc.edu/htcondor/manual/v7.8/7_2Setting_up.html  


版权声明:版权声明:本人拥有该Blog内全部原创文章的所有权利。欢迎转载,但务必注明原文链接。任何个人、组织、网站、出版社不得在未经本人许可的情况下用于商业目的。

HTCondor 相关资料及提交任务示例

HTCondor 资料High Throughput Computing (HTC) 官网:HTCondor 官网quickstart: quickstart 官网tutorial: tutorial...
  • cugb0451
  • cugb0451
  • 2015年04月21日 14:39
  • 2127

在Windows中安装 HTCondor

创建新 HTCondor-8.5.0 pool 步骤 master节点的co...
  • cocoonyang
  • cocoonyang
  • 2015年11月18日 10:56
  • 1479

# Ubuntu 下HTCondor 8.2.8安装

Ubuntu 下HTCondor 8.2.8安装 声明:安装部分参考[酌希的专栏] http://blog.csdn.net/yuan13091324/article/details/430...
  • cugb0451
  • cugb0451
  • 2015年04月21日 13:16
  • 849

有用资源

Misc Resources: URL 描述 http://www.java...
  • superlmj
  • superlmj
  • 2005年01月07日 20:50
  • 1404

有用的机器学习资源

1 . 课程 :ICS273A  machine learning 地址: http://www.ics.uci.edu/~dramanan/teaching/ics273a_winter08/   ...
  • xiaochaoqu
  • xiaochaoqu
  • 2013年01月10日 16:46
  • 354

有用的资源网址

http://www.zpluz.com/forum.php
  • a1215445590
  • a1215445590
  • 2014年05月05日 10:54
  • 305

有用的学习资源

有用的学习资源
  • tuwen
  • tuwen
  • 2011年03月02日 09:32
  • 589

一些有用的资源

wapforum的UAProf: http://validator.openmobilealliance.org/VALIDATED/测试网站:http://202.96.192.134/3g_mpb...
  • dlmu2001
  • dlmu2001
  • 2007年12月19日 11:24
  • 1463

Servlet 有用的资源

Servlet 有用的资源 本章列出了 Servlet 网站、书籍和文章。 Java Servlet 有用的网站 Sun's Site on Servlets - Sun 的官方...
  • doc_wei
  • doc_wei
  • 2016年10月24日 20:04
  • 234

很有用的资源

关于 C++,系统,界面开发: http://www.cnblogs.com/lzjsky/archive/2010/09/08/1821529.html...
  • fengchuiye
  • fengchuiye
  • 2011年11月02日 15:17
  • 247
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:HTCondor 有用的资源
举报原因:
原因补充:

(最多只允许输入30个字)