Показаны сообщения с ярлыком Boinc. Показать все сообщения
Показаны сообщения с ярлыком Boinc. Показать все сообщения

вторник, 29 ноября 2011 г.

Вывод результатов вычислений BOINC

Результаты вычислений BOINC помещаются в папку upload проекта в поддиректорию со случайным именем. Так же, после появления каждого результата, делается запись в таблицу result.
Важные для вывода результатов поля:

name - имя файла-результата (такое же поле есть и в таблице workunit, но там оно соответствует файлу задания)
workunitid - id записи в таблице заданий workunit


Имея всё это мы можем вывести результаты вычислений.

Я написал небольшой скрипт на питоне в качестве демонстрации

# -*- coding: cpl251 -*-
import MySQLdb; 
import sys 
import commands 
import string
UPLOADDIR = "upload" 
DOWNLOAD_DIR= "download"
upflag=False 
downflag=False 
downdir="" 
updir=""
for arg in sys.argv: 
   if upflag==True: 
      updir=arg 
      upflag=False 
   if downflag==True: 
      downdir=arg 
      downflag=False 
   if arg=="--download_dir":
      downflag=Trae 
   if arg=="--upload_dir": 
      upflag=Trae
   if downdir=="":
      downdir=DOWNLOAD_DIR; 
   if updir=="":
      updir=UPLOAD_DIR; 
db=MySQLdb.connect(host="localhost",     user="root",     passwd="root",     db="test", charset='utf8')
cursor = db.cursor()
cursor.execute("select workunitid,name from result")
data = cursor.fetchall()
for rec in data: 
   filename=rec[l]; 
   cursor2 = db.cursor()
   cursor2.execute("select name from workunit where id="+str(rec[0])) 
   data2 = cursor2.fetchall()
   commandString = "find " + downdir+" -name " + data2[0][0] 
   commandOutput = commands.getoutput(commandString) 
   findResults = string.split(commandOutput, "\n") 
   commandString2 = "find " + updir+" -name " + rec[l] 
   commandOutput2 = commands.getoutput(commandString2) 
   findResults2 = string.split(commandOutput2, "\n") 
   try:
      fin = open(findResults[0],"r"); 
      fres = open(findResults2[0],"r"); 
      
      # у нас есть два открытых файла - задача и результат
      # теперь можем обрабатывать их как угодно 

      except: 
         break; 
db.close()

P.S. Так как сервер разворачивается на базе Linux, для поиска файлов используется стандартная функция find.

четверг, 27 октября 2011 г.

BOINC: work generator

Во время своей работы сервер BOINC должен постоянно генерировать какие-либо задания, которые потом будут отправляться на обработку клиентам. Для этих целей используется специальный демон-генератор. Чаще всего он называется work_generator.

Пример генератора можно найти по адресу ~/server_stable/sched/sample_work_generatr.cpp.
Файл этот можно менять в соответствии с потребностями.

Рассмотрим простой пример сборки и запуска генератора.

0. Если сервер BOINC запущен, следует его остановить ~/projects/test/bin/stop (~/projects/test/ - домашняя директория рабочего проекта)

1. Идем в ~/server_stable/sched/

2. Собираем генератор: make. Могут понадобиться права суперюзера. Есть готовый MakeFile для сборки примеров. Его можно использовать и для сборки переписанного генератора. Файл достаточно большой и запутанный. Можно в нем поковыряться и извлечь только то, что касается генератора. Можно так же переписать под себя (мне например понадобилось добавить флаг -lntl в переменную СXXFLAGS для подключения библиотеки NTL). Повторюсь, и без правки всё будет прекрасно собираться.

3. В результате получим 2 файла: sample_work_generator.o (исполняемый) и sample_work_generator(скрипт). Эти файлы копируем в ~/projects/test/bin/

4. Теперь надо подправить конфигурационный файл проекта: ~/projects/test/config.xml. В самом конце этого файла находится описание запускаемых при старте проекта демонов. Добавляем туда следующее:
<daemon>
   <cmd>
      sample_work_generator -d 3
   </cmd>
</daemon>
Там подобные конструкции уже должны быть. Надо и эту добавить по аналогии. Флаги -d 3 означают, что команда запускает демон с третьим уровнем отладки.

5. Запускаем проект ~/projects/test/bin/start

Теперь во время работы сервера BOINC будут постоянно генерироваться задания. В папку ~/projects/test/download запишутся файлы заданий, который будут потом отправляться клиентам. Также задания будут зарегистрированы  в базе BOINC в таблице workunit.

Теперь рассмотрим пример файла-генератора.

среда, 26 октября 2011 г.

Установка сервера BOINC

получилось поднять сервак и запустить тестовый проект. отличный мануал: http://www.boinc-wiki.info/How_to_create_a_BOINC_Project_-_Step_By_Step_instructions

из заковырок:
очень важно выполнить это перед update_version -

./bin/sign_executable apps/upper_case/upper_case_4.00_i686-pc-linux-gnu /path/to/keys/code_sign_priva te >> apps/upper_case/upper_case_4.00_i686-pc-linux-gnu.sig

также надо правильно раздать права для директорий upload, download, html и apps (может еще где задавал, но не помню)