Jug

Jug е изпълнението Python на рамката на MapReduce (сега е стандартна част от <силни> Hadoop ), което позволява на разработчиците да пишат код, който може да работи в различни форми на паралелизация.
Това означава код, който може да работи успоредно на същата машина, или целия изчислителен клъстер (няколко машини).
Jug дава възможност на разработчиците да организира код на по-малки парчета, и изберете къде, как и кога да го стартирате.
Въпреки, че това може да е над върха на малки уеб сайтове и приложения, това поведение може да бъде много полезен в приложения с голямо натоварване на трафика или че работи с големи обеми от данни.
Jug може да работи и съхранение на данни на местно ниво чрез хард-диск, или той може да използва дистанционно съхранение. За втория случай, на Redis се поддържа база данни

<силни> Характеристики :.

• Постоянно съхранение на данни подкрепа
• използва повторно частични резултати
• подкрепа Concurrency
• Local съхранение на данни
• Remote съхранение на данни
• проверка на състоянието Operation

Какво ново в тази версия:

• поправки Python 3 съвместимост
• fsync (директория) в файл бекенд
• Кана куки (все още най-вече без документи, но вече позволява вътрешен код опростяване)

Какво ново във версия 0.9.7:

• Fix използване на numpy подкласове
• Fix преразпределяне URL разбор
• Fix `` shell`` за по-новите версии на IPython
• Правилно падне обратно на не-SQLite `` status``

Какво ново във версия 0.9.6:

• По-бързо декодиране
• Добавена кана-изпълни скрипт
• Добавено опише () функция
• Добавена write_task_out () функция

Какво ново във версия 0.9.1:

• Добавена `` webstatus`` подкоманда
• Добавена bvalue () функция
• Фиксирана бъг в `` shell`` подкоманда (`` value`` не беше в световната пространство от имена)
• Подобряване на идентичност ()
• Фиксирана бъг в използването Tasklets и --aggressive-разтоварна
• Фиксирана бъг с Tasklets и сън, докато / проверка

Какво ново във версия 0.9:

• В присъствието на бариера (), изпълнете отново jugfile , Това прави бариера много по-лесно за използване.
• Добавена set_jugdir до обществена API.
• Добавено CompoundTaskGenerator.
• Поддръжка subclassing на Task.
• Избягвайте създаването на директории в файл гръб, освен ако това е необходимо.
• Добави jug.mapreduce.reduce (които имитират на вградените намали).

Какво ново във версия 0.8.1:

• Fix преразпределяне бекенд за нова версия на клиентския модул
• Faster файл магазин за големи файлове
• Fix `invalidate` с Tasklets
• Инсталирай тестове и да ги бъде изпълнима
• Променени хеш метода за изчисляване. Това е специален случай на numpy масиви
• (за скорост) и е по-разширяема чрез __jug_hash__ кука
• Fix бъг с Tasklet не зависимости се отчита адекватно в
• Fix черупки подкоманда в по-новите версии на ipython
• Добави __FILE__ атрибут за фалшива jugmodule

Какво ново във версия 0.8:

• Tasklets
• Fix грешки в сън, докато и почистване
• Fix грешки с CompoundTask (ти трябва да тичам кана изпълни два пъти преди това).

<силни> Какво ново във версия 0.8-b0:

• Tasklets - Fix грешки в сън, докато и почистване .

Какво ново във версия 0.7.4:

• Fix случай, когато ~ / .jug / configrc прави не съществува.
• Print име на хост, за да заключите файл на file_store.
• Refactored прилагане на възможности.
• задачи Fix разтоварване, които не са се изпълнява.
• Fix MapReduce за празен вход.

Какво ново във версия 0.7.3:.

• Parse ~ / .jug / configrc
• Fix бъг с времето за чакане.
• Специален случай спасяването на numpy масиви.
• Add-изразителен jugdir синтаксис.
• Save dict_store гръб към диск.

Какво ново във версия 0.7.2:.

• Включени липсващите файлове в разпределението

Какво ново във версия 0.7.1:.

• сън, докато подкоманда
• Fix за бариера () и MapReduce взаимодействие.
• подобрение документация.

Какво ново във версия 0.7:

• По-добре `` shell`` команда
• пренаписаха метод за товаро jugfiles
• Задачи имат оригинална функция достъпни като `f`

Какво ново във версия 0.6.9:.

• New проверка команда
• load_all () вътре черупки.

Какво ново във версия 0.5.2:.

• New `shell` команда
• Compression в преразпределяне бекенд.
• Подобрения в скоростта за "невалидно" команда.

Какво ново във версия 0.5.1:

• Redis бекенд
• зависимости речник
• Промяна на командния ред интерфейс (кана команда jugfile ...)

<силни> Изисквания :

• Python 2.6 или по-висока