Простые вещи

Крик души, мнение о Zend Framework.

2011-08-24T02:23:00.001-07:00

Меня тошнит от Zend Framework. Вот получили задание, переписать существующий сайт на Zend Framework. Задача не сложная, текущий код "портяночный", неправильный, там нет разделения логики от вида и т.д. Но вот я смотрю его, он простой, легко читаемый, прозрачный. Видно что его писал неглупый, возможно неопытный человек. Но в нем присутствует стройность. Более того, я считаю, что код вполне соответствует задаче.

И вот мы начинаем его переписывать. В своей жизни я создал порядка 5ти сайтов на ZF. Начинал еще с версии 0.6, потом 0.9, далее не помню. Тем не менее считаю что сам фреймворк не знаю абсолютно.

И вот как я представлю в какое умно все это превратится. И ведь даже выразить это невозможно.

Я уважаю Zend Framework как набор компонент, они удобны, хороши, просты, с ними мало проблем. И я удивляюсь, насколько убого создано то, что является MVC Framework'ом на основе этих компонент.

Ребята похоже заигрались в "крутых ооп" программистов. Все такое независимое, компонентное, легко расширяемое, маштабируемое и прочая, прочая, прочая.

Читаю последние обзоры, примеры мануалы. Я в шоке, там все такие крутые перцы. Сидят обсуждают преимущества и недостатки одних паттернов от других. Сервисный слой блять, бизнес логика, толстая модель, тонкий ибать контроллер, датамаппер, тейблгейтвей, иок. Я вот читая форумы обзоры флеймы аж вспотел, зачастую чтобы понять кого то мне приходилось освежать память.

Так сука и хочется спросить. Если вы такие умные хуле вы на пхп пишете?

Казалось бы нытье? Наверное да. Но вот открываю я quickstart zf. А конкретно http://framework.zend.com/manual/en/learning.quickstart.create-model.html вот этот раздел.

Нас в мануале учат что для работы с базой мы будем использовать DataMapper, который нам вернет модели, которые мы assign в темлейте и будем там использовать. Т.е. получается.

1. наследни DbTable
2. Кастомный DataMapper
3. Кастомная модель??? Структура с кучей геттеров.

Что я вижу?

1. Классы не требуются, т.е. это идет на уровне соглашения. Т.е. в мануале нам говорят как писать, но это не требуется, более того применения не будет.
2. Весь такой клевый гибкий ооп зенд, в своем мануале нам показывает как в DataMapper ОБЪЕКТ!! превращают в сырой массив (словарь,хэш) который передается дальше! Вообще в этом так то плохого ничего нет. Но как это делается!!!

 

foreach ($resultSet as $row) {

            $entry = new Application_Model_Guestbook();

            $entry->setId($row->id)

                  ->setEmail($row->email)

                  ->setComment($row->comment)

                  ->setCreated($row->created);

            $entries[] = $entry;

Что меня тут убивает. Вообще row я как понимаю инстанс Zend_Db_Tale_Row у котого есть метод toArray()

Application_Model_GuestBook в конструкторе может принимать массив значений.

т.е. написать $entries[] = new Application_Model_Guestbook( $row->toArray() ) ; Видимо религия не позволяет.

Ну конечно они возможно хотели показать как должны идти преобразования данных в том случае когда хранение данных отличается от доменной модели. Но ведь нет таких объяснений. И пример крайне неудачный. Даже далеко не у самых глупых программистов должен возникнуть простой вопрос. А на хрена?

Насколько пользователей нужно считать идиотами я даже не знаю. Конечно можно возразить что это мануал, а умный напишет как правильно, да блин 60% клинических идиотов потом так и будут писать. Вот в текущей задаче есть таблица на 40 полей. Конечно скорее всего база данных будет изменена, но блин вот напишут мне модельку из 40 геттеров, 40 сеттеров, 40 филдов. А потом внутри датамаппера 40 строчек сета, вот красота то будет. А потом ищи опечатку среди этого бардака.

Ну ладно так то мелочь и можно забыть, таки мануал и я 100% уверен что люди так не пишут. НО!!!

http://habrahabr.ru/blogs/zend_framework/123285/

Финиш. Все. Приплыли. Люди так пишут! Правда они умные, они блять парсят sql. И генерят код чтобы не опечататься.

У них ведь даже базовые классы появились :(

Бли до какой степени все убого, даже углубляться не хочется :( Как я люблю yii framework.

Ну вот получите

 

class I_Love_Zend_Naming_Huh_Model

{

	protected $_properties = array();



	protected $_data = array();



	public function __construct(array $options = null )

	{

		if ($options !== null ) 

			$this->fromArray($options);

	}



	public function __set($name, $value)

	{

		$this->__checkProperty($name);//check if property exists 



		$setterMethod = 'set'.$name;//buid setterName

		

		if (method_exists($this, $setterMethod))// if setter exists

			return $this->$setterMethod($value);//call it 



		$this->_data[$name] = $value;//no setter, remember data

		return $this;

	}



	public function __get($name)

	{

		$getterMethod = 'get'.$name;



		if (method_exists($this, $getterMethod))

			return $this->$getterMethod();



		if (key_exists($name, $this->_data))

			return $this->_data[$name];

		

		return null;

	}



	public function toArray()

	{

		return $this->_data; 

	}



    public function fromArray(array $options)

    {

		foreach ($options as $key => $value)

			$this->$key = $value;



        return $this;

    }



	private function __checkProperty($name)

	{

		if (!in_array($name, $this->_properties))

			throw new Exception('Undefined property ' . $name );

	}



}

Вот сука нате, получите и распишитесь, тупорылая модель домена. Как использовать

 

class Super_Puper_Model extends I_Love_Zend_Naming_Huh_Model

{

   protected $_properties = array('id', 'first_name', 'last_name'); 

}

Все бля работает. А как же ибать сеттеры? Вдруг я потом поменяю логику извлечения айдишника?

Да на те

 

class Super_Puper_Model extends I_Love_Zend_Naming_Huh_Model

{

   protected $_properties = array('id', 'first_name', 'last_name'); 



   public function getId()

   {

       return $this->first_name . $this->last_name;

   } 

}

Все, можете не париться, ваш код как вызывал $entity->id, так и вызывает, а поведение поменялось.

А мне в ответ: "Ага! У тебя волшебные методы, все пиздец приплыли тормоза!" А в мануале их бля нет....

Я еще про могучие плагины не рассказал, а инверсия зависимостей ага, работает. Хрен найдешь что вызывается на самом деле. Код нельзя прочитать! (Ну конечно можно, особенно с опытом) Но вот на yii я написал 3 сайта, и считаю что его уже знаю. А на zf 5 и считаю что его не знаю :(

Я не спорю что он крутой. Но такой некрасиый, такой нестройный. Такой не логичный. В yii framework достаточно понять смысл CComponent класс вроде из (40-100) строк, и дальше уже все понятно. А тут :(.

Да господи, они со своей гибкостью вообще шизданулись. Когда возникает вопрос зачастую находишь перлы, что нужно писать так, но это не работает поэтому вот такой грязный хак, другой пишет так незя писать нужно вот такой хак использовать. :(

yii, облегчаем прототипирование.

2011-03-29T22:25:00.001-07:00

Введение

Я давно работаю с yii framework. И пока это единственный framework в мире php. Из минусов для меня то, что он слишком низкоуровневый, отсутствует много плюшек, которые я с успехом возмещаю разумным использованием Zend компонент. Как набор компонент Zend хорош, чего не скажешь о его framework'е.

Ну так вот, возвращаясь к низкоуровневому yii. Его CRUD хорош, хорош для прототипирования, но плодит кучу файлов. Многие из которых со временем вырезаются и сильно модифицируются. Моим кошмаром была работа на небольшим по объему backend проектом. Где вся работа сводилась к администрированию кучи таблиц с текстовыми и буленовскими полями. При помощи CRUD все было сделано быстро, но большую часть времени я потратил на украшение админки, checkboxes вместо input, фильтры вида true|false вместо 0,1 и тому подобной ерунды. Таблиц было много, view еще больше. Я с нежностью вспоминал django и жалел что проект на PHP.

Прошло время, и вот во время работы над очередным проектом выдалась несколько часов, в результате которых было рождено небольшое расширение над CRUD.

Краткая суть. CRUD очень похожи, и их можно объединить. Второй задачей является способ указания системе типов данных в моделях, для того чтобы CRUD мог на основе этих типов создавать фильтры, приводить к строковому виду автоматически.

Это получилось, пока начало, но проект не закончен. Но уже можно пользоваться.

Что получилось? Получился модуль который позволяет не запуская CRUD получить CRUD странички над любой моделью при условии что она отнаследована от особого ActiveRecord + в ней определен один единственный метод. В качестве небольшого бонуса есть простая возможность слегка менять список полей и их порядок на полученных страницах.

Ниже небольшой туториал как заставить это работать. Текста много, но он расчитан на новичка в yii. Если вы накоротке с yii можете сразу читать с установки модуля.

Инициализация yii проекта

Можно пропустить, если хотите воспользоваться существующим.
Описание как создать yii проект с нуля. Для того чтобы потом использовать модуль.

Создание директории проекта.

Я буду использовать локальный вебсервер, с дефолтными настройками. Проект создам в папке AdminTest внутри моего document root /var/www/

 
   claymore:$ mkdir /var/www/AdminTest
   claymore:$ cd /var/www/AdminTest/
   claymore:$

Папка создана, скачиваем yii-framework

 
   Среда 2011-03-30 11:03   box:/var/www/AdminTest
   claymore:$ wget http://yii.googlecode.com/files/yii-1.1.7.r3135.tar.gz
   --2011-03-30 11:12:58--  http://yii.googlecode.com/files/yii-1.1.7.r3135.tar.gz
   Преобразование адреса yii.googlecode.com... 74.125.87.82
   Устанавливается соединение с yii.googlecode.com|74.125.87.82|:80... соединились.
   Запрос HTTP послан, ожидание ответа... 200 OK
   Длина: 2550331 (2,4M) [application/x-gzip]
   Saving to: «yii-1.1.7.r3135.tar.gz»

   100%[=============================================================================================================================>] 2 550 331    780K/s   в 3,2s     

   2011-03-30 11:13:01 (780 KB/s) - «yii-1.1.7.r3135.tar.gz» saved [2550331/2550331]

Распаковываем


   claymore:$ tar xf yii-1.1.7.r3135.tar.gz

Переименовываем, или делаем символическую ссылку( кому как удобнее), я переименовываю, т.к. работаю в рамках демонстрации

   
   claymore:$ mv yii-1.1.7.r3135 yii

Удаляю скаченный архив


   claymore:$ rm yii-1.1.7.r3135.tar.gz

Проверяем что у нас есть распаковааная папка с yii framework


  claymore:$ ls
  yii

Переходим в папку со скриптами yii framework

 
  claymore:$ cd yii/framework/

Запускаем скрипт создания проекта


   claymore:$ ./yiic  webapp /var/www/AdminTest/
   Create a Web application under '/var/www/AdminTest'? [Yes|No] Yes
      mkdir /var/www/AdminTest/css
      generate css/form.css
      generate css/main.css
      generate css/bg.gif
      generate css/ie.css
      generate css/screen.css
      generate css/print.css
      mkdir /var/www/AdminTest/assets
      mkdir /var/www/AdminTest/images
      generate index.php
      generate index-test.php
      mkdir /var/www/AdminTest/themes
      mkdir /var/www/AdminTest/themes/classic
      mkdir /var/www/AdminTest/themes/classic/views
      mkdir /var/www/AdminTest/themes/classic/views/site
      mkdir /var/www/AdminTest/themes/classic/views/layouts
      generate themes/classic/views/.htaccess
      mkdir /var/www/AdminTest/themes/classic/views/system
      mkdir /var/www/AdminTest/protected
      mkdir /var/www/AdminTest/protected/data
      generate protected/data/schema.sqlite.sql
      generate protected/data/testdrive.db
      generate protected/data/schema.mysql.sql
      generate protected/yiic
      mkdir /var/www/AdminTest/protected/messages
      mkdir /var/www/AdminTest/protected/tests
      mkdir /var/www/AdminTest/protected/tests/unit
      mkdir /var/www/AdminTest/protected/tests/functional
      generate protected/tests/functional/SiteTest.php
      generate protected/tests/phpunit.xml
      generate protected/tests/bootstrap.php
      generate protected/tests/WebTestCase.php
      mkdir /var/www/AdminTest/protected/tests/fixtures
      mkdir /var/www/AdminTest/protected/tests/report
      mkdir /var/www/AdminTest/protected/views
      mkdir /var/www/AdminTest/protected/views/site
      mkdir /var/www/AdminTest/protected/views/site/pages
      generate protected/views/site/pages/about.php
      generate protected/views/site/login.php
      generate protected/views/site/index.php
      generate protected/views/site/contact.php
      generate protected/views/site/error.php
      mkdir /var/www/AdminTest/protected/views/layouts
      generate protected/views/layouts/column1.php
      generate protected/views/layouts/column2.php
      generate protected/views/layouts/main.php
      mkdir /var/www/AdminTest/protected/runtime
      generate protected/.htaccess
      mkdir /var/www/AdminTest/protected/components
      generate protected/components/Controller.php
      generate protected/components/UserIdentity.php
      mkdir /var/www/AdminTest/protected/config
      generate protected/config/main.php
      generate protected/config/test.php
      generate protected/config/console.php
      mkdir /var/www/AdminTest/protected/commands
      mkdir /var/www/AdminTest/protected/commands/shell
      mkdir /var/www/AdminTest/protected/controllers
      generate protected/controllers/SiteController.php
      mkdir /var/www/AdminTest/protected/models
      generate protected/models/ContactForm.php
      generate protected/models/LoginForm.php
      mkdir /var/www/AdminTest/protected/extensions
      generate protected/yiic.bat
      generate protected/yiic.php
      mkdir /var/www/AdminTest/protected/migrations

   Your application has been created successfully under /var/www/AdminTest.
   Среда 2011-03-30 11:03   box:/var/www/AdminTest/yii/framework
   claymore:$

Проверяем

 
   claymore:$ wget http://127.0.0.1/AdminTest/index.php -q -O - | grep Yii
....
   Congratulations! You have successfully created your Yii application.
...

Создаем базу данных admintest. При помощи вашего любимого средства.

 
   mysql> create database admintest;
   Query OK, 1 row affected (0.02 sec)

Прописываем настройки базы данных в protected/config/main.php

Теперь у нас есть болванка для веб сайта на основе шаблона yii.

Установка модуля.

Переходим в директорию расширений. (Если пропустили первый шаг, замените /var/www/AdminTest/ на путь до папки вашего проекта, содержащей protected)

 
   claymore:$ cd /var/www/AdminTest/protected/extensions/

Скачиваем расширение.

 
   claymore:$ hg clone -q https://yii-rextensions.googlecode.com/hg/ YiisyCrudAdmin -r YiisyCrudAdmin

[Опционально] удаляем информацию о репозитории, особенно ваш проект уже под системой контроля версий.

 
   claymore:$ rm -rf YiisyCrudAdmin/.hg
   Среда 2011-03-30 11:03   box:/var/www/AdminTest/protected/extensions

Модуль установлен.

Пример создания crud административной страницы.

Для примера нам понадобится любая модель.

Создаем таблицу в созданной базе данных.

  
  mysql> create table example(id int primary key auto_increment, name char(20), is_good_record tinyint(1) default 0 , long_description text);
  Query OK, 0 rows affected (0.08 sec)

Переходим в папку protected

  
  claymore:$ cd /var/www/AdminTest/protected

Создаем модель.

  
  claymore:$ ./yiic shell config/main.php
  Yii Interactive Tool v1.1 (based on Yii v1.1.7)
  Please type 'help' for help. Type 'exit' to quit.
  >> model Example example
     generate models/Example.php
     generate fixtures/example.php
     generate unit/ExampleTest.php

  The following model classes are successfully generated:
   Example

  If you have a 'db' database connection, you can test these models now with:
   $model=Example::model()->find();
   print_r($model);
  >>

Модифицируем модель.

Цель. Отнаследоваться от расширения CActiveRecord объявленному в YiisyCrudAdmin.RActiveRecord. И реализовать абстрактный метод getFieldsDescription

Открываем /var/www/AdminTest/protected/models/Example.php в любимом редакторе

   
  Yii::import("ext.YiisyCrudAdmin.RActiveRecord"); //Добавляем эту строчку импорта в верх файла.

В модель Example добавляем новый метод

   
Yii::import("ext.YiisyCrudAdmin.RActiveRecord");  
class Example extends RActiveRecord 
{
//...
        // в последней версии данный метод не требуется в модели, может создаваться по желанию в классе ExampleAdmin
        public function getFieldsDescription()
        {
                return array(
                        'is_good_record' => 'RDbBoolean',
                        'long_description' => 'RDbText',
                );
        }
//... 
}

Этот метод предоствляет расширенную информацию о полях модели. На данный момент реализованы пока Bool и Text.

Т.к. метод абстрактный ( чтобы про него не забывали), реализация обязательна, метод может возвращать пустой массив если нет желания заморачиваться.

Создаем в вашем любимом редакторе controllers/ExampleController.php

    
Yii::import('ext.YiisyCrudAdmin.RController');
class ExampleController extends RController 
{
        protected $_modelName = 'Example';
}

Тестируем

Открываем в браузере http://127.0.0.1/AdminTest/index.php?r=example/admin

Получаем типичный yii crud с небольшими улучшениями.

Поля, отмеченные как boolean, отображаются в виде чекбоксов при редактировании. Также в наличии встроенный фильтр для этих полей на странице actionAdmin.

Текстовые поля при редактировании редактируются в textarea. При просмотре в griidview обрезаются. (Пока и в view обрезаются, но это уже решаемый вопрос :) )

Из плюсов такого подхода, все сделано стандартными средствами yii. Т.е. после этапа прототипирования, вы уже можете использовать существующую базу кода, достаточно заглянуть в RController

Гибкость, например в методе getFieldsDescription модели, элеметом массива может быть массив, формирующий CGridColumn, в этом случае все обрабатывается в обычном для yii ключе.

Улучшаем внешний вид

Как поменять порядок полей в actionAdmin ?

Прямо в файле модели создаем класс

    
Yii::import('ext.YiisyCrudAdmin.RModelAdmin');
class ExampleAdmin extends RModelAdmin
{
        public function getAdminFields()
        {
                return array(
                        'name', 'long_description', 'is_good_record', 'id'
                );

        }
}

После этого в actionAdmin наблюдаем поля в указанном порядке

Как исключить поле из отображения в actionAdmin ?

   
Yii::import('ext.YiisyCrudAdmin.RModelAdmin');
class ExampleAdmin extends RModelAdmin
{
        public function getAdminExcludedFields()
        {
                return array(
                        'id',
                );
        }
}

И это все. Оба метода можно комбинировать.

Ну и вот интерфейс RModelAdmin, отвечающий за порядок и отображаемые поля

  
   public function getViewExcludedFields();// список полей для исключения в actionView 

   public function getAdminExcludedFields();//список полей для исключения в actionAdmin

   public function getViewFields();// список полей для отображения в actionView

   public function getSearchFields();//список полей для отображения в расширенной форме поиска actionAdmin

   public function getAdminFields();// список полей для отображения в actionAdmin

   public function getFormFields();// список полей для создания/редактирования.

Почему методы а не массивы? Например для динамической генерации в зависимости от условий.

UPDATED:

В последней версии метод getFieldsDescription перенесен из модели в ModelAdmin класс.

Немного об оптимизации веб-сайтов. часть 1.

2010-08-26T19:09:00.000-07:00

Большую часть работы я трачу на поддержку и развитие уже написанных сайтов. Немалую долю времени при поддержке приходится тратить на оптимизацию. Именное ей и будет посвящен набор статей виде отдельных историй об одном абстрактном программисте.

Этап 1 - становление.

Опыт 1.

Начинающий веб программист получает заказ на небольшой сайт. На удивление сайт завершен за 2 недели до сроков, даже с учетом затребованных изменений. Программист понимает что код его далек от идеала, многие вещи реализованы не оптимально. Принято решение заняться оптимизацией сайта. Сказал - сделал. Время генерации сайта до оптимизации 0.02 секунды, время генерации сайта после оптимизации 0.015 секунды. Т.е. страница генерируется на 25% быстрее. Итак по мнению программиста сайт обслужит на 25% больше пользователей.

Проверка.

Пусть следующий скрипт эмулирует сайт до оптимизации.

 
$echo “<?php usleep(20000);”  > /var/www/site_before.php

А следующий после:

 
$echo “<?php usleep(15000);?>”  > /var/www/site_after.php

Запускаем проверку.

 
$ ab -q -n 1000 -c 150  http://127.0.0.1/site_before.php  | grep "Requests per second"
Requests per second:    64, 3[#/sec] (mean) (усреднено по трем замерам)

 
$ ab -q -n 1000 -c 150  http://127.0.0.1/site_after.php  | grep "Requests per second"
Requests per second:    64 [#/sec] (mean) (усреднено по трем замерам)

Результат.

Прироста в 25% нет. Есть падение производительности в рамках погрешности.

Предположение.

При фиксированных параметрах веб серверва и физических ресурсах сервера есть некое пороговое значение времени выполнения процесса ниже которого оптимизация теряет смысл.

Подтверждение

 
$echo “<?php ”  > /var/www/site_null.php 
$ ab -q -n 1000 -c 150  http://127.0.0.1/site_null.php  | grep "Requests per second"
Requests per second:    67 [#/sec] (mean) (усреднено по трем замерам)

Т.е. даже если убрать весь код из нашего проекта мы получим лишь 4% прирост производительности вебсервера.

Объяснение.

Пороговая производительность веб сервера при выполнении какой либо задачи напрямую связана с типом задачи. В нашем примере скорее всего значительную часть времени было потрачено на запуск интерпретатора, что составляло настолько большую долю в процессе отдачи страницы, что временем выполнения скрипта вообще можно было пренебречь.

Резюме.

При выполнении оптимизации вы должны быть четко уверены в том что она нужна.
Перед оптимизацией кода будьте уверены что проблема именно в нем. Есть много способов оптимизации сайта, которые не затрагивают исходные коды.

Мое мнение.

Вообще вывод тривиален, да, согласен. Но я склонен считать что этой ошибке подвержены все начинающие веб программисты. В целом нет ничего плохого в том, что делал наш абстрактный программист, он изучал возможности языка и это очень полезное качество. Вопрос тут в другом. Нужно правильно расставлять акценты. Не нужно подменять понятия. В своей жизни я видел задержки проектов по срокам, из-за подобной деятельности, при этом человек занявшись "оптимизацией" (на самом деле просто игрался), начинал сам верить что оптимизирует сайт и даже обижался когда ему указывали на срыв сроков. И начинал заговариваться утверждая, что его действия необходимы для поддержки и развития проекта. Начинающий программист должен понимать, что если он занимается оптимизацией, а никаких оснований для этого нет, то он просто изучает язык, приемы, но никак не улучшает конечный продукт.

Смена @author в eclipse|zend docblock

2010-06-22T23:11:00.000-07:00

eclipse постоянно подставлял в phpdoc или скажем в pydoc напротив тэга @author имя текущего пользователя в системе, как я сильно от этого мучался. В итоге я потратил время на поиск решения и даже нашел:

- решение 1.

Запускать со следующими параметрами :

./eclipse -vmargs -Duser.name="User name"

- Решение 2.

Вручную заменив во всех шаблонах переменную ${user} на ваше имя.

Взято отсюда

php type hinting

2010-05-27T20:07:00.000-07:00

Навеяно http://habrahabr.ru/blogs/php/94714/

В статье обсуждаются предлагаемые в будущих реализациях механизмы проверки типов, в комментариях задевается текущая. А я хочу рассказать о том как я боролся с проверкой типов, в том числе и примитивных, в php средствами php.

Идеология. Проверка типов должна быть легко отключаема, или поведение на несоотвестие типов должно легко подменяться.

Набросок использования предполагаемого решения для проверки типов данных на примере Yii framework. (В принципе от yii тут только component, что например в Zend может быть сделано на Registry, если там ничего не появилось нового, или на Toolkit в limb, ну или уж в крайнем случае singleton, глобальные переменные)


class AnyClass 
{
   /**
   * anyFunction description 
   * 
   * @param integer $arg1
   * @param string $arg2
   */ 
   public function anyFunction($arg1, $arg2)
   {
       Yii::app()->typeHintingComponent->assertFunctionArgs($this,'anyFunction'  get_funciton_args());
   //orYii::app()->typeHintingComponent->assertFunctionArgs(__CLASS__,__METHOD__,  get_funciton_args()); 
   }

Ожидаемое поведение : в случае если тип $arg1 не integer или тип $arg2 не string или полученное количество аргументов не совпадает, мы получаем например RuntimeException.

Реализация :

По классу и имени метода получаем Reflection Method

У Reflection Method получаем docsting

Из dostring вытаскиваем типы данных

Проверяем

Делаем что душа пожелает, тут можно использовать либо стратегию (оно же вызывать call_back) , либо наследников с переопределением обработки ошибок, чтобы менять поведение.

В моем примере поведение меняется заданием component в конфиге.

В результате получаем отключаемую проверку типов, и можем управлять поведением.

Основным недостатком мне видится необходимость каждый раз явно указывать объект, метод, передавать полученные аргументы

Мое решение это написать функцию обертку что берет эти данные из debug_backtrace


//docstring
public function func($arg1, $arg2) 
{
   Yii::app()->typeHintingComponent->assertFunctionArgs();
} 

//...
public function assertFunctionArgs()
{

  $backTrace = debug_backtrace();
  if ( ! isset($backTrace[1]['object'], $backTrace[1]['function'], $backtrace[1]['args']))
   throw new RCAssertException(/* Details */);
   
  $obj = $backTrace[1]['object']; 
  $function = $backTrace[1]['function'];
  $args = $backTrace[1]['args'];
                //далее по предыдущему алгоритму

}

Еще один недостаток, на этапе разработки можно получить несоотвествие документации и ождаемых параметров, лично я это к недостаткам не отношу, т.к. позволит поддерживать актуальность документации как минимум.

Ну а самый большой недостаток такой реализации, это все же необходимость в методе постоянно вызывать ....->assertFunctionArgs(), если этого не делать, то и схема получится не работающая, это уже нужно насаждать на уровне review кода.

Зато самое большое преимущество это возможность проверять даже не существующие типы

/**
* @param mixed $var ну и нафига проверка типов если используются такие переменные? :)
* @param string|integer $var2 тоже смешно, но на промежуточном этапе рефакторинга может пригодится
*/

На практике у меня это не прижилось т.к. пытался насадить это вместе с кучей других требований и это не было приоритетным, возможно теперь перейдя на yii framework и реализовав это в виде компоненты у меня получится это сделать со второй попытки. Но тем не менее мне пришлось при рефакторинге одного запутанного кода использовать эту наработку активно, просто в том проекте одни и те же функции/методы использовались для разных целей, и соотвественно передаваемые типы данных были непредсказуемыми.

Забавный php5.3

2010-03-26T02:42:00.000-07:00

В debian testing неожиданно для меня появился 5.3, спустя час после этого "счастья", LAMP заработал как и раньше. Захотелось экспериментов, вот что в итоге получилось, на мой взгляд забавно для php.


<?php

class BaseObject extends stdClass
{
    public function __call($method, $args = array())
    {
        return call_user_func_array($this->$method, $args); //call closure
    }
}

/**
 * Create className instance add getIncrementedAge, getName behaviours
 * 
 * @param string $className
 * @param integer $age
 * @param string $name
 * @return object same type as $className 
 */
function Type() 
{
    
    $props = func_get_args();
    $className = array_shift($props);//classname should be first 
    
    $refFunction = new ReflectionFunction('Type');
    $props = array_combine(// make dictionary from function arg names (from phpdoc) and function arguments
        array_map(//extract variable names from phpdoc @param line
            function ($docString) { //search variable name and return it 
                preg_match('/\$(\w+)/',$docString, $data);
                return $data[1]; 
            },
            array_filter( //make lines array from phpdoc, filtering all except strings with @param and skip string with $className 
                explode("\n", $refFunction->getDocComment()), 
                function ($line) 
                { 
                        return strpos($line, 'param') > 0  && strpos($line, '$className' ) < 1  ; 
                } 
            ) 
        ), 
        $props 
    );
    
    $ob = new $className(); 

    foreach ( $props as $name => $value) 
        $ob->$name = $value; 
        
    $ob->getName = function () use($ob)  
    {
        return $ob->name; 
    };
    
    $ob->getIncrementedAge = function ($inc =1) use($ob)  
    {
        return $ob->age + $inc; 
    };
    
    return $ob;  
}

$cd = Type('BaseObject', 10,'cd');
$stas = Type('BaseObject', 20, 'stas');

var_dump($cd->getName());
var_dump($cd->getIncrementedAge(2));
var_dump($stas->getName());
var_dump($stas->getIncrementedAge(3));

Результат


php test.php 
string(2) "cd"
int(12)
string(4) "stas"
int(23)

Так документировать код нельзя.

2010-03-22T08:41:00.001-07:00

Сижу поздним ночером, хочу спать, нужно чуть изменить функционал модуля. Открываю, вижу

 
/**
  * Returns the data model based on the primary key given in the GET variable.
  * If the data model is not found, an HTTP exception will be raised.
  * @param integer the primary key value. Defaults to null, meaning using the 'id' GET variable
  */
 public function loadUser()
 {
  if($this->_model===null)
  {
   if(Yii::app()->user->id)
    $this->_model=User::model()->findbyPk(Yii::app()->user->id);
   if($this->_model===null)
    $this->redirect(Yii::app()->controller->module->loginUrl);
  }
  return $this->_model;
 }

Ну и как это вообще называется? Я бы убивал таких документаторов.

Где exception?
Где GET?
Где param int ?
Что return ?

Я уже промолчу про шедевральный


Yii::app()->controller->module->loginUrl

В корне поменявший поведение по умолчанию.

P.S.

Понял откуда это взялось, эту документацию и метод yii генерирует в контроллере при использовании crud команды. (За исключением @param int )

Gtk-Message: Failed to load module "globalmenu-gnome"

2009-08-16T21:08:00.000-07:00

Некогда пробовал gnome-globalmenu, не понравилось, убил.

С тех пор ловил при каждом запуске gtk приложения такую бяку:


Gtk-Message: Failed to load module "globalmenu-gnome": libglobalmenu-gnome.so: cannot open shared object file: No such file or directory
и

Решение тут:

http://magnus-k-karlsson.blogspot.com/2009/02/remove-gnome-globalmenu.html

Вкратце в gconf-editor /apps/gnome-settings-daemon/gtk-modules задизейблить ( убрать галочку) globalmenu-gnome

php и циклические ссылки

2009-08-12T22:07:00.000-07:00

После отпуска пришлось оптимизировать небольшое консольное приложение, работающее в рамках нашего проекта, исходное время выполнения было 2.5 часа.

После беглого просмотра кода и сопутствущих классов, время было оптимизировано до минуты. Проблема была в том, что первоначальная версия была написана не очень хорошим программистом, а остальные ленились кардинально переписать приложение. Также для генерации отчета в циклах использовались классы, которые на многие действия совершали запросы к базе, а вызывались эти методы внутри цикла. Использовав упреждающее чтение всех необходимых данных в память и минимальную модификацию классов для использования получанных данных в случае их наличия, приложение стало работать гораздо быстрее (1 минута из которой 40 секунд происходит чтение всех необхомых данных в память, 20 секунд непосредственно обработка и запись данных). Ну а количество запросов сократилось до 3-х вместо 3*количество записей в обрабатываемых таблицах.

В идеале можно было бы обойтись без преобразования данных в коде, выполнив его на уровне базы данных, но от этого пришлось отказаться из за того, что на боевой базе данных, подобного рода запросы иногда вызывали проблемы в репликации данных.

Вторая проблема которую я увидел это то, что это приложение было по сути копипастом из одного часто используемого метода, в итоге переписав и то, и другое, я получил скрипт, который исправно работал, но в 10 раз медленнее минутной версии, но обладал замечательным свойством, что был готов для повторного использования, стал более гибким, и читать его стало проще. Однако возникла следующая проблема, уже на 200.000 записях он стал отжирать 4 гб памяти и операционной системе это очень не нравилось, впрочем как и мне. Почистив код, я убедился что происходит утечка памяти.

Вот код, который вольно воспроизводит сложившуюся ситуацию.

 

class DataSource // в моем случае это был итератор по таблице базы данных 
{
 protected $_counter = 1; 
 public function next()
 {
  return array('xxxxxxxxxxxxxxxxxxxxxxxx' => 'yyyyyyyyyyyyyyyyyyy'); 
 }
}

class UserHelper // род классов, для получения данных связаных с пользователями, но выходящих за рамки этого объекта
{
 protected $_u = null; 
 public function __construct(User $u)
 {
  $this->_user = $u; 
 }
 public function getSomeData()
 {
  return array('x' => 10, 'y' => 20); 
 }

 public function __desctruct()
 {
  $this->_u = null;
 }
}

class User 
{
 protected $_dbRow = array(); 
 protected $_helpers = array(); 
 public function __construct(array $data ) 
 {
  $this->_dbRow = $data; 
 }

 public function getHelper()// получения хелпера, в данном случае ситуация урезана до одного
 {
  if ( isset($this->_helpers['x'] ) ) 
   return $this->_helpers['x']; 
  return $this->_helpers['x'] = new UserHelper($this); // автор посчитал это полезным 
 }

 public function __destruct()
 {
  unset($this->_dbRow); 
  $this->_helpers['x'] = null; 
 }
}

// кусок кода вызвавший проблему. 
$ds = new DataSource(); 
for($i= 1; $i++; $i< 1000000) 
{
 $u = new User($ds->next()); // загружаем пользвоателя напрямую по данным
 $helper = $u->getHelper(); 
 $helperData = $helper->getSomeData();// получаем данные хелпера
 //делаем то что нужно с данными
 unset($helperData); 
        unset($helper); 
 unset($u); // думаем что убили пользователя
}

При запуске этого скрипта и запущенном топе, видим как память отжирается без остановки.

Проблема в циклических ссылках. Не охота это описывать можно почитать ТУТ

После того как я нашел утечку. Код переписан в таком виде


$ds = new DataSource(); // получаем итератор
for($i= 1; $i++; $i< 1000000) 
{
 $u = new User($ds->next()); // загружаем пользвоателя напрямую по данным
 //$helper = $u->getHelper();  вот тут и была проблема. 
        $helper = new UserHelper($u); 
 $helperData = $helper->getSomeData();// получаем данные хелпера
 //делаем то что нужно с данными
        unset($helper); 
 unset($u); // думаем что убили пользователя. 
}

После этого, время выполнения приложения стало чуть больше 20 % от первоначальной минуты, ну а раход памяти стал фиксированным ~300-400 MB

Вывод: Консольные приложения обычно пишутся для больших объемов данных, и то что прощается при выполнении маложивущей веб-страницы, выходит боком при долгой работе приложения.

Неоднозначности PHP

2009-05-03T19:05:00.000-07:00

За три месяца молчания накопились "прелести" PHP с которыми можно и поделиться.
Меньше слов больше консоли.

Для начала кусок докуметации о сравнении массивов


Для массивов $a и $b 
$a == $b   Равно   TRUE в случае, если $a и $b содержат одни и те же элементы


php -a 
php > $a = array(1,2);
php > $b = array(2,1);
php > var_dump($a == $b);
bool(false)

Для меня это оказалось несколько неожиданным изходя из документации, однако следущий код неожиданно вносит ясность.


php > class X {};
php > $x1 = new X();
php > $x2 = new X();
php > $a = array($x1, $x2);
php > $b = array($x2, $x1);
php > var_dump($a == $b);
bool(true)

В принципе все это объяснимо, во втором примере используются ссылки, и объекты (суть элементы) действительно одни и теже, в первом же используются числа и думаю во внутреннем представлении это все таки разные эелементы, но отсуствие концепции в целом все таки настораживает.

Еще замечательный пример с которым я столкнулся в практике.

Во время рефакторинга, значение метода в случае ошибки (false) было изменено на (null) проверку понятное дело я забыл сделать, а по дефолту метод возвращал объект известного типа. В итоге код вида


php > $x = $object->getResult();
php > $x->value = 'smth';
php > $x->callSmth();

Возвращал Fatal error: Call to undefined method stdClass::callSmth() in php ... некоторое время я тупил удивляясь откуда взялся stdClass, (и сразу пошел в неверном направлении, греша на serialize при работе с memcache), однако быстро понял что дело не в этом.

Ниже код который все объясняет, и столкнувшись с этим теперь понятно что виновато преобразование типов. Ну и конечно же я, который не проверил возвращаемое значение.


php > $a = null
php > ;
php > $a->x = 10;
php > var_dump($a);
object(stdClass)#1 (1) {
  ["x"]=>
  int(10)
}

Если провести тесты не с null, а скажем с boolean значением, получем тот же результат, по идее все логично, тогда код со строкой, должен отрабатывать эквивалентно.


php > $b = 'sdf';
php > $b->x = 10;

Warning: Attempt to assign property of non-object in php shell code on line 1

Все страньше и страньше. Ну и на последок забавный код.


php > class null{};#я думал так нельзя
php > class false extends null{};# можно и так 
php > class true extends false { function __toString() { return 'false'; } } ; #это уже понятно
php > $false = 'false';
php > $true = new True();
php > var_dump($$true);#ну это уже стеб. 
string(5) "false"

Велики возможности PHP !!!

Размышения о php, его применении

2009-02-20T08:46:00.000-08:00

Статья о моих метаниях в процессе разработки и правильном использовании PHP.

Для затравки желательно прочитать статью 10 принципов PHP специалистов.

В принципе ничего нового. Теперь что думаю я.

1. PHP медленный язык. И не надо рассказывать о том, что большую часть времени занимает работа с базой, мемкэшем, файлами и т.д.
Даже вызов PHP фукнции достаточно дорогая операция. А уж подключения библиотеки - кошмар.

2. Фреймворки - монструозны, а если это сложить с пунктом один, получаем, что они еще и тормозны по определению.

Исходя из этих требования, а также под угрозами бешеных нагрузок я участвовал в написании проекта, который был минималистичен в плане порождения сущностей. На удобстве и скорости разработки это мало сказалось, т..к была изобретен минимальный фундамент (велосипед), который не давал скатиться в написание портянок. Зато время генерации при небольшой и средней нагрузках было 0.01-0.03 сек. Но т.к. администратор выбрал распределённую фс, это выразилось в подскакивании времени генерации до 0.1 сек.

В ходе этого я выяснил.

3. Проблемы описанные в пп 1,2 неприятны, но решаемы, в основном кэшированием и настройками серверов, или отказом от PHP.

Скажем так, оптимизация веб-сервера (отключение модулей апача, extensions php) дало прирост 10-20%, (смена апача на lighttpd +fcgi) дало прирост еще на 30%. Я бы не смог настолько оптимизировать код по всему проекту.

Затем оказалось что нагрузки миф, политика партии поменялась, и нам нужно внедрять кучу странной логики, во главе встало удобство поддержки проекта, которая в свою очередь требует другого подхода к разработке.

В итоге я ударяюсь (контролируемо) в другую крайность, в правильную разработку. Т.е. играемся с проектированием на всю катушку. Начинаем смотреть в сторону ОРМ уже в качестве необходимости.

Прошло время я наигрался и тем, и с другим. Сразу условлюсь что проект я предлагал делать на java, но руководство выбрало php по понятным всем причинам.

А теперь пример, который просто меня убил.

Задача : написать ладдерную систему для неких игр. Грубо говоря чем с более крутым человеком ты играешь, тем больше очков ты получишь, тем выше будет твой рейтинг.

Итак, есть игрушки, которые потенциально кидают много запросов. Есть рейтинг игроков который нужно пересчитывать по определенным формулам.

Реализация на php:

скрипт сохранения результатов, пишет их в файл. В ночное время, результаты пересчитываются, сбрасывается кэш. При просмотре результатов, страница кэшируется на сутки. Получилось дешево ( в плане ресурсов), недорого. Это решение было написано нормально, но из-за кучи модификаций ее стало трудно поддерживать, причем не по причине кривости кода, а по причине сложной логики вокруг него.

Реализация на python:

Twisted server, который в памяти хранит пользователей, отсортированных по результатам. При новых результатах, пользователь удаляется из отсортированного листа, ему начисляется новый скоринг, и он вставляется в список. Сам сервер по xmlrpc умеет отдавать результаты - веб серверу.
Веб сервер работает на старом движке, вместо запросов к базе - запросы к xmlrpc-server.

Реализация - быстрее чем на php(по времени разработки и отладки), скорость работы - выше, удобство использования - выше.

Самый большой плюс, система работает online!

Из недостатков - новая сложность системы в виде нового сервера.

Конечно, можно было бы написать такой сервер и на PHP, но не думаю чтобы мы добились его нормальной работы за приемлемое для нас время.

Также могу привести еще несколько подобных вещей. В общем мое мнение ниша PHP - это все-таки fron-end, который отображает информацию от кучи разнородных сервисов, где собственно и будет реализована вся логика.

PHPUnit, DBUnit, тестирование или Class PHPUnit_Extensions_Database_TestCase could not be found

2009-02-08T22:57:00.000-08:00

Пытаюсь внедрять тестирование, т.к. перед проектом изначально были поставлены одни жесткие требования, и за время его реализации политика партии поменялась настолько, что важнее становится легкость поддержки и надежность продукта, чем производительность.

Вместе с внедрением тестирования, пытаюсь при необходимости покрывать тестами более старые участки кода. В качестве framework был выбран PHPUnit за интеграцию с Zend Studio + некоторые приятные вещи.

В процессе написания тестов возникла необходимость в инструменте для работы с fixtures + тестирования изменений в базе данных, DBUnit как extension к PHPUnit подошел замечательно.

Далее грустная история о нескольких часах дебага. И об ошибке "Class PHPUnit_Extensions_Database_TestCase could not be found"

1. Изначально был тест XXX_Test


require_once 'PHPUnit/Framework/TestCase.php';
class XXX_Test extends PHPUnit_Framework_TestCase
{
 
 public function testSmth()
 {
  $this->assertTrue(true); 
 }
}

Файл назван xxxTest.php

За некоторое время работы с phpunit я отвык пользоваться формой запуска


$phpunit TestClassName path/to/test/file.php

И пишу просто


$phpunit path/xxxTest.php
PHPUnit 3.3.10 by Sebastian Bergmann.

..

Time: 0 seconds

OK (1 test, 1 assertion)

Т.е. все хорошо, мой класс несколько шире, и мне хочется тестировать его на основе PHPUnit_Extensions_Database_TestCase, для чего пользуюсь туториалом отсюда

В итоге класс становится таким.


require_once 'PHPUnit/Extensions/Database/TestCase.php';
class XXX_Test extends PHPUnit_Extensions_Database_TestCase
{

 protected function getConnection()
 {
  return null;// $this->createDefaultDBConnection($this->_dbObject,'sqlite'); 
 }
 
 protected function getDataSet()
 {
  return '';//$this->createFlatXMLDataSet('path/to/fixtures/dummy.xml');
 }
 
 public function testSmth()
 {
  $this->assertTrue(true);
 }
}

Функции коннекта и загрузки данных, преднамеренно реализованы криво.

Запускаем.


$phpunit path/xxxTest.php

О***ваем


PHPUnit 3.3.10 by Sebastian Bergmann.

Class PHPUnit_Extensions_Database_TestCase could not be found in /var/www/toox.com.lottery/core/classes/db/query/Rapid_Db_Query_IteratorTest.php

Я повяз в дебаге на пару часов, т.к. это был мой первый опыт работы с DBUnit + также приведенный пример сильно упрощен по сравнению с тем файлом, с которым я работал.

В итоге оказалось, что при работе с DBUnit обязательно использовать полную форму запуска phpunit

Т.е. при запуске нужно было указать имя тестируемого класса.


$phpunit XXX_Test path/xxxTest.php

PHPUnit 3.3.10 by Sebastian Bergmann.

E

Time: 0 seconds

There was 1 error:

1) testSmth(XXX_Test)
Argument 1 passed to PHPUnit_Extensions_Database_DefaultTester::__construct() must implement interface PHPUnit_Extensions_Database_DB_IDatabaseConnection, null given, called in /usr/share/php/PHPUnit/Extensions/Database/TestCase.php on line 146 and defined

Т.е. теперь уже посыпались человеческие ошибки, которые говорят что я не реализовал необходимый для работы интерфейс. Ну оно и понятно...

перенос svn репозитория.

2009-02-05T19:29:00.000-08:00

Три раза менял vds. Было жалко свой svn репозиторий, и озадачился вопросом его переноса на другую машину.
Оказалось все просто как всегда.

Сначала скидываем репозиторий в dump file.


#svnadmin dump /home/svn/repo/ > /tmp/mysvn.dump

Т.е. svnadmin dump выплевывает dumpfile-formatted строки в stdout, который перенаправляется в наш файл /tmp/mysvn.dump

На другой машине


#scp login@host:/tmp/mysvn.dump /tmp
#svnadmin create /new/repo/path
#svnadmin load /new/repo/path < /tmp/mysvn.dump

Копируем при помощи scp файл себе локально, затем создаем новый репозиторий при помощи svnadmin create , далее командой svnadmin load, которая как раз читает из stdin dumpfile-formatted строки, переносим сдампленные данные.

Хотя в последнее время все чаще смотрю на mercurial, и даже начинаю использовать, пока нравится, но интересно посмотреть на это когда буду работать не один. В случае hg перенос был бы обычным бранчем, который он умеет делать через ssh (Как я думаю, могу и ошибаться).

svn+ssh на другом порту

2009-01-28T22:11:00.000-08:00

поломали хостинг по моей безалаберности, сижу перенастраиваю.

В работе часто использую svn, т.к. по сути он на 90% single мне хватает svn+ssh протокола (++ в том, что не нужно ничего настраивать).

Перенес sshd порт с дефолтного на другой, svn+ssh://host:port/path не работает. Решение нашел достаточно быстро вот здесь

Ниже копипаст одного из решений.



Существуют два варианта решения. Первый - добавить в конфигурационный файл ~/.subversion/config строчки:
[tunnels]
tunnel_name = /usr/bin/ssh -p port

И в дальнейшем использовать вызов svn co snv+tunnel_name://hostname/path. Например,
[tunnels]
foobar = /usr/bin/ssh -p 8022

Тогда вызов будет выглядеть как:
svn co snv+foobar://hostname/path

Perl как замена sed, или perl однострочные скрипты.

2009-01-26T21:23:00.000-08:00

Был занят, занимался самообразованием, т.к. почувствовал что погряз в одном и том же. Расширяю кругозор, узнаю новое, к чему то стремлюсь, это очень интересно и занимает очень много времени.

Теперь по делу.

Операционная система у меня ubuntu ++ постоянно по работе приходится сидеть в консоли. Очень часто возникает задача, быстро по шаблону поменять что то в файле. Ответ на вскидку = sed. В свое время я читал про него, но понял что при помощи perl могу делать то же самое. Прошло время, sed я забыл совершенно, а вот perl тоже стал забываться, и я постоянно не могу найти пример однострочных скриптов.

Теперь по порядку.

Задача:

Дано.
Есть файл xx.txt в котором лежат числа от 1-го до 5-ти, каждое число, новая строка.


cd@laptop:~/data/tmp$ cat xx.xx
1
2
3
4
5

Нужно:

Хочется заменить все вхождения строки 3 на что то свое, пусть это будет строка "hello"

Решение:


cd@laptop:~/data/tmp$ perl -ig -ne 's/3/hello/;print $_; ' xx.xx
cd@laptop:~/data/tmp$ cat xx.xx
1
2
hello
4
5

Или


cd@laptop:~/data/tmp$ perl -ig -pe 's/3/hello/; ' xx.xx
cd@laptop:~/data/tmp$ cat xx.xx
1
2
hello
4
5
cd@cd-acer:~/data/tmp$ ls *g
9.jpg  xx.xxg

Объяснение.

perl позволяет запускать однострочные скрипты, не создавая файл с кодом скрипта.

Пример:


cd@laptop:~/data/tmp$ perl -e 'print "test\n"'
test
cd@laptop:~/data/tmp$

За это отвечает опция -e после которой идет код для выполнения.

Однострочные скрипты, после кода, могут принимать параметром файл, а также, можно заставить выполнять код указанный -e для каждой строки.

Пример:


cd@laptop:~/data/tmp$ perl -ne "print ;" xx.xx
1
2
hello
4
5

Т.е. в данном случае мы попросили перл, выполнить распечатку строки по умолчанию, а т.к. была указана опция -n то это команда применялась к каждой строке файла xx.xx, т.е. получили cat

Также существует параметр -p, который после выполнения кода распечатывает строку. Т.е. логично что команда вида


perl -ne "dosmth; print $_;" file

будет аналогична


perl -pe "dosmth" file

Ну а теперь завершая. Мы добились того, что можем выполнять любые операции над каждой строкой в файле, и печатать это в stdout, однако первоначальная постановка задачи, звучала как замена строк в файле на лету. Именно для этого и существует опция -i

т.е.


perl -i -pe "dosmth" file

выполнит код dosmth для отдельно взятой строки и заменит ее в указанном файле.

опция -i может принимать необязательный параметр, и тогда, скрипт перед началом работы сделает backup копию файла

Пример.


cd@laptop:~/data/tmp/1$ perl -ibak -ne 'print;' 1.txt 
cd@laptop:~/data/tmp/1$ ls 
1.txt  1.txtbak
cd@laptop:~/data/tmp/1$ cat 1.txt
1
2
3
cdlaptop:~/data/tmp/1$ cat 1.txtbak 
1
2
3
cd@laptop:~/data/tmp/1$

Теперь само решение должно быть понятно, а также понятно почему я привел два варианта.

Upd:

Появилась простая задачка, в одном из конфигов нужно увеличивать на единицу одно из значений, пусть условно это будет номер билда.

Возьмем пример файла конфига



cd:$ cat config 
Key1 Value2
build=projectname.005
one more line

Допустим нам нужно получить такой же конфиг но с build=projectnam.006


perl -i -pe  's/(projectname\.)(\d+)/sprintf("%s%03d", $1, $2+1)/e' config

Пояснения.

-i -pe объяснялось выше.

Что изменилось? В конце регулярного выражения добавился флаг e, который означает что правая часть выражения будет выполняться как код perl и только после выполнения результат подставится для замены.

Можно было бы конечно сделать что то вроде


perl -pe  's/(projectname\.)(\d+)/$1 . ($2+1)/e' config
Key1 Value2
build=projectname.6
one more line

! опция -i была убрана, я хотел чтобы файл не менялся, а результат был в output

Как видим пропадают два ведущих нуля, именно поэтому была использована функция sprintf

Эмоции

2008-11-14T03:11:00.001-08:00

Завал и на работе и дома.

Пока второй день прут эмоции.

twisted - жжот!!!!

PHP, Excetion облегчают обработку форм. Ностальгия блин.

2008-10-28T09:49:00.000-07:00

Теряя время в интернете на поиск интересных блогов связанных или с php или с веб программированием так, чтобы я мог увидеть в этом что то интересное для себя, набрел на блог http://alt-f4.ru. Поковырял статьи, особо сказать ничего не могу, кто-то делиться своим опытом, просто времена когда мне бы его опыт пригодился бы остались в прошлом.

В итоге набрел на статью "Авторизация посетителей на PHP", в которой по шагам, потихонечку написано как кому чего делать чтобы у него было счастье.

Ну а теперь самое интересное, наткнулся на код обработки формы.


if ($_SERVER['REQUEST_METHOD'] == 'POST') {
   $rLogin = trim($_POST['rLogin']);
   $rPass  = trim($_POST['rPass']);
   $rPass2 = trim($_POST['rPass2']);
   $rEmail = trim($_POST['rEmail']);
   if ($rLogin == '') {
      die("Поле 'Логин' не заполнено\n");
   // Логин может состоять из букв, цифр и подчеркивания
   }elseif (!preg_match("/^\w{3,}$/", $rLogin)) {
      die("В поле 'Логин' введены недопустимые символы\n");
   }
   if ($rEmail == '') {
      die("Поле 'E-mail' не заполнено\n");
   // Проверяем e-mail на корректность
   }elseif (!preg_match("/^[a-zA-Z0-9_\.\-]+@([a-zA-Z0-9\-]+\.)+[a-zA-Z]{2,6}$/", $rEmail)) {
      die("Указанный 'E-mail' имеет недопустимый формат\n");
   }
   if ($rPass == '' || $rPass2 == '') {
      die("Поле 'Пароль' не заполнено\n");
   }elseif($rPass !== $rPass2) {
      die("Поля 'Пароль' и 'Повтор пароля' не совпадают\n");
   // Пароль может состоять из букв, цифр и подчеркивания
   }elseif(!preg_match("/^\w{3,}$/", $rPass)) {
      die("В поле 'Пароль' введены недопустимые символы\n");
   }
   // В базе данных у нас будет храниться md5-хеш пароля
   $mdPassword = md5($rPass);
   // А также временная метка (зачем - позже)
   $time = time();
   // Устанавливаем соединение с бд(не забудьте подставить ваши значения сервер-логин-пароль)
   $link = mysql_connect('localhost', $dbuser, $dbpass);
   if (!$link) {
      die("Не могу соединиться с базой данных");
   }else {
      // Выбираем базу данных
      mysql_select_db('authorize', $link);
      // Записываем в базу (не используем addslashes - экранировать нечего)
      mysql_query("INSERT INTO users (login, pass, email, timestamp)
                   VALUES ('$rLogin','$mdPassword','$rEmail',$time)",$link);
      if (mysql_error($link) != "") {
         die("Пользователь с таким логином уже существует, выберите другой\n");
      }
      echo "Юзер добавлен\n";
      mysql_close($link);
   }
}
?>

В общем, про использование прямых запросов сразу молчим, но что наглядно, форма из 4-х полей, а уже 3 вложенных условия, да и вообще логика не простая.

Самое что главное, если заменить способы валидации, то к своему стыду получается что я писал подобный код не так давно. И только натолкнувшись на совсем сумасшедшую логику, прикрутил Exceptions и чудо
1. Объем кода уменьшился в два раза.
2. Количество вложенных условий сократилось до 1-го
3. Ошибки стало проще выводить.

Ну и применительно к данному коду, применя преобразовния не меняющие логику получим что то вроде. .


class DbException extends Exception {};

if ($_SERVER['REQUEST_METHOD'] != 'POST')
{
 try
 {
  foreach ( array('rLogin' => 'Логин' , 'rPass' => 'Пароль' , 'rPass2' => 'Повторный пароль', 'rEmail' => 'E-mail' ) as $val => $fieldName)
  { 
   if ( isset($_POST[$val] ) ) 
       $val = trim($_POST[$val]); //create rLogin, rPass, rPass2, rEmail variables 
   else 
       throw new Exception("Поле $fieldName не заполнено\n");
  }
  
  if (!preg_match("/^\w{3,}$/", $rLogin)) 
      throw new Exception("В поле 'Логин' введены недопустимые символы\n");
      
  if (!preg_match("/^[a-zA-Z0-9_\.\-]+@([a-zA-Z0-9\-]+\.)+[a-zA-Z]{2,6}$/", $rEmail)) 
      throw new Exception("В поле 'Логин' введены недопустимые символы\n");
      
  if($rPass !== $rPass2) 
      throw new Exception("Поля 'Пароль' и 'Повтор пароля' не совпадаютn");
      
  if(!preg_match("/^\w{3,}$/", $rPass)) 
      throw new Exception("В поле 'Пароль' введены недопустимые символы\n");
      
  $mdPassword = md5($rPass);
  // А также временная метка (зачем - позже)
  $time = time();
  // Устанавливаем соединение с бд(не забудьте подставить ваши значения сервер-логин-пароль)
  $link = mysql_connect('localhost', $dbuser, $dbpass);
  if (!$link)
      throw new DbException("Не могу соединиться с базой данных");
  // Выбираем базу данных
  mysql_select_db('authorize', $link);
  // Записываем в базу (не используем addslashes - экранировать нечего)
  mysql_query("INSERT INTO users (login, pass, email, timestamp)  VALUES ('$rLogin','$mdPassword','$rEmail',$time)",$link);// поле timestamp можно сделать чтобы по умолчанию подставлялось базой, такие вещи лучше перекладывать на базу. 
  if (mysql_error($link) != "")
      DbException("Пользователь с таким логином уже существует, выберите другой\n");
  echo "Юзер добавлен\n";
      mysql_close($link);
 }
 catch (DbException $e)
 {
     die("DB ERROR: " . $e->getMEssage()); 
 }
 catch ( Exception $e) 
 {
     die( "Form validation error: ". $e->getMessage()); 
 }
} 
?>

В итоге. 

Кода меньше. 

Читается проще. 

Вывод ошибок в одном месте. 

При необходимости разные виды ошибок ловим в нужных нам местах.

Как я люблю php, или танцы с false

2008-10-27T11:09:00.000-07:00

Еще одна из кривостей моего любимого php. Писать не буду, приведу пример интерактивного шела.
Cюрприз #2


pcd@cd-laptop:~$ php -a
php > error_reporting(E_ALL);// устанавливаем уровень ошибок, 

php > $ar = array(); // создаем массив
php > var_dump($ar[1]); // обращаемся к несуществующему индексу
Notice: Undefined offset:  1 in php shell code on line 1//логично
NULL

php > $null = null;// создаем переменну инициализированную нулом
php > var_dump($null[1]);// обращаемся к нему как к массиву
NULL// ошибки нет, это уже не совсем логично, т.к. 

php > var_dump( (array) $null ) ; // при преобразовании нула в массив
array(0) {
}// получается пустой массив без индекса 1. 
//ну хотя можно как то объяснить, т.к. null это особый тип.  

php > $false = false;// boolean переменная, инициализированная ложью
php > var_dump($false[1]);// обращение как к массиву при этом к несуществующиему индексу
NULL// а как объяснить это????

php > var_dump((array)$false);// смотрим как ложь приводится к массиву. 
array(1) {
  [0]=>
  bool(false)
}// этого я  не ожидал
// но  тогда получается что ... 

php > echo (array) false ? 'true' : 'false';
true // ну а это просто п***ц, сколько человек могло попасть так!

Ну и навскидку надуманный пример, похожий на правду.


 cd@cd-laptop:~$ cat ex1.php 
class ExampleDb
{

 /**
  * This function return list of users as array, 
  * empty array on failure
  */
 public function findAll($testValue = true)
 {
  return (array ) $this->_fetch_all($testValue);  
 }
 protected function _fetch_all($testValue = true ) 
 {
  $goodData = array(
   0 => array(
    'name' => 'vasya',
    'pass' => 'oyamd5withsolt',
   ),
   1 => array(
    'name' => 'vasay',
    'pass' => 'oyamd5withsolt2',
   ),
  );
  try 
  {
   ;//do smth
  }
  catch (Exception $e)
  {
    return false; //strange architector
  }
  
  $retValue = $testValue ? $goodData : false; 
  var_dump($retValue); 
  return $retValue; 

 }
}

$ob = new ExampleDb();
$users = $ob->findAll(false);// error happens !

//strange dev
if ( isset($users[0]) ) 
 echo "You win! Your prize 10000k euros from dev salary!"; 


?>
cd@cd-laptop:~$ php ex1.php 
(bool)false // мы видим что была ошибка 
You win! Your prize 10000k euros from dev salary!cd@cd-laptop:~$  
// но тем не менее кто то выйграл. 
//Ну что теперь 10 лет работаем на еду?

Update старых записей.

2008-10-26T09:31:00.000-07:00

Обновил пост о создании макроса в trac. (Чуть-чуть причесал код, заменив формирование html вместо строк теперь использую genshi.builder.tag

Также настройки доступа к базе, скрипт получает теперь из конфига трака.

Обновил пост об авторизации по ssh без пароля, оказывается некоторые вещи которые я делал руками делаются одной командой :)

PHP, PDO, веселье при наследовании и включенной опции persistent connect

2008-10-24T23:21:00.000-07:00

За что я люблю PHP?

За то что это глобально и надежно. Ну какой еще другой язык может мне в пятницу утром сломать мозг.

Этой статьей открою растянутый список статей в которых опишу подводные камни удобно предоставленные PHP нашей команде.

Cюрприз #1

В проекте есть класс DB, отнаследованный от PDO. Было обнаружено неадекватное поведение объектов. 3 часа ломания мозга дали следующий тестовой код воспроизводящий проблему.

КОму интересно, попробуйте угадать результат


ini_set ( 'display_errors', 'on' );
error_reporting ( E_ALL );

class MyDB extends PDO {
 public $connectionId = 0;
}

class MyFactory {

 protected static $_storage = array ();
 
 static public function get($id) {
  if ( isset ( self::$_storage[$id] ))
   return self::$_storage[$id];
   
  self::$_storage[$id] = new MyDB ( 'mysql:host=127.0.0.1;dbname=toox2;', 'root', '123', array (PDO::ATTR_PERSISTENT => true ) );
  self::$_storage[$id]->connectionId = $id;
  return self::$_storage[$id];
 }
}

$db1 = MyFactory::get( 1 );
$db2 = MyFactory::get( 2 );

var_dump( $db1 );
var_dump( $db2 );

Ну а для тех кто думал ровно как и я что в результате $dbq->connectionId и $db2->connectionId буду разными привожу код


cd@cd-laptop:~/tmp/php-tests$ php test.php 
object(MyDB)#1 (1) {
  ["connectionId"]=>
  int(2)
}
object(MyDB)#2 (1) {
  ["connectionId"]=>
  int(2)
}

Проблема в


array (PDO::ATTR_PERSISTENT => true )

Если его убрать, то поведение становится ожидаемым, но однако, почему persistent connect ломает ооп в пхп :)

А ну и на закуску, хотя из приведенного кода выше это видно

var_dump($db1 === $db2) === false

Кому интересно


cd@cd-laptop:~/tmp/php-tests$ php -v
PHP 5.2.4-2ubuntu5.3 with Suhosin-Patch 0.9.6.2 (cli) (built: Jul 23 2008 06:44:49) 
Copyright (c) 1997-2007 The PHP Group
Zend Engine v2.2.0, Copyright (c) 1998-2007 Zend Technologies

На slackware товарищ воспроизводил проблему также.

memcache namespace php? выход похоже найден

2008-10-22T10:37:00.001-07:00

Наткнулся на.

http://code.google.com/p/memcached-tag/

Проект содержит патч к серверу memcached и патч к php-memcached расширению. В патче добавлен следующий функционал.

Есть таги. (Пространство имен)
Ключ можно привязать к тагу
tag_add tag key

Все ключи относящиеся к одному тагу можно махом грохнуть
tag_del tag

Если у тага не остается ни одного ключа, он убивается автоматически.

То что нужно, пойду собирать и пропихивать чтобы нам его в тестовом режиме начали ставить.
/me очень рад :)

Update Сбт Окт 25 00:49:01
Радость оказалась преждевременной.

1. Скачать, пропатчить, собрать не вызвало проблем хоть и не делал этого ни разу. Единственное пришлость переобозвать папку.
2. Заявленный функционал работает.
3. Проверил жалобы, не нашел, но на сайте проекта висит баг от May 02, 2008 http://code.google.com/p/memcached-tag/issues/detail?id=1 и за полгода до сих пор не поправлен.
4. Баг был мной повторен.
5. Сей код был отдан на растерзание нашему cpp отделу, квалификация товарищей сомнений не вызвает.
Резюме. Посоветовавшись с cpp отделом, решили что чем использовать эту поделку, они нам предоставят свою реализацию.

Жду, думаю несколько месяцев до тестов.

В качестве вариантов находили несколько реализаций на java. По отзывам товарищей все эти реализации медленнее memcached, из за обилия разных финтифлюшек, где namespaces самая мелкая финтифлюшка.

Пример создания trac macros

2008-10-22T10:21:00.001-07:00

Cтавим trac (на примере debian)


sudo apt-get install trac

Подготавливаем папку для тестов


cd@cd-laptop: cd
cd@cd-laptop: mkdir tests
cd@cd-laptop: cd tests
cd@cd-laptop: mkdir tracdir
cd@cd-laptop: trac-admin tracdir initenv
жмем энтер :)
Запускаем через stand-along
cd@cd-laptop: tracd /home/cd/tests/tracdir --port 8888
cd@cd-laptop: firefox http://127.0.0.1:8888/tracdir

Трак установлен, для тестирования нам такого хватит.

останавливаем


cd@cd-laptop: Ctrl+C 
cd@cd-laptop:

Создаем macro Hello


cd plugins
touch Hello.py

Содержимое Hello.py


from trac.core import *
from trac.wiki.macros import WikiMacroBase
from trac.util import escape

__all__ = ['HelloMacro']

class HelloMacro(WikiMacroBase):
    def expand_macro(self,formatter, name, args):
         return "Hello %s" % args or '

Использование. Внутри тикета или wiki напишите


[[Hello(cd)]]

Результат


Hello cd

Т.е. для написания минимального макроса, достаточно отнаследоваться от WikiMacroBase, реализовать один метод, возращающий html.

Пример ставшего для меня полезным макроса.


  1 from trac.core import *
  2 from trac.wiki.macros import WikiMacroBase
  3 from trac.util import escape
  4 from trac.util.html import escape,html,plaintext
  5 from genshi.builder import tag
  6 
  7 
  8 __all__ = ['XxxMacro']
  9 
 10 
 11 class RwebtableMacro(WikiMacroBase):
 12         """
 13         Show table schema
 14         {{{
 15         [[Xxx(tablename)]]
 16         }}}
 17 
 18         """
 19         def expand_macro(self, formatter, name, args):
 20                 # args will be `None` if the macro is called without parenthesis.
 21                 table = args or ''
 22                 if not table :
 23                         return 'no table specified'
 24 
 25                 import MySQLdb
 26                 user = self.env.config.get('cddb', 'user')#требует опции в trac.ini секции [cddb]
 27                 host = self.env.config.get('cddb', 'host')
 28                 passwd = self.env.config.get('cddb', 'passwd')
 29                 dbname = self.env.config.get('cddb', 'dbname')
 30                 db = MySQLdb.connect(user=user, host=host, passwd=passwd, db=dbname)
 31                 cursor = db.cursor()
 32                 sql = "DESCRIBE %s" % table
 33                 cursor.execute(sql)
 34                 table = tag.table(border=1)
 35                 table.append(tag.tr( tag.th('Field'), tag.th('Type') , tag.th('Null') , tag.th('Key') , tag.th('Default'), tag.th('Extra') ) )
 36                 res =  cursor.fetchall()
 37                 for row in res :
 38                         tr = tag.tr()
 39                         for i in row :
 40                                  tr.append(tag.td(str(i)) )
 41                         table.append(tr)
 42                 return str(table)

Например
[[Xxxtable(country)]]

Field	Type	Null	Key	Default	Extra
country_id	int(11)	NO	PRI	None	auto_increment
iso	varchar(3)	YES		None
name	varchar(50)	YES		None

hook pre-commit в svn. Реализация на питоне.

2008-10-21T10:52:00.001-07:00

Задача : при коммите в svn, хочется чего то делать, например закрывать тикет в trac.

Для этого в svn есть механизм хуков. Далее по шагам как я это делал я.

Создание репозитория, начальный checkout


директория для тестов
cd@cd-laptop:~$ mkdir tests
cd@cd-laptop:~$ cd tests
директория для репозитория
cd@cd-laptop:~/tests$ mkdir repo
создание репозитория
cd@cd-laptop:~/tests$ svnadmin create repo
директория для чекаутов
cd@cd-laptop:~/tests$ mkdir checkout-dir
первый чекаут
cd@cd-laptop:~/tests$ svn checkout file:///home/cd/tests/repo/ checkout-dir/
Checked out revision 0.
создаем, добавляем, коммитим файл. 
cd@cd-laptop:~/tests$ touch checkout-dir/x.txt
cd@cd-laptop:~/tests$ svn add checkout-dir/x.txt 
checkout-dir/x.txt
cd@cd-laptop:~/tests$ svn ci checkout-dir/x.txt -m'first commit'
Adding  checkout-dir/x.txt
Transmitting file data .
Committed revision 1.
cd@cd-laptop:~/tests$

Репозиторий создан, для теста сделал один коммит.

Теперь собственно создаем хук.


Заходим в папку репозитоия
cd@cd-laptop:~/tests$ cd repo/
смотрим чего есть. Интересует папка hooks
cd@cd-laptop:~/tests/repo$ ls
conf  dav  db  format  hooks  locks  README.txt
cd@cd-laptop:~/tests/repo$ cd hooks/
Заходим в нее. 
cd@cd-laptop:~/tests/repo/hooks$ ls
post-commit.tmpl  post-revprop-change.tmpl  pre-commit.tmpl  pre-revprop-change.tmpl  start-commit.tmpl
post-lock.tmpl    post-unlock.tmpl          pre-lock.tmpl    pre-unlock.tmpl
Создаем, делаем права на запуск, заполняем
cd@cd-laptop:~/tests/repo/hooks$ touch pre-commit
cd@cd-laptop:~/tests/repo/hooks$ chmod +x pre-commit
cd@cd-laptop:~/tests/repo/hooks$ cat > pre-commit
#!/usr/bin/python

import sys

sys.stderr.write('Test error')
sys.exit(1)

cd@cd-laptop:~/tests/repo/hooks$ cd ../..
cd@cd-laptop:~/tests$ echo '1' >> checkout-dir/x.txt 
cd@cd-laptop:~/tests$ svn ci checkout-dir/x.txt -m'test'
Sending        checkout-dir/x.txt
Transmitting file data .svn: Commit failed (details follow):
svn: 'pre-commit' hook failed with error output:
Test error
cd@cd-laptop:~/tests$

В папке репозитория в подпапке hoosk был создан файл pre-commit и ему поставлены права на запуск.
Теперь когда свн его увидит, будет запускать после получения данных непосредственно перед коммитом. При коде возврата не 0, commit не пройдет. Собственно сам скрипт можно писать на любом скриптовом языке, главное чтобы была шибанг строка.

Подробнее о коде pre-commit


#!/usr/bin/python

import sys

#пишем в STDERR
sys.stderr.write('Test error')
#выходим с кодом возврата 1 
sys.exit(1)

Т.е. сам хук создан, он запускается, не дает нам сделать коммит, теперь хочется уметь работать с информацией, которая приходит перед коммитом. Нас интересуют такие вещи как
автор,
текст комментария,
содержимое файлов и т.д.

Здесь я маленько не разобрался, в основном попробовал методом тыка, поэтому напишу как я понял. Не факт что будет совсем правильно, но пользуясь тем как я это понял, у меня чего то получается делать.

Для получения информации о предстоящем коммите, полезна утилита

svnlook

Формат запуска следующий

svnlook SUBCOMMAND REPOS_PATH [ARGS & OPTIONS ...]

Где subcommand одна из следующего списка


   author
   cat
   changed
   date
   diff
   dirs-changed
   help (?, h)
   history
   info
   lock
   log
   propget (pget, pg)
   proplist (plist, pl)
   tree
   uuid
   youngest

REPOS_PATH путь до репозитория, аргументы и опции могут зависеть от subcommand нас интересуют только две


any subcommand which takes the '--revision' and '--transaction'

--revision понятно, выполняет subcommand по определенной ревизии
--transaction интереснее, выполняет subcommand по транзакции, с этим я не разобрался, но понял так.

Если взглянуть на pre-commit.tpl (файл созданные в репозитории по умолчанию) увидим там следующее


REPOS="$1"
TXN="$2"

# Make sure that the log message contains some text.
SVNLOOK=/usr/bin/svnlook
$SVNLOOK log -t "$TXN" "$REPOS" |  grep "[a-zA-Z0-9]" > /dev/null || exit 1

Где видно что параметр --transaction он же -t используется с переменной TXN, которая является вторым аргументом передаваемым в pre-commit. Т.е. эта штука у нас на руках, и svnlook умеет с ней работать.

Итак при обработке pre-commit у нас нет ревизии (мы ее создаем ) зато есть транзакция. Теперь что мы можем из этого получить.

Пример pre-commit который выводит автора и не дает закоммититься.


#!/usr/bin/python

import sys
import os

#обертка над svnlook для запуска любой команды
def cmd_out(subcommand, transaction, repo) : 
    cmd = '/usr/local/bin/svnlook %s -t "%s" "%s"' % (subcommand, transaction, repo) 
    str  = os.popen(cmd, 'r').read() 
    return str.strip('\n')  

#вызвает нашу оберку, для подкомманды author 
def look_author(transaction, repo) : 
    return  cmd_out('author', transaction, repo ) 

#читаем репозиторий, транзакцию
repos = sys.argv[1]
txn = sys.argv[2]

#получаем автора
author = look_author(txn, repos)

#пишем автора в STDERR
sys.stderr.write('Author :%s:' % author )  
#выходим с ошибкой, запрещая коммит
sys.exit(1)

Единственное нужно указать правильный путь до svnlook

Ну теперь собственно все. Т.е. при помощи svnlook можно получить очень много информации о предстоящем коммите :)

Например получения текста лога для данного коммита.


def look_log (transaction, repo) : 
    return cmd_out('log', transaction, repo)

И так далее. Ну а наконец, скрипт который просматривает лог, ищет в определенном формате номер тикета, и пишет комментарий в трак к тикету, и закрывает тикет по необходимости.


#!/usr/bin/python 

import sys, os, string, re

# return true or false if this passed string is a valid comment

php_devs = ('xx', 'xxx', 'yy', 'yyy', 'zz', 'zzz') #only for this dev's rules allowed



def cmd_out(subcommand, transaction, repo) : 
    cmd = '/usr/local/bin/svnlook %s -t "%s" "%s"' % (subcommand, transaction, repo) 
    str  = os.popen(cmd, 'r').read() 
    return str.strip('\n')  

def look_info(trans, repo) : 
    return cmd_out('tree --full-paths', trans, repo) 

def look_author(transaction, repo) : 
    return  cmd_out('author', transaction, repo ) 

def look_log (transaction, repo) : 
    return cmd_out('log', transaction, repo)

def check_comments(comment ):#return ticket id if find in comment
    p = re.compile('\s*ticket:(\d+)(:close)?\s+(.*)$', re.MULTILINE)
    res = p.match(comment)
    try:
        ticket_id = res.group(1)
    except: 
        ticket_id = None
    return ticket_id

def need_close(comment) : #i know it's copy paste, but i had choice, write into blog, or rewrite it ... 
    p = re.compile('\s*ticket:(\d+)(:(close))?\s+(.*)$', re.MULTILINE) 
    res = p.match(comment)
    try: 
        is_closed = res.group(3)
    except:
        is_closed = ''
    return  is_closed == 'close' 
    

def update_ticket_in_trac(ticket, author, comment, data  ) : 
    import xmlrpclib
    s = xmlrpclib.ServerProxy('http://tracuser:tracpast@domain.com:port/path_to_Trac/login/xmlrpc')#create service
    try: 
        ticketInfo = s.ticket.get(ticket)#try get ticket
        status = ticketInfo[3]['status'] 
        if status == 'closed' : 
            sys.stderr.write("Ticket already closed, need reopen it first !!!") 
            return 1 
    except: #can catch here protocol err, it mean no rights 
        sys.stderr.write("No ticket found in trac for id %s" % ticket ) 
        return 1 
    comment = comment.replace(':close','')
    s.ticket.update(ticket,comment.replace("ticket:%s" % ticket, '%s killed himself with message : \n' % author , data) , data) 
    return 0 


def main(repos, txn):
    comment = look_log(txn, repos) 
    author = look_author(txn,repos)
    if not (author in php_devs)  : 
        return 0 
    ticket = check_comments(comment)
    if ticket == None  :  
        sys.stderr.write("\nticket:num must be at the comment begin where num is ticket id, if not exists create it please!")
 return 1
    data = dict()
    if ( need_close(comment) ) : 
        data['status'] = 'closed'
    return update_ticket_in_truck(ticket, author,comment, data )

if __name__ == '__main__':
    if len(sys.argv) < 3 : 
        sys.stderr.write("Usage: %s REPOS TXN\n" % (sys.argv[0]))
    else:
        sys.exit(main(sys.argv[1], sys.argv[2]))

Php, не все так плохо как кажется на первый взгляд.

2008-10-17T10:12:00.001-07:00

С полгода назад, пришлось реализовать для удобства IArrayAccess. И только после реализации решил замерить насколько оно медленнее массива, и запомнилась мне следующая удивительная цифра. Что то на 10.000 итераций Объект реализовавший IArrayAccess был медленнее на десяток секунд. (На не сильно слабой машине).

Решил сегодня это печальное событие задокументировать с цифрами. Результат приятно удивил.

Исходники
array.php


error_reporting(E_ALL);
$array = array(); 

for ( $k = 1; $k < 10; $k++)
{
 unset($array);
 $array = array(); 
 
 for ($i = 0 ; $i < 100000; $i++)
 {
  $array[$i] = $i + $k;
 }
}
?>

spl-array.php


class SplArrayTest implements ArrayAccess 
{
 protected $_data; 
 
 public function __construct()
 {
  $this->_data = array(); 
 }
 
 public function offsetExists($offset)
 {
  return isset($this->_data[$offset]); 
 }
 
 public function  offsetGet($offset)
 {
  return $this->_data[$offset];
 }
 
 public function offsetSet($offset, $value)
 {
  $this->_data[$offset] = $value; 
 }
 public function offsetUnset($offset) 
 {
  unset($this->_data[$offset]);
 }
 
 public function __destruct()
 {
  unset($this->_data);
 }
}


$array = new SplArrayTest(); 

for ( $k = 1; $k < 10; $k++)
{
 unset($array);
 $array = new SplArrayTest(); 
 
 for ($i = 0 ; $i < 100000; $i++)
 {
  $array[$i] = $i + $k;
 }
 }

?>

spl2-array.php


class SplArrayTest implements ArrayAccess 
{
 public function __construct()
 {
 }
 
 public function offsetExists($offset)
 {
  return isset($this->$offset); 
 }
 
 public function  offsetGet($offset)
 {
  return $this->$offset;
 }
 
 public function offsetSet($offset, $value)
 {
  $this->$offset = $value; 
 }
 public function offsetUnset($offset) 
 {
  $this->$offset;
 }
 
 public function __destruct()
 {
 }
}


$array = new SplArrayTest(); 

for ( $k = 1; $k < 10; $k++)
{
 unset($array);
 $array = new SplArrayTest(); 
 
 for ($i = 0 ; $i < 100000; $i++)
 {
  $array[$i] = $i + $k;
 }
}
?>

PHP 5.2.4-2ubuntu5.3 (2 ядра, системя с запущенными иксам, не сильно загружена)

Запуск через time php array.php
Среднее время выполнения - 1.6 секунды
Среднее время выполнения при включенном xcache - 1.3
На нашем прод сервере + apc = 0.5 секунды

Запуск через time php spl-array.php
Среднее время выполнения - 3.9 секунды
Среднее время выполнения при включенном xcache - 3.72
На нашем прод сервере + apc = 1.2 секунды

Запуск через time php spl2-array.php
Время выполнения 4.7 секунды
Среднее время выполнения при включенном xcache - 4.2

Выводы.

На 1.000.000 элементарных операций разница всего на 2-3 секунды. На моем ноуте.
Разница в полсекунды на прод сервере.

Для примера в zend framework по умолчанию порядка 2.000-4.000 таких и не очень элементарных вызовов.
В простейшей реализации страницы на limb
10.000 и выше. (за счет их любимых тулкитов).

Т.е. получается что для обычной страницы вы потеряете при активном использовании SPL IArrayAccess сотые доли секунды. Чем можно пренебрегать очень смело.

В итоге бояться использовать SPL я перестаю, хотя все равно на душе будет не спокойно.

сервера

2008-10-16T08:03:00.001-07:00

Долгое время не было времени ни на что.

Сначала провозился с переездом хостинга, настройкой веб серверов. Долго писать не охота. Поэтому вкратце.

1. Линух без свапа - говно.
2. FreeBsd на малых ресурсах - рулит.
3. Апач на малых ресурсах неадекватен.
4. lighthttpd - рулит :)

Зато в перерыве устав нажимать ctrl +F для поиска в программе футбола, сваял. http://tv.quicknotes.ru/

django fixtures использование

2008-09-29T12:14:00.001-07:00

Изучаю джанго.

Понадобились fixtures. Полез в новую джанго-книжку, написано много, как использовать. А как их создавать непонятно.
В итоге.

Пусть есть модель page для ее есть админка, лежит в application yyy

Я делал так.

Создал необходимые данные для этой модели через админку.
Перешел в директорию проекта набрал ./manage.py dumpdata --indent=2 yyy > ./data/fixtures/xxx.json
Прописал в settings.py FIXTURE_DIRS = ( PROJECT_ROOT + '/data/fixtures/',)
И уже при установке сначала ./manage syncdb
Затем ./manage.py loaddata xxx

Конвертирование ошибок в exceptions.

2008-09-23T10:16:00.001-07:00

Задача
Преобразовать все ошибки в исключения (exceptions) для более удобной их обработки.
Решение подсмотрено на php.net в комментариях.


class My_Exception  extends Exception {
 public static function errorHandlerCallback($code, $string, $file, $line, $context) 
 {
  $e = new self($string, $code);
  $e->line = $line;
  $e->file = $file;
  $e->context = $context;
  throw $e;
 }

}

set_error_handler(array("My_Exception", "errorHandlerCallback"), E_ALL);

Теперь практически все ошибки будут преобразованны в Exception. Теперь достаточно легко и непринужденно мы можем отлавливать ошибки php в одном месте, например



// bla bla bla
try
{
   $controller->dosmth();
}
catch( Controller_Wrong_Data_Exeption $e) 
{
// do smth
} 
catch ( My_Exception $e)
{
// we know it's php error 
}

Такой метод не ловит фаталы, а очень хочется. Где то встречал решение с использованием особенности ob_start, ob_flush, если найду завтра добавлю.

Php, агрегация, псевдонаследование

2008-09-22T10:15:00.001-07:00

Задача на примере.
Есть класс View. Хочется создать класс Cache_View который будет агрегировать внутри себя объект класса $view, а внешне иметь такой же интерфейс как и класс view.

Понятно что на это многие покрутят пальцем у виска, отправят учить ооп, и скажут что нибудь про наследование. Для остальных продолжу мысль.

Простейшая реализация (наследование не подходит, нужно агрегировать)- агрегировать, и определить кучу методов вида


   public function xxx($param1,$param2)
   {
      return $this->agregatedObject->xxx($param1, $param2); 
   }
?>

Реализация где не придется реализовывать эту кучу методов.


class A
{
  public function f1()
  {
  }
}

class B
{
   protected $_a = null; 
   public function __construct(A $a) 
   {
      $this->_a = $a; 
   } 
   public function  __call($function, $params)
   {
      return call_user_func_array(array(&$this->_a, "A::$function"), $params );
   }
}

//как работает
$a  = A();
$b = B($a);

$a->f1();
$b->f1();// тоже самое что и строчкой выше. Произойдет вызов метода f1 объекта $a
?>

Если кому то еще интересно, ниже пример использования.


class View 
{
  public function render($template)
  {
   //return html
  }
  public function f1()
  {
  }
  //...
  public function f120()
  { 
  } 
}

class Cache_View 
{
   protected $_view = null; 
   protected $_cache = null
   public function setCache($cache) 
   { 
      $this->_cache = $cache; 
   } 
   public function __construct(View $v) 
   {
      $this->_view = $v; 
   } 
   public function  __call($function, $params)
   {
      return call_user_func_array(array(&$this->_view, "View::$function"), $params );
   }

   public function render($template)
   {
    if ( $this->_cache != null && ! $this->_cache->mis($this->makeKey($template))// если объект кэша есть и в нем чего то лежит
      return $this->_cache->get($this->makeKey($template));// то вернем закэшированные данные

    $out = $this->_view->render($template);
    if ( $this->_cache != null) 
      $this->_cache->set($this->makeKey($template), $out); 
    return $out; 
   }

   public function makeKey($str)
   {
      retirm md5($str); 
   }
}

//примеры исползования

$view  = View();
$cache = Cache::create(Cache::File);
$cachedView = Cached_View($view);
$cachedView->setCache($cache): 

$view->test();
$cachedView->test();// тоже самое что и строчкой выше. Вызов метода агрегированного класса
$cachedView->render('splash.php'); // а вот здесь будет предприняты попытка заглянуть в кэш и вернуть закэшированные результаты, если их нет, то произойдет отработка обычного $view->render и результат положится в темплейт
?>

Пример реализации чего то похожего внешне на множественное наследование



class Base()
{
  public function base_function() {}; 
}

class A
{
  public function f1()
  {
  }
}

class B extends Base
{
   protected $_a = null; 
   public function __construct(A $a) 
   {
      $this->_a = $a; 
   } 
   public function  __call($function, $params)
   {
      return call_user_func_array(array(&$this->_a, "A::$function"), $params );// понятно что тут можно проверять наличичие метода поочереди у пула объектов, и вызывать их
   }
}

$a = new A();
$b = new B($a);
$b->base_function(); //ok child Base
$b->f1(); // looks like child A

Простые вещи, php

2008-09-17T09:54:00.001-07:00

При работе с проектом хотелось не слишком много, просто отслеживать время выполнения скриптов, а также количество вызвов скриптов.
Простое решение - в конце каждого скрипта ( у нас правда это один index.php) пишется в файл uri + и время выполнения скрипта.

Однако выяснилось, что из за кусков кода вроде этого


header("Location: bla bla bla"); 
exit();

Некоторые вещи просто не ловятся. А очень хочется понять не в них ли вся проблема :)

Решение оказалось простым. Использовать


register_shutdown_function('callback');

Например в нашем проекте есть класс Rapid в котором лежат жизненно необходимые нам вещи.


class Rapid
{
  //...
  public static function quit()
  {
    //write to log
  }
  //..
}
// тут как раз регистрируем статическую функцию, как функцию по завершению
register_shutdown_function(array('Rapid', 'quit'));

Ньюанс : эта функция вызвается даже после php fatal error!


cd@cd-laptop:~/tmp$ cat 2.php


register_shutdown_function('quit'); 
echo 'start'; 
require_once('none.php'); // у меня нет файла, будет фатал. 
echo 'end'; 
function quit() 
{
    echo 'quit';
}


cd@cd-laptop:~/tmp$ php 2.php 
start
Warning: require_once(none.php): failed to open stream: No such file or directory in /home/cd/tmp/2.php on line 7
Fatal error: require_once(): Failed opening required 'none.php' (include_path='.:/usr/share/php:/usr/share/pear') in /home/cd/tmp/2.php on line 7
quit
cd@cd-laptop:~/tmp$

Распределённые системы управления версиями

2008-07-20T21:08:00.001-07:00

Давным давно читал похвальные отзывы об mercurial, bazaar и иже с ними.
В силу природного любопытства нашел таки время прочитать про них подробнее - понравилось.
Очень порадовала возможность забирать себе изменения с какого то конкретного бранча, причем делается это легко и непринужденно.
Прочитав - забыл. Т.к. основной проект на svn и проблема в том чтобы обучить дизайнеров и flash программистов новой софтине (на svn то с трудом заставили их переходить).
Тут возникает новый проект, ни с чем не связанный, отказываемся от php (устал я от него) в пользу python + django (интересно, удобно) заодно решили и репозиторий сменить.
Из консоли вдвоем поделали тесты (я bazaar, другой сотрудник mercurial) в общем простейшие операции прошли на ура. Все просто. (Для базаар пришлось пару модулей питоновских поставить только)

В чем же жопа? В плагинах к эклипсу. Я давным давно пришел ко мнению что ide должно быть ide а не редактором, и eclipse (полюбился он мне тем, что есть поддержка многих языков) плагины к двум вышеперечисленным клиентам убогие. mercurial плагин отмел сразу, три кнопки и в тех не разобраться. С bazaar ковырялся чуть подольше в надежде на чудо, сам плагин нормальный, в плане локальный commit, diff etc... . Танцы с бубном начались на push, и заявленная поддержка (только sftp) у меня не работала.
Осталось впечатление крайней сырости и недоделанности.

В общем как ни грустно, буду сидеть на svn + через полгодика попробую опять.

P.S. В голове еще крутится идея чтобы испльзовать bzr-svn, но крайне боюсь глюков, что может быть черевато на основном проекте, хотя может через некоторое время попробую, хотя бы из интереса.

debian/ubuntu apt-get NO_PUBKEY

2008-07-15T23:18:00.001-07:00

Все время забываю
Проблема


apt-get update 
W: GPG error: http://mirror.yandex.ru stable Release: Следующие подписи не могут быть проверены, так как недоступен общий ключ: NO_PUBKEY 07DC563D1F41B907

Решение


# gpg --keyserver wwwkeys.eu.pgp.net --recv-keys 07DC563D1F41B907
gpg: requesting key 1F41B907 from hkp server wwwkeys.eu.pgp.net
gpg: /root/.gnupg/trustdb.gpg: trustdb created
gpg: key 1F41B907: public key "Christian Marillat <marillat@debian.org>" imported
gpg: no ultimately trusted keys found
gpg: Total number processed: 1
gpg:               imported: 1
#  gpg --armor --export 1F41B907 | apt-key add -

Все гениальное просто

2008-07-09T09:16:00.001-07:00

Блин. Сколько я мучался с zend debuger + zend studio.
А ларчик открывался просто

Thursday, May 8, 2008
ZSE + XDEBUG
3:07AM PDT · dtaylor7
I think Zend hates xdebug... But the ZSE contains a full PDT (it has xdebug support). So, remove (move) the plugins/com.zend.php.debug*, then start the studion with "ZendStudio -clean"

Hmm, there will be xdebug support in the PHP Debugger select... I tested it, works.

test

2008-07-09T09:15:00.001-07:00

test

Флаги языков в апплете индикатора расскладки gnome.

2008-06-22T22:02:00.001-07:00

Долго мучался без флагов с дефолтным индикатором расскладки.
В итоге нашел решение.
копируем флаги в папоку ~/.icons/flags
обызываем ru.png us.png
открываем gconf-editor
desktop/gnome/peripherals/keyboard/indicator/showFlags

ставиь галочку show country flag
и все.

perl

2008-04-29T04:25:00.001-07:00

Проработав с php забываю какой красивый перл
Скрипт который парсит логи и выводит список проблемных пользователей


 perl -n -e '$out{$1}=1  if  /user (\S+) without confirm/ ;END{ print  keys %out}'

Сроки разработки. Боян но правда.

2008-04-29T04:09:00.001-07:00

Если бы не сталкивался с таким каждый день, может быть так и не ржал.

Краткая памятка о сроках по работе с [неразборчиво].«Сегодня» — завтра.
«Завтра» — напомнить завтра, что уже сегодня (см. «сегодня»).
«В течение недели» — в следующую среду.
«В течение недели, но до выходных, пожалуйста» — в понедельник.
«Через две недели» — месяц.*
«Месяц» — неопределенная, очень большая величина времени.
«Три месяца» — три неопределенные, очень большие величины времени.
«К осени» — когда выпадет снег. Снег выпадает каждый год, поэтому «к осени» является наиболее благоприятным сроком, пропустить который практически невозможно.
«Через год» — не используется, ибо есть «к осени».
* — Популярно заблуждение, что две недели — это 14 дней. Это не так. Две недели — это 14 дней + «в течение недели» (ибо вторая неделя еще не кончилась) + завтра («один день погоды не сделает»). В особых случаях отсчет «двух недель» начинается со следующего понедельника, так выигрывается еще несколько дней.Если повезет, то в результате выходит месяц срока и опоздание всего на один день («завтра»).

It работа

2008-02-12T23:50:00.001-08:00

Включил на работе все протоколы что были в пиджине ( раньше висел тока рабочий jabber)
По интенсивности валящихся мессаг возникает ощущение что на работе никто не работает.

Eclipse pdt ubuntu 7.10 x64

2008-02-10T22:40:00.001-08:00

Срочно понадобился PDT,
скачал с сайта all_in_one
(все время глючит когда ставлю плагинами)
Не работает. Пишет javat terminated error code 13 и ругается на loaders/svg_loader.so

Помимо решения, скачать 64 битный еклипс и установить pdt через менеджер обновлений,
нашел вот что

http://dmartin.org/weblog/eclipse-on-ubuntu-linux-for-amd64

В кратце

Ставим жаву


#sudo apt-get install ia32-sun-java5-bin
в моем случае
sudo apt-get install ia32-sun-java6-bin

Делаем ярлык для запуска куда провисываем путь до джавы.


cd ~/eclipse // перехожу в папку где установлен эклипс
touch eclipse.sh
chmod +x eclipse.sh
vim eclipse.sh


 #!/bin/bash
 PATH=/usr/lib/jvm/ia32-java-6-sun/bin:$PATH
 /home/user/eclipse/eclipse
chmod +x eclipse.sh

squid http proxy минимум

2008-02-07T22:19:00.001-08:00

Через провайдера на работе не было связи до моего домашнего провайдера, а там для меня лежала нужная инфа.
Через хостинг линксом все работает, но не удобно.


 apt-get install squid

vim /etc/squid/squid.conf
нашел 
http_access allow localhost

Поменял на 
acl allowed_hosts src xx.xx.xx.xx/255.255.255.0
http_access allow allowed_hosts

Где xx.xx.xx.xx мой айпи наружу. 
/etc/init.d/squid restart

Firefox + mm proxy swith 

Прописываю proxy myhosting:3128

Все работает

Отрыжка камеди.

2008-01-29T19:16:00.001-08:00

Посмотрел это гавно "Самый лучший фильм" (с) Экслер.
Лучше не скажешь.
Я просто в шоке, как можно ~~нае**ть людей~~ раскрутить фильм.
В общем пендосовская ~~херня~~ комедия, да какая нафик комедия. Улыбнулся три раза, остальное время был в шоке.
Смотрел для галочки, просто в ужасе. Есть подозрение что если бы не харламов, плевался бы раза в 2 меньше.

Этиология и патогенез московских пробок.

2008-01-27T19:56:00.001-08:00

Интересная статья
http://polit.ru/lectures/2008/01/24/probki_print.html
Вещи очень интересные и познавательные. Можно многое извлечь для себя.
Однако по окончании прочтения стало грустно, особенно после фразы.

Принимают решение одни, а знают другие.

Имхо ключевая фраза, особенно по всем вопроса/проектам м которые вызывают удивление.

ssh авторизация через ключи? или логин без пароля на сервер

2008-01-25T01:08:00.001-08:00

Updated at 28 october 2008 04:32
Проблема : надоело вводить пароль на ssh хост(пипец длинный)

Решение.
1. Нужно сгенерить ключ (если еще не сделан)


[user@host ~]$ ssh-keygen -t rsa
Generating public/private rsa key pair.
Место для хранения ключа (я нажал enter)
Enter file in which to save the key (/home/user/.ssh/id_rsa): 
Enter passphrase (empty for no passphrase): 
Enter same passphrase again: 
Your identification has been saved in /home/user/.ssh/id_rsa.
Your public key has been saved in /home/user/.ssh/id_rsa.pub.
The key fingerprint is:
xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx user@host
[user@host ~]$

Ключ сгенерен, теперь нужно положить его на серве


user@host$ ssh-copy-id user2@host2
Now try logging into the machine, with "ssh 'user2@host2'", and check in:

  .ssh/authorized_keys

to make sure we haven't added extra keys that you weren't expecting.

Все, теперь можете логиниться.

Если нет ssh-copy-id

Можно сделать так


Копируем через scp
user@host$ scp ~/.ssh/id_rsa.pub user2@host2:/home/user2/
Коннектимся
ДОбавляем публичный ключ
user@host2$cat ~/id_rsa.pub >> ~/.ssh/authorized_keys2

Текст первоначальной статьи

Проблема : надоело вводить пароль на хост(пипец длинный)
Есть домашний комп, и хост.
Например
user@desktop, user2@server


user@desktop:~$ ssh-keygen -t rsa
Generating public/private rsa key pair.
Enter file in which to save the key (/home/cd/.ssh/id_rsa): 
Enter passphrase (empty for no passphrase): 
Enter same passphrase again: 
// оставил пустыми 
Your identification has been saved in /home/user/.ssh/id_rsa.
Your public key has been saved in /home/user/.ssh/id_rsa.pub.
The key fingerprint is:
xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx:xx user@desktop

user@desktop:~$ cat /home/user/.ssh/id_rsa.pub 
ssh-rsa xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx== user@desktop

Копируем от ssh-rsa до user включительно (красным)

Коннектимся на сервер

vim .ssh/authorized_keys2

Получаем

ssh-rsa ннннннннннннн== another-user
пустая строка
ssh-rsa xxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxxx== user

Режим редактирования, идем в конец файла, я вставил скопированную срочку через пробел

:wq (сохраняем закрываем)

Теперь пускает без всякого пароля

Updated at 25 october 2008 04:32

Блин только щас узнал что все эти танцы с бубном заменяются на одну простую вещь :) Понятно правда что генерацию ключа никто не отменял


$ssh-copy-id login@host

Настройка Subversion в Debian Etch

2008-01-24T22:01:00.001-08:00

понадобился svn репозитарий для своего хостинга (firstvds.ru) система debian etch т.к. хостинг свехдешевый, и места во время создания было мало.

Человек я ленивый и далеко не админ. Читать svn hand book лень.
Благо добрые люди выложили описание step by step
Копипаст и все работает.
Единственное

askeet замените на название своего репозитария. 

localhost (в конце при разметке репозитария на firstvds.ru нужнозаменить на 127.0.0.1) 

репозитарий будет доступен потом по урл http://host/svn/name_of_repository

http://ubunterra.blogspot.com/2007/11/subversion-debian-etch.html

Если нужно чтобы пароль был на все операции закоменнтируете


#<LimitExcept GET PROPFIND OPTIONS REPORT>
  Require valid-user
#</LimitExcept>

Ubuntu gutsy 64b flash player

2008-01-17T21:36:00.001-08:00

Установил себе 64 битную ubuntu gutsy.
Все хорошо, все отлично.
2 проблемы.
1. Skype - находил некоторые решения, но не работающие.
2. Flash player, поставил себе gnash с баннерами справляется. но не больше. Зашел на сайт starcraft2.com не смог посмотреть ролики :(. Расстроился.
В итоге нашел решение
http://www.daryl.mu/2008/01/12/howto-install-flash-9-on-ubuntu-gutsy-gibbon-64-bit/

Привожу для себя вырезку из этого блога.


wget http://fpdownload.macromedia.com/get/flashplayer
/current/install_flash_player_9_linux.tar.gz


tar -xvzf ./install_flash_player_9_linux.tar.gz


mkdir ~/.mozilla/plugins


cp install_flash_player_9_linux/libflashplayer.so ~/.mozilla/firefox/plugins


sudo apt-get  install nspluginwrapper


nspluginwrapper -i ~/.mozilla/plugins/libflashplayer.so

Тут мне выдало


 nspluginwrapper -i ~/.mozilla/plugins/libflashplayer.sonspluginwrapper: /home/cd/.mozilla/plugins/libflashplayer.so is not a valid NPAPI plugin

Оказалось что файл ~/.mozilla/plugins/libflashplayer.so просто не скопировался.
Updated

Иногда падает, флеш не отображается, иногда отэтого помогает рефреш страницы.

Моя новая убунту

2008-01-06T21:05:00.001-08:00

На праздниках для отдохновения души поставил себе ubuntu 7.10 с нуля. До этого была перекуроченная тестовая версия убунты почти годичной давности которая тихо умирала.
Девиз был ни грамма kde :)

Получилось интерсно

Сама система как и водится встала без проблем.
Для включения compiz потребовалась установка проприетарных драйверов (ati radeon x1100)
После них заработал compiz. В отличии от моей предыдущей установки найстройки применяются не сразу, а после рестарта компиза.

Внешний вид настроился очень просто
Внешний вид -> темы (скачал с gnome-look.org blubuntu-murrine) установил
Gdm -> leopard theme (к сожалению скрина под рукой нет, но выглядит отпадно)
Icons -> Vista-inspirate1_0 (kde-look.org) for gnome (по старой привычке)
Прозрачная панель.
Emerald theme aqua-button-look (подходит под wallpaper)
Вместо window manager -> avant-window-manager к нему же поставил плагинами меню, переключатель окон, и быструю панель ( в vim ее использовать не получилось по esc закрывается)

Вначале пробовал gdesklets они начали безбожно глючить, поставил всместо них screenlets for compiz
Календари screenlets берут информацию о событиях из google.calendar.com
Получилось неплохо на мой взгляд.

Gnome-terminal прозрачный внутри, мне удобно.
KDocker для gnome-terminal (одну консоль держу постоянно открытой и сворачиваю ее в трей, при использовании alltray у меня не работает прозрачность)
Alltray для evolution

File manager - mucommander

Тестируем новый блог клиент

2007-11-20T21:03:00.001-08:00

Наткнулся на http://feeds.feedburner.com/~r/linux2/~3/186258877/270, перепробовал все. Т.к. мне не очень хочется сидеть и разбирацо какие настройки куда писать (считаю блог клиент сам все это должен делать) то понравился только ScribeFire - firefox extension, удобно тем что броузер открыт всегда, и если появлецо желание что либо добавить, оставить себе на память, то все под рукой + он сразу скушал настройки аккаунта, на чем предыдущие клиенты гукнулись.

В общем это мой выбор и он думаю облегчит мне жизнь.

Updated
Technorati Tags: blog, client, scribefire

gmail, imap

2007-11-04T19:26:00.000-08:00

Настроил gmail через imap в evolution.

Порадовало.
1. Ярлыки в виде папок.
2. Отметки о прочтении остаюстся, имап таки.
Огорчило.
1. Очень медленно, часты попапы виды "imap.gmail.com" разорвал соединение.
2. Непонятна папка gmail в которой лежит all mails, (бардак) а также все сообщения из google talk.

Тест

2007-11-04T18:27:00.000-08:00

Забавно http://habrahabr.ru/blog/php/29229.html#habracut
updated
ссылко закрыто, смысл такой : мамбо разработчики выложили тест, пройдя который можно к ним устроицо на работу.
Тому кто приведет программиста к ним приз 500 баксов.
Подробнее http://www.corp.mamba.ru/test/promo.phtml

Учиться, учиться и еще раз учиться.
Имхо завалился на битовых операциях, немножко на sql, шеле, svn.

Updated
Уточнил в мане svn annotate, blame

На мамба программиста не тяну :)

updated

Простой скрипт который выводит все результаты до 2518 попытки



 <?php
 for ($i = 1; $i < 2518; $i++)
 {    
     echo '<img border="0" src="http://www.corp.mamba.ru/test/widget.phtml?id='.$i.'" />';
 } 
?>

Т.к. айдишники открытые, то соотвественно можно подобрать себе изображение супер крутого, например : http://www.corp.mamba.ru/test/widget.phtml?id=118

Транзакции в mysql + pdo

2007-11-01T23:13:00.000-07:00

Не работал PDO::rollBack();

Решение.

1. Таблица обязательно innoDb или DBD (мануал mysql)

После этого ничего не изменилось.

2. Перед транзакцией нужно set autocommit = 0; после set autocommit = 1 (mysql manual)
В итоге


<?php
/**
* @var PDO $db
*//


$db->exec('set autocommit=0');
try
{
    if ( false === $db->beginTransaction() )
    throw new Exception('bla bla bla ');
    // do smth
    $db->commit();
}
catch ( Exception $e)
{
    $db->rollBack();
    $logger->error( $e->getMessage ) ;
}
$db->exec('set autocommit=1');
?>

eclipse pdt vs ZendStudio Neon

2007-10-15T22:50:00.000-07:00

Вначале об eclipse pdt.
Пересел на него сразу после релиза с редактора vim.
Недостатки.

Не интуитивные настройки, особенно после zend studio <= 5.5. Или по сравнению с .vimrc

Медленный, особенно перерисовка окон ( со временем сгладилось)

Не смог настроить Database Development

Нет удаленного сайта, sshfs которым я восторгался - не решение, т.к. eclipse сканит все файлы, и все просто тормозит.

Subversion plugin кривой, часть видов выдает exception, не смог сделать проект из репозитария

Очень долго настраивал дебагер (xdebug) к сайту с modrewrite, через 3 дня заработало, больше похоже на танцы с бубном.

Стремный редактор js,css

Хотел поставить aptana плагином, все поломалось.

Понравилось

Project outline ( не работает если проект из репозитория)

Показ ошибок прямо в броузере проекта.

Поддержка дебагера

Бесплатный

А все остальное стандартно вроде.

Поставил ZendStuio Neon (beta)

Блин вот это то, чего я так долго ждал.
По сути тот же pdt, только доведенный до ума, работает по сути из коробки.
Особенно понравилась поддержка PhpUnit + Автоматическое создаение TestSuite на основе всех тестов в проекте.

Из минусов пока видел только поддержку зендовского дебагера, а также проблема при работе с database development перспективой ( неправильная кодировка символов, ломается на части таблиц)

Резюме:
В общем этот редактор это шаг в перед, остальные это ковыряние лопаткой в песочнице, по сравнению с экскаватором. Судя по всему он стоит денег, вопрос только сколько, когда я в последний раз смотрел информации не было.

Проблема с кодировками в mp3 тагах (amarok)

2007-09-25T23:22:00.000-07:00

Известная проблема с тагами, rusxmms я не использую потому что не нравится, слушаю музыку при помощи amarok т.к. нравится его библиотека, возможность организовать свою коллекцию, получить лирику.

Раньше пользовался какой то навороченной софтиной, чтобы переконверитровать таги, причем ей нужен был xmms установленный.

Сегодня нашел http://libc6.blogspot.com/2007/01/id3v1-id3v2-mp3-russian-cyrillic-tags.html

Мотаем вниз читаем про Unicode Rewriter.

Вкратце
качаем отсюда
ставим :

 java -jar  скачанный.jar

Запускаем

 java -jar кудапоставили/bin/UnicodeRewriter.jar

Ставим в поле кодировки cp1251, выбираем кталог (делаем бэкап) запускаем.

Себе, почитать.

2007-09-24T00:59:00.000-07:00

Увидел на хостинге - угарно.
http://www.sitepoint.com/print/php5-standard-library

Eclipse pdt, монтирование серваков.

2007-09-24T00:32:00.000-07:00

C опозданием узнал что зарелизился eclise pdt. Ждал я этого долго, скачал 100 метров all in one (научен горьким опытом установки плагинами ).
Все хорошо, ожидаемо , но фтп/сфтп плагина в комплекте нет.
2 раза я уже искал нормальные плагины под eclipse для удобной работы по sftp, ftp, чтобы было так же удобно как скажем в зенд студии- не нашел,
Хотел было положить в темный чулан этот редактор, и опять взяться за vim, но подумал, это линух или нет? Может можно замонтировать? Поискал в гугле ssh fs .
http://linux-ru.blogspot.com/2007/03/sshfs-ssh_12.html

Ставим как написано.


sudo apt-get install sshfs
modprobe fuse 
sudo usermod -a -G fuse имя_пользователя

Монтируем,


sshfs username@host: ~/work/mnt/hosting1

и работаем через локально подмонтированную директорию на серваке :)
(Лучше отключить кэшировани)
Единственный ньюанс, создаю проекты в ~/workspace/projectname/ а монтирую например в ~/work/mnt/hosting
затем просто симлинк


ls -s ~/work/mnt/hosting1/public_html ~/workspace/projectname/httdocs

Ну и размонтирование


fusermount -u ~/work/mnt/hosting1
или
sudo umount ~/work/mnt/hostring1

себе

2007-09-22T22:29:00.000-07:00

забавно, нужно почитать когда время будет.
http://necromant-2005.livejournal.com/
Обратить внимание на zf time exec. ( у мну такое же мнение)
Подумать о своем фреймворке, тоже наверное нужно компилировать файлы в один.

Пакетная обработка файлов, обратный grep

2007-09-19T19:06:00.000-07:00

Линух знаю плохо, но стараюсь учиться. Поэтому долго и нудно ищу решения повторяющихся проблем.
1. Проблема. : Нужно применить одну команду к списку файлов.
Решение xargs:
Пример :
Данные
ls -la
1.deb
2.deb
Установка всех деб пакетов.
ls *.deb | xargs sudo dpkg -i
Данные
Директория с исходниками, нужно найти файлы где встречается строка "xxxx"
find ./ (найти все файлы )
find ./ | xargs grep "xxxx" (найти все файлы в каждом файле найти строчку "xxxx"
2. Проблема
Встречаются директории и имена файлов разделенных пробелами, xargs считает это разными входыми парамертами,
Например


$:~/tests$ ls
xxx  xx x
$:~/tests$ find ./ | xargs ls
ls: ./xx: No such file or directory
ls: x: No such file or directory
./:
xxx  xx x
./xxx:
cd@cd-laptop:~/tests$

Решение
Решение найдено тут : http://linux.presscom.org/25924.html
Чтобы не забыть пишу для себя.


 Проблема очевидна, пробел в имени совпадает с разделителем аргументов. 
Решение простое - и find  и  xargs умеют создавать и принимать список аргументов, разделеных нуль-байтом.
 $ find ./ -name "t*" -print0 | xargs -0 ls
./test  ./te st

Т.е. для моего примера это будет
$find ./ -print0 | xargs -0 lj

3. Проблема
Нужен инверированный grep (обратный)
Решение
grep -v (долго искал, ман плохо читал )
Например
Поиск строки в исходниках, не показывая svn каталоги
find ./ | grep -v 'svn' | xargs grep "xxxx"
(найти все файлы, исключить строки где есть svn, в каждом файле из полученного списка применить поиск "xxx")

Себе на память

2007-09-18T03:12:00.000-07:00

Вечно забываю синтаксис GRANT в mysql
Вот с примерами.

mysql> GRANT ALL PRIVILEGES ON *.* TO ferst@localhost
IDENTIFIED BY 'some_pass' WITH GRANT OPTION;

mysql> GRANT ALL PRIVILEGES ON *.* TO ferst@"%"
IDENTIFIED BY 'some_pass' WITH GRANT OPTION;

монтирование fat

2007-09-16T07:53:00.000-07:00

В который раз забываю как монтировать фат, периодически всплывает, и тратить лишние 10-15 минут неохота.
Посмотреть разделы
sudo fdisk -l
sudo vim /etc/fstab
добавить
/dev/hda1 /mnt/win vfat iocharset=utf8,codepage=866,rw,umask=000,showexec,quiet 0 0

(где /dev/hda1 раздел который мы получили из вывода fdisk)
где: /mnt/win - точка монтирования(тоесть место куда попадет раздел с виндой после монтирования)
iocharset=utf8 - локаль вашей системы
codepage=866 кодировка windows раздела
umask=000 - позволяет записывать на fat раздел всем юзерам системы.
showexec - нужна чтобы как исполняемые отображались файлы с расширениями com, exe, bat; если её не указать, все файлы будут отображаться как исполняемые.
quiet - Т.к. ф.с. fat не хранит информацию о владельце файла и правах доступа, то при попытке записи такой информации будут выдаваться сообщения о невозможности её записать, что не несёт полезной информации, а только мешает; опция quiet отключает такие сообщения.

Бывают же чудеса.

2007-09-13T23:25:00.000-07:00

У меня адекватно заработал compiz.
Как это было.
При замене ноутбука сразу захотелось поставить себе берил, оказалось что атишный чипсет не особо то лучше сисовского. :( Через три дня я с горем пополам поставил его. Счастье было недолгим, фпс было мало. В общем побаловался, почувствовал себе обиженным и забил. Черзе некоторое время настроил себе компиз, в общем получилось то же самое. Затем ноут был в ремонте, (2 раза по месяцу) и вот решил глянуть что у меня тут. Обновил систему, берил такой же тормозной :( . Уже было совсем обиделся, включил компиз и ахнул. Все летает, как и не было тормозов.
Вот такая вот история... Сижу теперь радуюсь как ребенок.

ctags && vim

2007-09-11T20:50:00.000-07:00

Т.к. я уже четвертый месяц пытаюсь использовать в качестве IDE vim, постоянно наталкиваюсь на некоторые трудности.
Давным давно использовал плагин TList + Project, достаточно удобная связка, но много ручной работы сводят преимущества на нет, особенно при создании нового проекта.
Со временем я нашел замену, TagExplore (File explorer + tag list view в одном флаконе ),
все было хорошо особенно нравилась возможность прямо в окне file exporer открыть закрыть список функций, переменных. , Но после окончательного перехода на 5-й php в коде стало появляться все больше и больше классов, и сейчас уже весь проект на них, а у ctags который используется этим плагином, был большой недостаток - не показывал он методы классов и все. Нашел патч на исходные коды исправляющий эти проблемы, но я люблю пакетные системы и ненавижу собирать софт. К тому же, на удаленных серверах где и стоит вим, не очень то и пособираешь пакеты - к тож мне рута даст?
В очердной раз пошукав в гугле обнаружил что ctags обновился и в новой 5.7 версии появилось

* Added support for interfaces and static/public/protected/private functions [PHP].

Обновился, и все заработало! (правда .deb пакета не нашел, но скачал rpm пакет и сконвертировал db при помощи alien -d ctags-.5.7-i386.rpm

Ниже скрин.

Но не обошлось без ложки дегтя
1. Методы показываются не в классе, а в функциях.
2. Появляются совершенно непонятные методы, (некоретно парсятся phpdoc таги)

Но все равно я доволен.

Проблемы в php?

2007-09-06T22:46:00.000-07:00

Наткнулся на непонятный баг (судя по всему php).
Fedora Core 5,
php 5.1.5.
Опсание
Xdebug выдает
(середина trace, до этого около сотни вызовов)
0.0148 118816 -> func1() /xxxx/template.php:16
0.0148 118816 -> func2() /xxx/template.php:16
0.2626 118672 -> func3() /xxx/splash.php:188
0.2626 118672 -> func4() /xxx/base.php:63
(далее еще сотня вызовов)

суммарное время выполнения - 0.3

около 300 вызовов.
Сервер мощный.
Каждый вызов - тысячные доли.
Нет ни базы данных, ни сетевых операций, файловых (за исключением пожалуй инклюдов)
Сервер один, не загружен,

Поведение
1. При перезагрузке страницы лаг в одном и том же месте.
2. Изменение кода переносит лаг в другое место.
3. При перезагрузке страницы лаг в том же месте.
4. Тормозит по сути на любых функциях, ловил тормоза на echo, print, prin_r, microtime, join, split, и на своих фукциях
5. Данных по сути нет.
6. Страница просто выплевывает html через include()

Перенес на локальную машину.
Результат.
Суммарное время выполнения 0.3
Каждая итерация занимает сотые доли, лага на 2 десятых не вижу.
php 5.2.
Есть подозрение что дело в мэнеджере памяти.

php xdebug extension

2007-09-06T22:30:00.000-07:00

Пока настраивается сервер, выдалась свободная минута.
Уже полгода наталкивался на php extension xdebug.
http://xdebug.org/
Сначала использовал только tracer, причем у меня отрабатывала только функция xdebug_start_trace() но более ничего не делалось. Обнаружил что она возвращает имя файла куда кладется trace, собственно и начал использовать
$tracer = xdebug_start_trace();
echo '<pre>';
echo file_get_contents($tracer);
Получается примерно следующее.
.0042 94560 -> require_once(file.php) /path/index.php:44
0.0043 95984 -> require_once(file2.php) /path/file.php:16
0.0044 95808 -> ClassName->__construct() /path/index.php:45

Где первая строчка время, вторая память, далее метод(функция) путь, строка.

Затем понадобился профайлер, ранее использовал zend_platform но trial закончился.
Смотрим тот же xdebug
http://www.xdebug.org/docs/profiler
Настраиваем php.ini
sudo apt-get install kcachegrind
И все работает!.

После этого я всерьез заинтересовался xdebug и захотелось собственно сам отладчик
http://www.xdebug.org/docs/remote
Поддерживаются ide:

Dev-PHP (IDE: Windows)
Eclipse plugin, which has been submitted as an enhancement for the PDT (IDE).
ActiveState's Komodo (IDE: Windows, Linux, Mac).
Notepad++ plugin (IDE: Windows).
WaterProof's PHPEdit (IDE, from version 2.10: Windows).
Anchor System's Peggy (IDE: Windows, Japanese).
Protoeditor (Editor: Linux).
tsWebeditor (Editor: Windows).
Xored's TrueStudio IDE (IDE).
VIM plugin (Tutorial) (Editor Plugin).
Maguma's WorkBench (IDE).
XDebugClient - Standalone Windows client

Так как Zend Studio дорогой для меня продукт, я начал переходить на vim, соотвественно заинтеросовала возможность интеграции отладчика в него.
Глянул туториал http://tech.blog.box.net/2007/06/20/how-to-debug-php-with-vim-and-xdebug-on-linux/
И все заработало - чудеса да и только :)

Первый пост

2007-03-21T22:26:00.000-07:00

Первый пост ради теста
Занес, глянул, а там уже тест то был :)
Цель создания : скидывать неожиданные находки, мои личные открытия.
Тематика :
Книги
Музыка
web development (php, perl)

test

2006-12-19T02:03:00.001-08:00

test