Заметки by Alexey Diyan

Celery loader hijacks/replaces standard logging configuration

2011-12-13T08:57:00.000-08:00

Оказывается celeryd загрузчик перекрывает стандартную logging конфигурацию для того чтобы облегчить жизнь разработчику.

Иинциатива конечно хорошая, однако для нас это было полной неожиданностью.

К счастью есть как минимум два способа изменить это поведение.

Быстрое, но не совсем полное решение это установить CELERYD_HIJACK_ROOT_LOGGER = False.

Чуть более сложное, но концептуально верное решение это использовать setup-logging хук/сигнал, который предоставляет Celery.

Ссылки:

In 2.1 logging behavior was changed to not configure logging if it wasalready configured. The problem is that some libraries does not playnice and hijack the root logger, or use logging.basicConfig – resultingin users not getting any output or logs.
http://readthedocs.org/docs/celery/en/release21-maint/changelog.html#version-2-1-4

By default any previously configured logging options will be reset, because the Celery programs “hijacks” the root logger.
If you want to customize your own logging then you can disable this behavior.
http://ask.github.com/celery/configuration.html#celeryd-hijack-root-logger

setup_logging signal.
Celery won’t configure the loggers if this signal is connected, so you can use this to completely override the logging configuration with your own.
http://ask.github.com/celery/userguide/signals.html#setup-logging

SQLAlchemy for Python. Some queries examples including generated SQL

2011-10-16T15:43:00.000-07:00

UPDATE on 2011-10-18. Ответил на некоторые комментарии прямо внизу поста.

Не так давно мне посчастливилось организовать technology validation самого продвинутого ORM-фреймверка для языка Python, который называется SQLAlchemy.

Признаюсь что перед стартом этого процесса я был достаточно скептически настроен, у меня была уверенность что я не увижу функционала, который бы хотя бы немного дотягивал до Java/Hibernate или .NET/NHibernate.

На моем последнем .NET-проекте, который назывался TravelConfirm, я предложил использовать NHibernate, о чем ни разу не жалею.

Более того, рекомендую всем сомневающимся внедрять его везде, где бы вы планировали использовать Entity Framework. NHibernate в связке с Fluent NHibernate прекрасно показали себя в работе с MySQL и Amazon RDS несмотря на то, что мы использовали в том числе и хранимые процедуры.

Но давайте вернемся к SQLAlchemy.

Статья на Wikipedia гласит что SQLAlchemy это open source SQL toolkit и object relational mapper, первый релиз которого был в феврале 2006-го года и что проект лицензируется под достаточно лояльной open source лицензией MIT.
http://en.wikipedia.org/wiki/SQLAlchemy

SQLAlchemy поддерживает довольно внушительный список СУБД, который в первом приближении сопоставим с таковым у Java/Hibernate:

Drizzle
Firebird
IBM DB2 / Informix
MaxDB
Microsoft Access
Microsoft SQL Server
MySQL
Oracle
PostgreSQL
SQLite
Sybase

Актуальную информацию по поддерживаемым диалектам можно увидеть тут:
http://www.sqlalchemy.org/docs/dialects/index.html

Еще одна особенность, которую я постояно наблюдаю в стеке Python, так это огромное изобилие библиотек, функциональность которых перекрывает, а иногда даже дублирует друг друга. Это вносит некоторую дополнительную головную боль разработчику, но это "правильная вещь". В рамках SQLAlchemy это выражается в том, что диалект каждой из представленных СУБД умеет работать поверх нескольких реализаций DB-API драйверов.

Например с MySQL я могу работать используя MySQL Connector/J, MySQL Connector/Python, mysql-python, OurSQL либо pymysql.
Подробную информацию о поддерживаемых диалектах и DB-API драйверах можно увидеть по следующей ссылке:
http://www.sqlalchemy.org/docs/core/engines.html#supported-databases

Думаю что вводной информации более чем достаточно, перейдем к делу. Ниже я буду приводить набор Python-тестов, которые используют ту или иную функциональность SQLAlchemy, сразу после кода теста будет приводится SQL запрос к SQLite базе, который генерирует SQLAlchemy.

Хочу сделать акцент на том, что SQLAlchemy меня просто поразил чистотой генерируемого SQL-кода, который часто превосходит даже такого титана как NHibernate. Код приводится как есть, я только лишь расставил переносы строк и отступы для лучшей читаемости - в оригинале все эти запросы формируются в несколько длинных строк. Точно так же как это делает NHibernate.

Нативный SQL-запроса с параметрами:

def test_query_with_from_native_sql_with_parameters(self):
  with DbSession() as session:
   result = session.query(User)\
   .from_statement('SELECT * FROM user where name=:name')\
   .params(name='User 4')\
   .all()

Generated SQL:

SELECT * FROM user where name=?

Извлечение пользователей с сортировкой по трем параметрам в разных направлениях:

def test_query_with_order_by_several_columns(self):
  with DbSession() as session:
   result = session.query(User)\
   .order_by(User.password)\
   .order_by(User.name.desc())\
   .order_by(User.age)\
   .all()

Generated SQL:

SELECT 
  user.user_id AS user_user_id, 
  user.name AS user_name, 
  user.age AS user_age, 
  user.password AS user_password 
 FROM user 
 ORDER BY 
  user.password, 
  user.name DESC, 
  user.age

Извлечение пользователя, который первым попался под руку:

def test_query_with_first(self):
  with DbSession() as session:
   result = session.query(User).first()

Generated SQL:

SELECT 
  user.user_id AS user_user_id, 
  user.name AS user_name, 
  user.age AS user_age, 
  user.password AS user_password 
 FROM user
  LIMIT ? OFFSET ?

Извлечение всех уникальных имен пользователей:

def test_query_with_distinct(self):
  with DbSession() as session:
   result = session.query(User.name).distinct().all()

Generated SQL:

SELECT DISTINCT user.name AS user_name
FROM user

Использование традиционных агрегирующих функций:

def test_query_with_max_min_avg_count(self):
  with DbSession() as session:
   max_user_age = session.query(func.max(User.age)).scalar()
   min_user_age = session.query(func.min(User.age)).scalar()
   avg_user_age = session.query(func.avg(User.age)).scalar()
   count_user_age = session.query(func.count(User.age)).scalar()

Generated SQL:

SELECT max(user.age) AS max_1 
 FROM user
 
 SELECT min(user.age) AS min_1 
 FROM user
 
 SELECT avg(user.age) AS avg_1 
 FROM user
 
 SELECT count(user.age) AS count_1 
 FROM user

Извлечение с группировкой:

def test_query_with_group_by(self):
        with DbSession() as session:
            result = session.query(User.name, func.count(User.user_id))\
    .group_by(User.name)\
    .all()

Generated SQL:

SELECT 
  user.name AS user_name, 
  count(user.user_id) AS count_1 
 FROM user 
 GROUP BY user.name

Надуманный вариант с подзапросом вместо традиционного join'а:

def test_query_with_subquery(self):
  with DbSession() as session:
   subquery = session.query(User.name).filter(User.age > 21).subquery()
   result = session.query(Developer).join(subquery, subquery.c.name == Developer.name).all()

Generated SQL:

SELECT 
  developer.developer_id AS developer_developer_id, 
  developer.name AS developer_name 
 FROM developer JOIN (SELECT user.name AS name 
 FROM user 
 WHERE user.age > ?) AS anon_1 ON anon_1.name = developer.name

Выборка данных с тремя inner join'ами:

def test_query_which_join_three_tables(self):
  with DbSession() as session:
   result = session.query(User, Developer, Parent)\
   .join(Developer, Developer.name == User.name)\
   .join(Parent, Developer.name == Parent.name)\
   .all()

Generated SQL:

SELECT 
  user.user_id AS user_user_id, 
  user.name AS user_name, 
  user.age AS user_age, 
  user.password AS user_password, 
  developer.developer_id AS developer_developer_id, 
  developer.name AS developer_name, 
  parent.parent_id AS parent_parent_id, 
  parent.name AS parent_name 
 FROM user 
  JOIN developer ON developer.name = user.name 
  JOIN parent ON developer.name = parent.name

Выборка данных с одним jeft outer join'ом:

def test_query_with_left_outer_join(self):
  with DbSession() as session:
   result = session.query(Developer, Parent)\
   .outerjoin(Parent, Parent.name == Developer.name)\
   .all()

Generated SQL:

SELECT 
  developer.developer_id AS developer_developer_id, 
  developer.name AS developer_name, 
  parent.parent_id AS parent_parent_id, 
  parent.name AS parent_name 
 FROM developer 
  LEFT OUTER JOIN parent ON parent.name = developer.name

Ограничение выборки используя методы limit и offset из querying DSL:

def test_query_with_limit_offset(self):
  with DbSession() as session:
   result = session.query(User).order_by(User.name).limit(1).offset(1).all()

Generated SQL:

SELECT 
  user.user_id AS user_user_id, 
  user.name AS user_name, 
  user.age AS user_age, 
  user.password AS user_password 
 FROM user ORDER BY user.name
  LIMIT ? OFFSET ?

Ограничение выборки используя метод slice с двумя параметрами из querying DSL. Вероятно в каком-то из диалектов метод slice может быть более эффективен:

def test_query_with_slice(self):
  with DbSession() as session:
   result = session.query(User).order_by(User.name).slice(start=1, stop=2).all()

Generated SQL:

SELECT 
  user.user_id AS user_user_id, 
  user.name AS user_name, 
  user.age AS user_age, 
  user.password AS user_password 
 FROM user 
 ORDER BY user.name
  LIMIT ? OFFSET ?

Объединение нескольких запросов через использование union:

def test_query_with_union_selects_distinct_records(self):
  with DbSession() as session:
   query1 = session.query(User.name)
   query2 = session.query(Developer.name)
   query3 = session.query(Parent.name)
   result = query1.union(query2, query3).all()

Generated SQL:

SELECT anon_1.user_name AS anon_1_user_name 
 FROM (SELECT user.name AS user_name 
 FROM user UNION SELECT developer.name AS developer_name 
 FROM developer UNION SELECT parent.name AS parent_name 
 FROM parent) AS anon_1

Объединение нескольких запросов через использование union all:

def test_query_with_union_all(self):
  with DbSession() as session:
   query1 = session.query(User.name,)
   query2 = session.query(Developer.name)
   query3 = session.query(Parent.name)
   result = query1.union_all(query2, query3).all()

Generated SQL:

SELECT anon_1.user_name AS anon_1_user_name 
 FROM (SELECT user.name AS user_name 
 FROM user UNION ALL SELECT developer.name AS developer_name 
 FROM developer UNION ALL SELECT parent.name AS parent_name 
 FROM parent) AS anon_1

Вот примерно так выглядят типичые запросы на SQLAlchemy. К счастью мои опасения были напрасны - SQLAlchemy прекрасно справляется с задачей, когда нужно произвести выборку данных из базы.

Более того, DSL для построения запросов в SQLAlchemy даже умеет ряд вещей, которых я не видел ни в NHibernate ни в Linq, а именно:

подзапросы
предложения UNION, UNION ALL, EXCEPT, EXCEPT ALL, INTERSECT, INTERSECT ALL, HAVING, CASE
indexing hint'ы
bulk insert для любой СУБД (у NHibernate есть ограниченные возможности, причем работают только в Microsoft SQL Server)
bulk update/delete. При этом database session/unit of work не трекает изменений, но не смотря на это такая функциональность бывает нужна приложению

SQLAlchemy поддерживает три основных варианта мэппинга иерархии классов аналогично NHibernate, правда они используют немного другие термины.
У SQLAlchemy термины Single Table Inheritance, Joined Table Inheritance, Concrete Table Inheritance соответствуют терминам Table per class hierarchy, Table per subclass, Table per concrete class из NHibernate:
http://www.sqlalchemy.org/docs/orm/inheritance.html

Более детально ознакомится с функциональными возможностями и их использованием можно используя официальную документацию SQLAlchemy:
http://www.sqlalchemy.org/docs/

UPDATE on 2011-10-18. Ответил на некоторые комментарии прямо внизу поста.

> Что с Foreign Keys? (mapping/использование/генерируемый SQL)

GUID. Поддержка реализована в первую очередь для PostgreSQL, но она не сложная и может быть расширена для других СУБД:
http://www.sqlalchemy.org/docs/core/types.html#backend-agnostic-guid-type

GUID.Comb не поддерживается, так что если алгоритм очень нужен, то придется его портировать с NHibernate.

HiLo генератор так же не реализован. Есть пример кастомного генератора для database shards, где говорится что его можно использовать как прототип для HiLo генератора:
https://bitbucket.org/sqlalchemy/sqlalchemy/src/54ee83285eef/examples/sharding/attribute_shard.py

Post Insert генераторы не выделены явно, однако поддерживаются по-умолчанию. Identity, Guid.Native и любой другой генератор, который вычисляется на стороне БД декларируется одинаково:
http://www.sqlalchemy.org/docs/core/schema.html#server-side-defaults

Database Sequence генератор:
http://www.sqlalchemy.org/docs/core/schema.html#defining-sequences

Composite Primary Key генератор как частный случай Assigned Key генератора:
http://stackoverflow.com/questions/2374243/is-it-possible-to-get-sqlalchemy-to-create-a-composite-primary-key-with-an-integ

К сожалению привести примеры SQL не могу, так как для этого нужно делать тесты.

> 2nd layer cache (memcached)?

SQLAlchemy умеет работать поверх Beaker Caching, который отправляет NHibernate в тяжелый нокаут по количеству поддерживаемых cache-бекендов.
С другой стороны, SQLAlchemy предоставляет более явный Caching API, что одновременно и хорошо и плохо - все зависит от личных предпочтений:
http://www.sqlalchemy.org/docs/orm/examples.html#beaker-caching

> Подзапросы в NH не так красиво как в Py, но всё же

Если быть более точным, то поздапросы в NHibernate работают только при использовании QueryOver и недоступны в Linq.

> NHibernate {bulk/batching} на вскидку 2 варианта и с недавнего (3.2) времени дэфолтный:

Bulk insert и query batching это немного разные вещи. Насколько эффективно реализован query batching в SQLAlchemy сказать не могу. Но вот bulk insert в SQLAlchemy реализован удобно, просто и не зависит от СУБД. При этом NHibernate поддерживает bulk insert только у Microsoft SQL Server'а, поскольку эта функциональность упирается в возможности нижележащего ADO.NET Data Provider'а.

Кто собирал Twisted для Python под Windows 64 bit?

2011-09-30T10:09:00.000-07:00

Фух. Сегодня выдался нелегкий денек...

Оказалось что фреймверк Twisted не собран под Windows 64. Пробовали MinGW, потом MinGW 64, потом Cygwin, потом MSVC. К сожалению пока так ничего и не получилось :(

Ознакомились с модулем logging. Нашли библиотеку которая позволит отправлять логи на нашу любимую Log2Console в формате log4j XML.

Продолжали разбираться с SQLAlchemy ORM фреймверком. Оказывается он умеет делать bulk delete/update, чего не умеет делать даже NHibernate.

В понедельник еще попробую помучать Twisted, есть еще одна идея как его собрать под Windows 64 bit...

Если удастся собрать, то тогда будет возможность посмотреть на Python logging server, собственно ради него и затеяли эту возню с Twisted :)

Извлечение файлов из .msi архивов

2011-09-28T04:46:00.000-07:00

По определенным причинам я очень не люблю инсталляционные пакеты в Windows и предпочитаю работать с софтом в режиме "распаковал и запустил".

Долгое время использовал прием описанный в этой статье:
Howto: extract files from a .msi file using the Windows command line

Однако с помощью этой команды в некоторых случаях мне не удавалось распаковать файлы из .msi архива.

Сегодня читая комментарии на StackOverflow наткнулся на проект lessmsi.

Пост на StackOverflow:
how can I manually install the Office 2007 PIAs on a computer with no Office installed?

lessmsi - A tool to view and extract the contents of an Windows Installer (.msi) file:
http://code.google.com/p/lessmsi/

Пока не пробовал его в работе, но подумал, вдруг кому пригодится.

Погружаясь в разработку на Python...

2011-09-08T13:27:00.000-07:00

Последнее время промышляю написанием скриптов, которые автоматиризуют различные рутиные операции:
- правка файлов AssemblyInfo.cs с целью внесения build number, git branch name, git commit hash
- компиляция Visual Studio 2010 solution с проектами на C#/.NET 4.0
- анализ кода с помощью утилиты Gendarme
- подготовка deployment архивов, в которые складываем все бинарники за исключением XML-файлов с документационными комментариями, временных файлов, лог-файлов
- сбор всех тикетов Redmine для текущего билда и внесение соответсвующего комментария в каждый из этих тикетов

Планирую еще добавить запуск NUnit тестов в связке с PartCover, подготовку Test Code Coverage отчета в HTML-формате.

Сейчас Code Coverage метрики мы вообще не собираем - никак не дойдут руки добавить, а запуск NUnit тестов для нас делает TeamCity.

Хочу прийти к тому чтобы разработчик или QA имел возможность локально запустить билд скрипт, который бы выполнил всю ту же работу, которая происходит на CI-сервере TeamCity.

Какое-то время я размышял об инструменте, который можно использовать для этих целей и в итоге остановился на CPython.

Среди кандидатов еще рассматривались Cygwin + Bash, PowerShell, IronRuby + Rake, IronPython.

Cygwin + Bach кроссплатформенные, однако язык Bash за счет своей долгой истории развития выглядит достаточно несогласованным в плане синтаксиса. На нем не очень удобно писать императивный код и я не видел чтобы кто-то использовал там дебаггер.

PowerShell напротив, отличается очень хорошей синтаксической согласованностью. У этого языка отличная интеграция с платформой Windows и .NET, что для меня как .NET разработчика неоспоримое преимущество. К тому же мне удалось найти редактор скриптов с отладчиком. Но все таки мне хотелось иметь возможность писать императивный код средней сложности, который был бы кроссплатформенным.

IronRuby + Rake можно расценивать как готовую билд систему с хорошим императивным языком. Если бы у меня не было работы с язком Pyhton, то, возможно, я бы выбрал именно этот вариант.

Python думаю не нужен в особой рекламе. Достаточно сказать что я его выбрал :) Ну а если серьезно, язык я выбрал для решения поставленных задач из-за того что он довольно популярен, решает задачи общего назначения, кросплатформенный, используется для разработки как Desktop так и Web-решений. Так же его используют для нетривиальных задач системного администрирования, которые не может "вытянуть" Bash. Наверное переломным для меня моментом была находка библиотеки Paver, которая судя по всему делает все то же, что и библиотека Rake.

На первых этапах разработка велась с использованием IronPython + paver + Visual Studio 2010 + Python Tools for Visual Studio 2010 beta, позже на CPython 2.7 + paver + concurrent.futures + lxml + Eclipse + PyDev. Сейчас присматриваюсь к среде разработки JetBrains PyCharm, хотя использование коммерческого продукта для подобных задач кажется расточительным.

По состоянию на сегодняшний день build/deplyment скрипты представляют из себя сборную солянку следующих библиотек:
- paver, BSD
- concurrent.futures, BSD
- lxml, BSD
- py-restkit, BSD
- simplejson, MIT
- http-parser, MIT

Так же я обращал внимание на следующие библиотеки:
- GitPython, BSD, работает, но не понадобилась
- PyActiveResource, MIT, не подошла из-за функциональных ограничений
- python-rest-client, GPLv3, не пробовал из-за лицензионных ограничений

Цитаты из книги "Программист-прагматик. Путь от подмастерья к мастеру"

2011-08-17T15:12:00.000-07:00

На прошлой неделе закончил читать книгу Эндрю Ханта и Дэвида Томаса "Программист-прагматик. Путь от подмастерья к мастеру".

Читал книгу в формате FictionBook на своем смартфоме Samsung Galaxy S с помощью замечательной программы-читалки Cool Reader.

Впечатления очень положительные. Изложение в книге не сложное, так как там практически отсутствуют точные технические сведения, как это часто бывает в нашей технической литературе.

Авторы раскрывают скорее принципы, которыми должен руководствоваться любой программист в своей повседневной работе.

Крайне рекомендую прочитать эту книгу любому программисту, независимо от его уровня. Начинающий разработчик найдет для себя целый срез полезных знаний, опытный разработчик также с очень большой вероятностью найдет для себя что-то новое.

Лично мне читать эту книгу было крайне легко, так как большую часть вещей изложенных в книге я уже использую в своей повседнемной работе. Очень понравилась компактность изложения и столь большое количество системных советов, которыми могут руководствоваться разработчики независимо от их профиля и выбранной платформы.

Ниже привожу цитаты из книги, которые мне понравились.

(Об управлении временем жизни у зависимых объектов)

Есть три основных варианта развития событий:
1. Структура верхнего уровня также несет ответственность за освобождение любых входящих в нее подструктур. Затем эти структуры рекурсивно удалят данные, содержащиеся в них, и т. д.
2. Структура верхнего уровня просто освобождается. Любые структуры, на которые она указывает (и на которых нет других ссылок), становятся "осиротевшими".
3. Структура верхнего уровня отказывается освобождать себя, если в нее входят какие-либо подструктуры

Хотя принцип "модель-визуальное представление-контроллер" обычно реализуется в контексте графического интерфейса, на самом деле он является универсальной методикой программирования. Визуальное представление – это некая интерпретация модели (возможно, подмножества), и она не обязана быть графической. Контроллер в большей части является механизмом координации и не должен ассоциироваться с устройством ввода любого типа.

Подсказка 24: Занимайтесь устранением проблемы, а не обвинениями

Программное обеспечение работает несколько по-иному. В отличие от строительства, написание программ ближе к садоводству, оно ближе к живой природе, чем к бетонным конструкциям. Вы высаживаете в саду множество растений согласно первоначальному плану и условиям. Некоторые растения разрастаются, другим же уготована компостная яма. Вы можете пересаживать растения друг относительно друга, чтобы извлечь пользу из взаимодействия света и тени, ветра и дождя. Переросшие растения разрубают или обрезают, растения определенного цвета пересаживают на другие участки, где они становятся более приятными глазу с точки зрения эстетики. Вы выпалываете сорняки и подкармливаете растения, которые нуждаются в дополнительном питании. Вы постоянно следите за состоянием сада и при необходимости вносите изменения (в почву, растения, общий план)

Метафора садоводства намного ближе к реальности разработки программного обеспечения. Возможно, некая программа переросла себя или пытается осуществить слишком много – ее необходимо разбить на две. Все, что не получается в соответствии с планом, подлежит прополке или обрезке.

Попробуйте объяснить этот принцип вашему шефу, пользуясь аналогией с медициной: рассматривайте программу, нуждающуюся в реорганизации,реорганизации, как «опухоль». Чтобы удалить ее, требуется хирургическое вмешательство. Вы можете начать сразу и извлечь ее, пока она небольшая. Но если вы будете ждать, пока она вырастет и распространится, то ее удаление станет более дорогой и опасной процедурой. Подождите еще, и вы можете потерять пациента окончательно.

Многие книги и учебные пособия относят процедуру сбора исходных требований к начальной фазе проекта. Термин «сбор» напоминает о племени счастливых аналитиков, занимающихся собирательством камней-самородков мудрости, разбросанных по земле на фонеприглушенного звучания "Пасторальной симфонии". Этот термин напоминает о том, что все требования уже имеются в наличии, нужно лишь отыскать их, положить в корзину и весело шагать дальше.
Это не совсем так. Требования редко лежат на поверхности. Обычно они находятся глубоко под толщей предположений, неверных представлений и политики.

Важно обнаружить основополагающую причину того, почему пользователи поступают определенным образом, а не так, как они привыкли это делать. В конечном итоге разрабатываемой программе придется решать проблемы их бизнеса, а не просто отвечать их заявленным требованиям.

Вы отклонились от графика выполнения проекта или уже отчаялись увидеть систему работающей, поскольку конкретную проблему "невозможно решить". В этот момент необходимо сделать шаг назад и задать себе несколько вопросов:
• Существует ли более простой способ?
• Вы пытаетесь решить главную проблему или отвлекаетесь на второстепенные технические детали?
• Почему это является проблемой?
• Что делает эту проблему столь сложной для решения?
• Стоит ли делать это именно таким образом?
• Стоит ли это делать вообще?
И во многих случаях секрет удивительным образом раскроется перед вами, как только вы попробуете ответить на один из этих вопросов.

Подсказка 59: Дорогие инструменты не всегда создают лучшие решения

Конечно, в разработке программ есть место формальным методам. Однако, столкнувшись с проектом, философия которого заключается в изречении "диаграмма класса и есть приложение, все остальное – лишь механическое составление текста программы", знайте, что имеете дело с проектной командой, которая уцепилась за плавучее бревно и медленно гребет к берегу.

В группе L Стоффел руководит шестью первоклассными программистами – это руководящая работа, которую можно приравнять к управлению бродячими котами.
Журнал "Washington Post" от 9 июня 1985 г.

Подсказка 66: Дефект должен обнаруживаться единожды

Если дефект проскальзывает через сеть существующих тестов, вам необходимо добавить новый тест, чтобы поймать его в следующий раз.

В абстрактном смысле приложение успешно, если оно корректно реализует свои спецификации. К сожалению, это и оплачивается лишь абстрактно.
В действительности успех проекта измеряется тем, насколько он соответствует надеждам своих пользователей. Проект, не оправдавший их надежд, обречен на неудачу, неважно, насколько хорошо он соответствовал срокам.

Программисты-прагматики не уклоняются от ответственности. Вместо этого они испытывают радость, принимая вызовы и распространяя свой опыт. Если мы несем ответственность за проектное решение или фрагмент программы, мы делаем работу, которой можем гордиться.

Сегодня Windows 7 довел меня до белого каления

2011-03-20T11:35:00.000-07:00

На системном разделе моего ноутбука объем которого составляет 25 Гб (!) нехватает свободного места. Точнее там тупо ноль байт. Из-за этого масса проблем.

В качестве решения проблемы решил перенести c:\Program Files\ и c:\Program Files (x86)\ на другой раздел и сделать Junction Point.

Скопировал все содержимое, но теперь не могу удалить каталог и поменять права, даже с правами администратора.

Администратор не имеет права на удаление этого каталога, только TrustedInstaller и Local System имеет право удалить этот каталог.

Запустить cmd сессию от Local System аккаунта можно с помощью PsTools\PsExec. Но они не работают из-за какого-то дефекта в 64-редакции Windows 7.

Есть хотфик, который решает эту проблему, но чтобы его скачать нужно ввести свой email и капчу. Терпение на исходе.

На почтовый ящик пришло письмо с прямой ссылкой и паролем. Скачал, распаковал. После чего получил сообщение что hotfix не может быть установлен.

Если посмотреть на проблему изначально - 25 Гб под системный раздел для ноутбука это много или мало по состоянию на 2011 год?

Чтобы картина была более ясна отмечу что в каталог c:\Users я не сохраняю никаких своих документов.

Весь установленный софт занимает не так уж и много места:

305 Мб - C:\Program Files\
441 Мб - C:\Program Files (x86)\
1,31 Гб - C:\soft\ причем этот каталог можно не считать, так как все данные лежат на другом разделе, а это Junction Point.

Иногда я жалею что я .NET разработчик, который зависит от операционной системы Windows.

Если бы я в повседневной работе использовал только кроссплатформенные решения, то у меня хотя бы был выбор...

Update: Удалось найти достаточно простое решение моей проблемы вот тут
http://helpdeskgeek.com/windows-7/windows-7-how-to-delete-files-protected-by-trustedinstaller/

The very first .NET Saturday in IT Café_

2011-02-05T11:37:00.000-08:00

Сегодня, пятого февраля сходил на событие, проходящее под эгидой компании Ciklum, которое называется .NET Saturday.

В большинстве случаев заметки в свой блог мне писать очень и очень лень, но тут решил написать буквально пару строк о прошедшем событии.

Формат события такой. В обычном, но довольно привлекательном кафе освобождают часть зала, в зоне которого находится докладчик, все слушатели сидят прямо за своими столиками и слушают доклад. Один за другим идет ряд докладов с 15-ти минутными перерывами между ними. В перерыве между докладами можно попить чаю, кофе, поесть печеньки или конфеты.

Были прочитаны следующие доклады:
- Александр Краковецкий (Винница, head of MS User Group) «Тестирование производительности .NET приложений»;
- Дмитрий Пасько (Харьков, Team Leader) «NuGet- package management for the .NET platform»;
- Андерс Соренсен (Дания, Site manager) «Optimizing development in an offshore context»;
- Михаил Вальков (Харьков, Senior .net developer) «Antipatterns»

Мероприятие продолжалось с 15:00 по 19:00 и количество времени выделенного на каждый доклад было достаточным.

Признаюсь, что решение идти на это мероприятие меня в первую очередь натолкнула тема первого доклада, хотя после окончания мероприятия лично для меня оказались самыми интересными доклад Дмитрия Пасько по NuGet и доклад Андерса Соренсена.

Искренне благодарю всех докладчиков за их труд и время. Это очень ценно, когда человек находит желание и силы поделиться своими знаниями с локальным сообществом. В этом отношении мне несколько стыдно, поскольку я бы наверное тоже мог бы поделиться определенными вещами с коллегами по работе в рамках того или иного доклада, но до сих пор я себя так и не смог заставить это сделать.

Хотелось бы еще отметить, что формат этого мероприятия мне крайне понравился. Его продолжительность была не маленькой, но при этом я ушел оттуда не уставшим, а может быть даже отдохнувшим. Возможность попить чаю прямо посередине прослушивания доклада, выйти на улицу в перерыв для того чтобы проветрить мозги – все это было очень кстати. Сами столики очень расслабляли и наталкивали на дискуссию, хотя я бы не отказался от более длинного перерыва, чтобы успеть и проветриться и успеть похоливарить с товарищами за столиком.

Компания Ciklum планирует проводить подобные мероприятия около одного раза в месяц по субботам. Если вы вдруг узнаете о данном мероприятии, то рекомендую на него сходить хотя бы один раз для пробы.

На всякий случай отмечу, что я не работаю в Ciklum и не имею к компании никакого отношения даже не смотря на то, что по моей «вине» на это мероприятие пришло пять моих товарищей. :) Ребята, надеюсь что вам там тоже понравилось.

Вышел Castle.Windsor (включая Core, DynamicProxy, DictionaryAdapter) версии 2.5

2010-09-02T17:45:00.000-07:00

Ура товарищи.

Вышел стабильный релиз Castle.Windsor, который я со спокойной совестью теперь могу рекомендовать даже начинающим ЙОК-овцам (IoC, Inversion of Control).

В анонсе бета релиза была масса отличных новостей:
- объединили Castle.Core, Caste.DynamicProxy, Castle.DictionaryAdapter в Castle.Core
- объединили Castle.MicroKernel, Castle.Windsor в Castle.Windsor
- сделали ряд незначительных breaking changes (читал описание, там все очень экзотическое и редко используемое). Можно было бы более крепко пройтись по старому API
- весь устаревший API отметили как obsolete. До этого там была настоящая каша. Прямо как в Rhino.Mocks

Castle объединяет сборки, а (Microsoft) Unity декомпозирует. ...ребята которые пидалят Unity не ведают что творят :)

К счастью основная проблема с высоким порогом вхождения была решена - благодаря тому что методы были отмечены как obsolete, новички не будут выносить себе мозг в поисках того какие именно методы стоит использовать, а какие не стоит. Более того, разработчики обещают вообще удалить все obsolete методы в релизе 3.0.

До релиза 2.5, когда у меня спрашивали что лучше использовать в качестве IoC контейнера, я постоянно колебался в ответе. Обычно рекомендовал смотреть либо на Castle.Windsor либо на Autofac и говорил что если будут малейшие сложности с Castle.Windsor, то не морочить с ним долго голову.

Теперь же однозначно уверен что логичнее использовать Caslte.Windsor, а легкий Autofac стоит использовать только лишь в Silverlight проектах.

Пользуясь случаем приглашаю всех пользователей Caslte.Windsor "приложиться" к его улучшению, оставив свои предложения на фидбек сайте. Команда разработчиков реально прислушивается к пожеланиям их пользователей:

Provide more compact, discoverable fluent API

В качестве примера тут хорошо расписаны шаги миграции проекта S#arp Architecture на последнюю версию Castle.

Указывается как разрешить проблему зависимости NHibernate и Castle.Windsor на Castle.DynamicProxy, которая переехала в Castle.Core.

Описывается рефакторинг со старого API на новый API Castle.Windsor. Много внимания уделяется IWindsorInstaller, который мне очень понравился.

ЗЫ Да, я знаю что релиз как-бы вышел с пол месяца назад, но у меня таймауты... Уж простите :)

Полиглотное программирование в .NET это хорошо. История внедрения IronPython

2010-08-11T16:23:00.000-07:00

Неплохая статья. Выгодно отличается трезвым взглядом человека-практика.

Признаюсь что читать все комментарии сил не нашел, но хотелось бы оставить одну галочку в Success Stories исключительно для статистики. :)

Уже несколько лет работаю на одном большом проекте в котором с самого начала присутствовал скриптинг.

Причем начиналось это все с написания скриптов общего назначения на NVelocity и это был сущий ад, поскольку Velocity ну никак не является скриптовым языком общего назначения.

Но это было время .NET 1.1, IronPython'а тогда еще не было, а нам нужна была возможность написания скриптов, которые бы вызывались во время отработки различных фабричных методов.

В какой-то момент мы нашли проект IronPython и начиная с версии 1.0 RC я был человеком, который "двигал" этот язык и передавал опыт работы другим командам внутри нашего проекта.

Все это происходило медленно, но верно. По ходу дела я переезжал с одного релиза на другой, решая разного рода проблемы взаимодействия C# и IronPython при хостинге DLR внутри C# приложения.

Вначале были переписаны скрипты с NVelocity на IronPython практически один-в-один. Разве что я старался скрипты представлять в более организованном, процедурном виде ну и использовать простейшие возможности языка.

Следующим этапом был постепенный перевод всех скриптов на более высокоуровневую объектную модель. Тут пришлось пройтись по некоторым не очевидным граблям, которые выплывали во время наследования абстрактных классов C# в типах, которые я реализовывал на языке Python.

В конечном счете теперь у нас на проекте появляется все больше и больше скриптов на IronPython, которые постепенно становятся все более "умными".

При этом, скажу что мы, как суровые челябинские разработчики, пишем без IntelliSense и без отладчика. Спасает то, что я разобрался как можно вытащить script stack trace. :)

В конечном счете я для себя сделал такой вывод:

Многоязыковость платформы .NET это однозначно хорошо, так как позволяет в определенных ситуациях находить отличные решения. И мне кажется что эта самая многоязыковость или даже "распыленность" Microsoft по C#/F#/VB.NET/IronPython/IronRuby вряд ли нанесет существенный вред платформе в целом и языку C# в частности.

Другое дело что от такого обилия языков программирования бедный разработчик теряется, но это уже проблемы этого разработчика. Кто-то пусть делает ставку на проверенную лошадку, кто-то пусть экспериментирует. Главное что всем хватает места и это очень радует.

Inversion of Control and Dependency Injection. Ссылки

2010-04-03T10:22:00.000-07:00

Inversion of Control and Dependency Injection: Working with Windsor Container
http://msdn.microsoft.com/en-us/library/aa973811.aspx

Ознакомительная статья, раскрывающая основные концепции Inversion of Control и Dependency Injection, которую написал Oren Eini aka Ayende Rahien. Носит предельно практических характер. Достаточно много хорошего материала, все изложение идет в ключе разработки некоего приложения (или сервиса) по обработке заказов. Крайне рекомендую эту статью к прочтению.

Inversion of Control and Dependency Injection with Castle Windsor Container. Four Parts.
Цикл статей об использовании Inversion of Control и Dependency Injection с помощью популярного фреймверка Castle.Windsor.
http://dotnetslackers.com/articles/designpatterns/InversionOfControlAndDependencyInjectionWithCastleWindsorContainerPart1.aspx

Первая статья является вводной. Вначале статьи приводится пример кода в котором нарушается принцип разделения ответственности (Separation of concerns) и который написан без оглядки на Unit-тестирование. Затем приводится реализация кода с использованием принципа обращения зависимостей (Inversion of Control), а точнее с помощью Constuctor [Dependency] Injection. Вторая версия удобна с точки зрения тестирования, но не удобна в реальном использовании, так как клиент будет знать сразу о нескольких реальных типах. И заключительной части показывается использование IoC/DI контейнера, точнее его базовой части в виде Castle.MicroKernel API, а затем и в расширенной - Castle.Windsor.

http://dotnetslackers.com/articles/designpatterns/InversionOfControlAndDependencyInjectionWithCastleWindsorContainerPart2.aspx

Во второй части рассматриваются инъекция опциональных зависимостей (Property Injection), приводится пример инъекции конкретной реализации (имеет смысл, когда на один и тот же интерфейс может быть несколько реализаций). В конце статьи приводятся примеры декларативного Xml конфигурирования основных коллекций - Array, IList, IDictionary.

http://dotnetslackers.com/articles/designpatterns/InversionOfControlAndDependencyInjectionWithCastleWindsorContainerPart3.aspx

В третьей части показывается пример вынесения части конфигурации в отдельные разделы Xml конфигурации Castle.Windsor и включение этих параметров при декларировании сервисов. По простым примерам видно, насколько просто и одновременно мощно можно конфигурировать сервисы Castle.Windsor с помощью конфигурационного файла. Если нужно задать значение параметра, который имеет сложный пользовательский тип, то это можно сделать с помощью TypeConverter'а. Приводится, не совсем полезный пример реализации декоратора и его регистрации. Возможно это сделано для того чтобы потом можно было привести пример с define и if/else прямо внутри конфигурационного файла.
Всех описанных возможностей конфигруации хватит за глаза любому, даже самому энтерпрайзному приложению :)

http://dotnetslackers.com/articles/designpatterns/InversionOfControlAndDependencyInjectionWithCastleWindsorContainerPart4.aspx

В четвертой части описывается крайне важный материал - управление жизненным циклом сервисов внутри Castle.Windsor контейнера.
Любому, кто собирается работать с Caslte.Windsor стоит обязательно разобраться в том, что такое Lifestyle, Lifecycle, Commision/Decomission и Release Policy. Чтобы не было неожиданно неприятных ситуаций как со мной и Web-приложением на production сервере :)
Информация по Facility довольно полезна, но не так критична.

Building the Policy Injection in 40 Minutes with Windsor
http://ayende.com/Blog/archive/2007/03/07/Building-the-Policy-Injection-in-40-Minutes-with-Windsor.aspx

Реализация Policy Injection в виде Facility для Castle.Windsor. Типичный пример аспект-ориентированного программирования. Не знаю кто придумал термин Policy Injection, и что конкретно он обозначает, но когда мне говорят реализация аспекта (AOP), то я сразу понимаю о чем идет речь.

Caching with Castle Windsor
http://consultingblogs.emc.com/owainwragg/archive/2008/10/31/caching-with-castle-windsor.aspx

Реализация Facility, которая обеспечивает кеширование данных используя аспект-ориентированный подход. Очевидно, что с помощью IoC и AOP-подхода можно достаточно удобно решать такие вещи как Security, Logging, Caching.

The joys of Castle.Services.Transaction
http://www.jroller.com/hammett/entry/the_joys_of_castle_services

Описывается использование AutomaticTransactionFacility. Просто апофеоз декларативной attribute-driven разработки. Выглядит настолько необычно что я даже не знаю, стоит ли пытаться повторить это дома :) В любом случае идея невероятно креативная.

Hidden jewels in the Castle stack: Transaction Services
http://blogs.taiga.nl/martijn/2008/12/03/hidden-jewels-in-the-castle-stack-transaction-services

Прошу меня простить, но эта ссылка уже реальный оффтопик основной темы. В посте развивается идея сервиса транзакций из проекта Castle, только теперь транзакционность пытаются прикрутить уже к файловой системе...

List of .NET Dependency Injection Containers (IOC)
http://www.hanselman.com/blog/ListOfNETDependencyInjectionContainersIOC.aspx

Достаточно обширная подборка IoC контейнеров на платформе .NET от Scott Hanselman'а.

BitterCoder's Wiki. Container Tutorials
http://wiki.bittercoder.com/Default.aspx?Page=ContainerTutorials&AspxAutoDetectCookieSupport=1

Коллекция ссылок на туториалы по Castle.Windsor, в настоящее время представлено четырнадцать частей. Специфика этих туториалов заключается в том, что там в каждой части раскрывается только одна функциональная возможность библиотеки. Возможно для кого-то такой дробный формат изложения покажется удобным.

Внизу страницы приведена целая коллекция ссылок по рассматриваемой тематике на различные сторонние ресурсы.

Inject Some Life into Your Applications—Getting to Know the Unity Application Block
http://msdn.microsoft.com/en-us/library/cc816062.aspx

Вводная статья по Unity, IoC контейнеру, который разрабатывался силами Microsoft и затем был выпущен с открытым исходным кодом. Рассматриваются основные аспекты IoC контейнера. Все примеры кода приведены сразу на двух языках - C# и VB.NET.

IoC libraries compared
http://elegantcode.com/2009/01/07/ioc-libraries-compared/

Сравнение API у различных IoC контейнеров: Ninject, StructureMap, Unity, Spring.net, Castle.Windsor, Autofac. Следует принять во внимание что статья написана в январе 2009 года, а API каждого из перечисленный фреймверков постоянно совершенствуется.

Две простейшие реализации IoC контейнеров. По их реализации можно сделать вывод о том, какая основная задача ставится перед таким контейнером.

It's My Turn To Build An IoC Container In 15 Minutes and 33 Lines
http://www.kenegozi.com/Blog/2008/01/17/its-my-turn-to-build-an-ioc-container-in-15-minutes-and-33-lines.aspx

Building an IoC container in 15 lines of code
http://ayende.com/Blog/archive/2007/10/20/Building-an-IoC-container-in-15-lines-of-code.aspx

WatiN и ASP.NET integration tests

2010-03-11T22:03:00.000-08:00

Не так давно пробовал библиотеку WatiN в работе, впечатления очень положительные.

На мой взгляд эту библиотеку очень выгодно отличает ее API. Он очень domain specific и его удобно использовать и читать.

Так же очень логично использовать так называемый "Page-based API", когда каждая страница в сценарии инкапсулирована в отдельный класс, унаследованный от класса WatiN.Core.Page. В этом классе описывается мэппинг контролов страницы на определенные свойста класса с помощью атрибутов, а так же реализуется логика взаимодействия со страницей в методах класса.

Реализованные классы страниц могут быть повторно использованы во множестве тестов с разными входными данными и с разными наборами страниц.
Таким образом, при чтении теста тестировщик или разработчик концентрируется не на полях ввода и кнопках, а на бизнес-логике и логике взаимодействия с веб приложением.

Классический API можно увидеть на главной странице сайта WatiN, я же приведу пример "Page-based API":

using (var ie = new IE("http://www.google.com"))
{
 var page = ie.Page<GoogleSearchPage>();
 page.SearchFor("WatiN");
}
...

[Page(UrlRegex="www.google.*")]
public class GoogleSearchPage : Page
{
 [FindBy(Name="btnG")]
 public Button SearchButton;

 [FindBy(Name="q")]
 public TextField SearchCriteria;

 public void SearchFor(string searchCriteria)
 {
  this.SearchCriteria.TypeText(searchCriteria);
  this.SearchButton.Click();
 }
}

Надеюсь что весь приведенный код не нуждается в комментариях. Если вы его сразу же поняли, значит этот API можно считать действительно удачным.

Пример реального кода на WatiN:

browser = new IE(fedExHomePageUrl);
browser.Page<FedExLoginPage>().LogIn(login, password);
browser.GoTo(fedExSearchPageUrl);
browser.Page<FedExSearchPage>().Search(dateFrom, dateTo);
browser.Page<FedExSearchResultPage>().SaveAs(reportPath);
browser.Page<FedExDownloadPage>().Download(browser, reportPath);
...

В коде выше описан верхний уровень сценария взаимодействия с сайтом FedEx. Глядя на код можно получить четкое представление о том, что нужно сделать пользователю для того чтобы скачать некий репорт с сайта. При этом все ньюансы разметки страницы и ввода данных сгруппированы и изолированы :)

WatiN даже умеет взаимодействовать со скрытым окном браузера, что позволяет запускать integration тесты на локальной машине прямо во время работы.

Стоит отметить, что в работе со скрытым окном браузера есть несколько ньюансов:

1. Если понадобится сделать скриншот страницы, то окно браузера необходимо сделать видимым, но не активным, иначе вместо скриншота у нас будет снимок черного экрана. Окно можно делать не активным, чтобы оно не мешало работе. После снятия скриншота окно можно будет сразу же спрятать:

browser.ShowWindow(NativeMethods.WindowShowStyle.ShowNormalNoActivate);
browser.CaptureWebPageToFile(debugImagePath);
browser.ShowWindow(NativeMethods.WindowShowStyle.Hide);

2. Обработка диалоговых окон часто завершается неудачей без видимых на то причин. К сожалению у меня не было достаточно времени чтобы четко вычислить закономерность поведения, поэтому я проблему решил приведением окна браузера в видимый + активный режим. Понятно что побочным эффектом будет периодические появления диалоговых окон в самый неудачный для вас момент, но как правило таких ситуаций не так уж и много. Буду очень признателен, если кто-нибудь подскажет решение данной проблемы.

3. На моем копьютере WatiN отказывается работать в режиме Windows Service без доступа к рабочему столу, несмотря на то что на официальном сайте утверждается обратное.

...случайно заметил что в IE8 все вставки кода выглядят просто ужасно. Что интересно, FF и iPhone показывают правильно.

Парсинг Html документов с целью извлечения данных

2010-01-31T13:34:00.000-08:00

Ехал я как-то с работы вместе со своим коллегой Валерой Щербининым и заговорили о теме парсинга HTML.

Большую часть времени на работе я занимаюсь поддержкой и активным развитием биллинговой подсистемы одной большой системы которая занимается записью компакт дисков. Название компании опускаю, так как я подписывал договор о неразглашении нечитая, посему не знаю что можно разглашать, а что нет :).

Учитывая специфику проекта и интеграцию всего со всем я трижды сталкивался с задачей импорта данных из HTML документов в биллинговую систему.

Три раза я использовал один и тот же подход - Regular Expression.
Причем один из документов имел такую нетривиальную структуру, что мне пришлось использовать аж два регулярных выражения. В один проход я выделял все данные вместе с частью HTML разметки, а во второй уже выкусывал сами данные. Мне пришлось так поступить, потому как я уважаю мэйнтейнеров и не хочу писать код, после которого меня будут долго вспоминать.

Кроме того, мне даже приходилось пережить один эпизод обновления разметки документа и обновлять свое же регулярные выражения...

Не могу пожаловаться на плохие знания языка регулярных выражений, но этот процесс доставлял мало удовольствия, был очень и очень медленным. Но самое главное - если код парсера хоть и был легко читаем и сопровождаем, то сами регулярные выражения были настоящей занозой в заднице.

Возможно Валера подумал что я полоумный, но тем не менее вежливо поделился своей идеей - использовать HTML Tidy для нормализации HTML до well formed XHTML, а потом наворачивать на это дело Xslt-преобразование которое извлекает все данные.

Идея мне сразу же понравилась. Но меня смутило то, что мне придется вызывать unmanaged HTML Tidy, плюс я практически незнаком с Xslt хотя и знаю XPath.

И вот, сегодня, совершенно случайно наткнулся на замечательное во всех отношениях решение - SGMLReader:
SGMLReader - Converting almost any HTML to valid XML

SGMLReader это pure C# .NET 2.0 библиотека, центральный класс которой это SgmlReader унаследованный от XmlReader со всем вытекающими отсюда преимуществами.

Есть даже примеры, которые запускаются на лету на живом коде из trunk:
HTML-to-XML Conversion Examples

Благодаря это библиотеке мне не придется погружаться в жестокий unmanaged мир и я смогу использовать Linq to Xml / Xslt / XPath на выбор.

В нагрузку ссылка на статью в которой описывается интеграция HTML Tidy и .NET. Если в двух словах то это либо P/Invoke либо COM Iterop. Брр...
Fix Up Your HTML with HTML Tidy and .NET

Ну и раз уж я удосужился написать пост, то упомяну что я завел себе твиттер :)
http://twitter.com/alexey_diyan

В твиттер я делаю посты очень часто. Всех интересующихся заверяю, что посты в твиттер буду делать только на техническую тематику.
Посты обычно касаются либо каких-то актуальных для меня вещей, изредка бывают 140-символьные размышлизмы.

NHibernate. Fluent NHibernate. Первые впечатления

2009-11-22T13:59:00.001-08:00

Не так давно я слушал доклад на тему ADO.NET Entity Framework 4.0, который читал на собрании Uneta Александр Кондуфоров. До недавнего времени мой опыт использования Entity Framework (1.0) можно было смело назвать более чем скромным. Вдохновленный услышанным докладом, я решил все таки заполнить пробелы своих знаний в области ORM.

Причем решил пойти по не самому простому пути. Вначале я решил как можно ближе ознакомится с более зрелой ORM, которая широко признана в ALT.NET сообществе - NHibernate.

В своем багаже знаний хочется иметь понимание того как строится уровень доступа к данным в наших приложениях при использовании как минимум двух ORM - NHibernate и Entity Framework. Это позволит, в случае необходимости, более взвешенно принимать решение в пользу того или иного ORM. Более того, каждый из этих ORM предполагает несколько вариантов их использования.

Например у Entity Framework 4.0 существуют как минимум три подхода: Database first, Model first, Code only. Причем можно использовать либо не использовать POCO объекты.

Довольно много информации, включая ссылки, можно почерпнуть из поста Саши Entity Framework 4.0: выходим на зрелый уровень.

В различных блогах я довольно часто встречал мнение о том, что порог вхождения в NHibernate выше чем в Entity Framework. Так же довольно часто противопоставляют Anemic Data Model у Entity Framework и Rich Data Model у NHibernate. Например в посте Ivan'а Старые песни о главном: роль ООП при работе с данными... количество комментариев перевалило за 90. :)

Что же я хотел получить от NHibernate? Вот список важных для меня моментов:

полная изоляция от базы данных во всех юнит-тестах. В первую очередь рассматривал mockинг DAO/Repository. Еще витали мысли об использовании предварительно подготовленной SQLite базы, но я отказался от этой идеи;

покрытие тестами уровня доступа к данным. Возможность написания интеграционных тестов на живую БД, которые покрывают все DAO/Repository;

хотел получить Persistance Ignorance как можно меньшей кровью;

иметь возможность использовать Linq для написания запросов, а так же какой-нибудь API для вызова хранимых процедур.

В качестве полигона для своих проб я выбрал SQLite, т.к. меня интересовал в первую очередь ORM, к тому же я не хотел устанавливать на свой домашний ноутбук никаких полновесных СУБД.

В начале я пробовал описать конфигурацию NHibernate в Application configuration file, потом описывал конфигурацию императивно в коде и в конечном счете остановился императивной конфигурации в коде с помощью библиотеки Fluent NHibernate.

Конфигурация выглядит достаточно просто и очень легко читается:

var session = Fluently.Configure()
    .Database(SQLiteConfiguration.Standard
    .ShowSql()
    .UsingFile(@"D:\projects\DotNET\NHibernatePlayground\DB\northwindEF.db"))
    .Mappings(m => m.FluentMappings.AddFromAssemblyOf())
    .BuildSessionFactory()
    .OpenSession();

Так же, по мере изучения configuraion API у NHibernate, я обнаружил возможность трассировки всех SQL-запросов в лог с помощью конфигурирования трассировщика в log4net. Пока это не опробовал, но планирую это сделать. Это довольно удобно для отладки и этого очень сильно не хватало при работе с Entity Framework. Там была возможность написать свой механизм трассировки, но такого готового решения, как у NHibernate я у EF не обнаружил. Буду очень рад, если узнаю что EF это умеет и что я просто недостаточно хорошо искал.

Далее я пришел к выводу, что у NHibernate-решения существует по крайней мере три подхода для работы с данными:

“канонический” подход, который пришел с Hibernate. Программист описывает объектную модель в виде набора POCO-объектов. Если со стороны БД у нас есть связи, то со стороны .NET у нас будут navigation-свойства с типизированными коллециями. Меппинг между .NET и БД описывается в специальных *.hbm.xml-файлах. Вполне возможно, этот подход можно было бы назвать удобным, если бы у него была мощная поддержка в Visual Studio в виде визуального дизайнера;

проект Castle ActiveRecord. Однако я эти проекты не рассматривал, т.к. ActiveRecord влияет на мою доменную модель. При его использовании мы должны помечать свои классы и свойства атрибутами, которые описывают меппинг к БД, а это нарушает Persistence Ignorance. В любом случае, этот подход вполне имеет право на жизнь в небольших проектах;

описание меппинга с помощью Fluent NHibernate. Мне этот вариант понравился больше всего.

В Fluent NHibernate меппинг описывается на C# языке, что упрощает рефакторинг, предполагает наличие IntelliSense, а так же минимальную проверку грубых оплошностей в виде compile-time errors.

Кроме того, у Fluent NHibernate есть две killer-фичи - это Auto Mapping + Conventions и Persistence specification testing.

Auto Mapping я пока не использовал и пошел по пути “медленно но верно”. В качестве исходной БД я взял базу Northwind. По мере описания меппинга, я удивился насколько мощными возможностями обладает NHibernate. Например, NHibernate умеет круто меппить иерархии классов - table per class hierarchy, table per subclass, table per concrete class. Не знаю, насколько Fluent NHibernate покрывает возможности, заложенные в hbm.xml-меппинге, но он помог мне описать все нужные мне правила, не смотря на то, что я ни в коем случае не пытался прогнуть доменную модель под схему базы. Весь API по меппингу у Fluent NHibernate можно посмотреть по этой ссылке.

Вот например как у меня выглядит класс Customer:

public class Customer
{
    public virtual string ID { get; set; }
    public virtual string CompanyName { get; set; }
    public virtual string ContactName { get; set; }
    public virtual string ContactTitle { get; set; }
    public virtual string Address { get; set; }
    public virtual string City { get; set; }
    public virtual string Region { get; set; }
    public virtual string PostalCode { get; set; }
    public virtual string Country { get; set; }
    public virtual string Phone { get; set; }
    public virtual string Fax { get; set; }
    public virtual IList Orders { get; private set; } 
}

Соответственно, меппинг этого класса выглядит вот так:

public class CustomerMap : ClassMap
{
    public CustomerMap()
    {
        Table("Customers");
        Id(x => x.ID).Column("CustomerID").Length(5);
        Map(x => x.CompanyName).Length(40).Not.Nullable();
        Map(x => x.ContactName).Length(30);
        Map(x => x.ContactTitle).Length(30);
        Map(x => x.Address).Length(60);
        Map(x => x.City).Length(15);
        Map(x => x.Region).Length(15);
        Map(x => x.PostalCode).Length(10);
        Map(x => x.Country).Length(15);
        Map(x => x.Phone).Length(24);
        Map(x => x.Fax).Length(24);
        HasMany(x => x.Orders).KeyColumn("CustomerID");
    }
}

Учитывая, что меппинг описывается вручную, то для того чтобы быть 100% уверенным в его корректности, необходимы тесты. Команда Fluent NHibernate подумала и над этой проблемой и предложила решение в виде Persistence specification testing, который моем случае выглядит следующим образом:

[TestMethod]
public void Save_Customer_in_database()
{
    RemoveCustomerIfExists("A");
    new PersistenceSpecification(TestHelper.GetSession())
        .CheckProperty(c => c.ID, "A")
        .CheckProperty(c => c.CompanyName, "TestCompanyName")
        .CheckProperty(c => c.ContactName, "TestContactName")
        .CheckProperty(c => c.ContactTitle, "TestContactTitle")
        .CheckProperty(c => c.Address, "TestAddress")
        .CheckProperty(c => c.City, "TestCity")
        .CheckProperty(c => c.Region, "TestRegion")
        .CheckProperty(c => c.PostalCode, "TestPostalCode")
        .CheckProperty(c => c.Country, "TestCountry")
        .CheckProperty(c => c.Phone, "TestPhone")
        .CheckProperty(c => c.Fax, "TestFax")
        .VerifyTheMappings();
}

Этот тест делает следующее:

приводит БД в предсостояние для теста (удаляет кастомера, если он уже существует);

создает экземпляр Customer с заданными параметрами;

вставляет данные по этому кастомеру в базу данных;

извлекает из базы данных запись в другой экземпляр класса Customer;

проверяет что полученный Customer соответствует оригинальному.

Еще стоило бы немного рассказать о HQL, Criteria API, NHibernate.Linq, Query Batcher и о случае “вау! какой же умный этот NHibernate”, но это не сейчас.

На этом пожалуй хватит для одного поста. Буду очень благодарен за любой feedback, как положительный так и отрицательный.

[UPDATE]
Поменял тему в блоге на более нейтральную. Подключил google-code-prettify для подсветки синтаксиса. Надеюсь теперь будет удобне читать.

Библиотека для объектно-объектного маппинга

2009-10-19T11:40:00.000-07:00

Вы подготовились к приходу AutoMapper?
http://blogs.gotdotnet.ru/personal/butaji/PermaLink.aspx?guid=9d2469ee-7c12-4551-8f15-6acdc155f5c6

Прикольная штучка. Позволяет избегать тупых методов проекций DataEntity to DomainEntity, DomainEntity to ServiceEntity...
Вроде как сама все волшебно перекладывает. Естественно, вы скажете что побочный эффект - runtime errors.

Но там для раннего выявления таких проблем сделали какой-то механизм самотестирования. Типа можно при старте приложения дернуть метод и он конфигурацию протестирует.

В общем сплошное волшебство... интересно сколько мозговой маны потребует это волшебство при наложении заклинаний. :)

Parallel Extensions для .NET. Ссылки

2009-07-10T08:35:00.000-07:00

Хочу предупредить, что ссылки достаточно старые. Уверен, что на данный момент есть масса свежего материала. Насколько я знаю, эту библиотеку включат в .NET 4.0.

Parallel Extensions для .net 3.5
http://habrahabr.ru/blogs/net/45732/

На мой взгляд самая удачная статья для ознакомления с библиотекой Parallel Extensions. Описывается структура библиотеки и введение в Task Parallel Library.

Оптимизация управляемого кода для многоядерных компьютеров
http://msdn.microsoft.com/ru-ru/magazine/cc163340.aspx

Достаточно объемная статья. Интересен пример, в котором показывается три варианта реализации алгоритма: однопоточный, многопоточный с использованием стандартного API в .NET, многопоточный с использованием Parallel Extensions.
Несколько полнее описан Task Parallel Library. Описываются задания (Task) и диспетчер заданий (TaskManager), правда с момента написания статьи произошли небольшие изменения в API.

Блог команды, которая занимается разработкой Parallel Extensions
http://blogs.msdn.com/pfxteam/default.aspx

В блоге доступна обширная информация по API библиотеки и описаны типовые сценарии.

Multiple thread-local state elements in a loop
http://blogs.msdn.com/pfxteam/archive/2008/05/28/8556655.aspx

Описывается работа с типом ParallelState - контейнер для объектов которые "зашарены" на поток. В принципе API относительно удобный. Я использовал этот класс на проекте, но потом от него отказался. Перешел на кеширование объектов на уровне потока, которое предоставляет IoC контейнер (в моем случае это Castle.Windsor). Объекты запрашиваются у ServiceLocator'а, который я реализовал как фасад к Castle.Windsor.

Coordination Data Structures Overview
http://blogs.msdn.com/pfxteam/archive/2008/06/18/8620615.aspx

Coordination Data Structures – LazyInit
http://blogs.msdn.com/pedram/archive/2008/06/02/coordination-data-structures-lazyinit-t.aspx

По двум ссылкам выше, описываются структуры, которые можно использовать в многопоточных сценариях. Как правило эти структуры достаточно слабо описывают в статьях, которые посвящены библиотеке Parallel Extensions.

Waltzing Through the Parallel Extensions June CTP: Synchronization Primitives
http://blogs.microsoft.co.il/blogs/sasha/archive/2008/06/11/waltzing-through-the-parallel-extensions-june-ctp-synchronization-primitives.aspx

Есть элементы синхронизации в .NET, а есть и в Parallel Extensions. :)
Да, я знаю что это такое и зачем это нужно, но мне лень это описывать :)

TaskManager – The Range Rover of the .Net 4 Parallel Extensions
http://www.lovethedot.net/2009/03/taskmanager-range-rover-of-net-4.html

Очень хорошо описывается интерфейс класса TaskManager. Этот класс нужно использовать, если вам необходимо явно указать сколько процессоров/потоков вы готовы отдать планировщику. По-умолчанию планировщик использует все доступные ресурсы CPU.

Сравнение 72 реализаций языков программирования

2009-06-03T03:07:00.000-07:00

Сравнение 72 реализаций языков программирования:
http://www.opennet.ru/opennews/art.shtml?num=21974

Прямая ссылка на картинку с визуальным отчетом:
http://gmarceau.qc.ca/blog/uploaded_images/size-vs-speed-vs-depandability.png

Легенда к визуальному отчету из которой видно что нижний левый угол это идеальные языки программирования:
http://gmarceau.qc.ca/blog/uploaded_images/size-vs-speed-vs-depandability--context-3.png

Субъективные выводы по визульному отчету:
- Java существенно медленнее и несколько менее удобный язык чем C#
- Perl по скорости быстрее чем Python, а Python практически такой же по скорости как и PHP
- OCaml и luajit выглядят как идеальные языки. Я только не пойму luajit это Lua + Jit Compiler или как? :)

Каким должен быть правильный BL и DAL?

2009-04-25T08:54:00.000-07:00

Не так давно нашел на ряд постов, которые сформировали у меня определенное видение решения классической задачки по передачи данных через ряд уровней - Data access layer -> Business layer -> Presentation layer.

Первым был пост Repository is the new Singleton от Oren Eini aka Ayende Rahien.

В этом посте Ayende говорит что ему не очень нравится непосредственно сам паттерн Repository, более того от отмечает что в большистве случаев этот паттерн еще и не совсем правильно используют.

Дествительно, с появлением LINQ и NHibernate/LinqToSql/ADO.NET Entity Framework подход к получению данных довольно сильно изменился.

И я придерживаюсь того мнения что нужно постепенно уходить от практики написания огромного количества методов вида GetCustomer(id), GetCustomerWithAddresses(id) и начинать использовать механизм запросов даже на верхних уровнях.

Если этого не делать, то мы очень быстро прийдем к достаточно некрасивому Data access layer'у - Kobe – Data Access done wrong.

В своем следующем посте - "The DAL should go all the way to UI" Ayende развивает идею и очень наглядно показывает какую цену приходится платить за неудачную реализацию Data access layer'а.

Действительно, если делать sorting и paging по-честному, через Business Layer, то приходится вручную писать кучу методов, которые похожи друг на друга как близнецы браться, что как раз нарушает принцип DRY (Don't Repeat Yourself).

Подход Ayende мне показался очень уместным, однако меня смутило отсутствие ограничений по извлечению даных на UI-уровне. Возможно, я параноик, но я бы хотел все вызовы по извлечению данных прокидывать через Business Layer. Как минимум это даст возможность прикрутить Caching/Logging/Security на query-методы.

В ответ на пост Ayende, другой блоггер Justin Etheredge сделал пост в котором привел достаточно удачную на мой взгляд реализацию paging'а и сортировки.

В результате, однозначно для себя я решил несколько моментов:
- Классы IRepository должны быть максимально небольшими и простыми
- При получении данных необходимо иметь возможность строить цепочку из filtering, paging, sorting, поскольку это дает намного больше гибкости
- Presentation Layer не должен работать с чрезмерно богатым интерфейсом, этот уровень должен использовать только то, что предоставляет ему Business Layer
- Все большие либо нетривиальные запросы стоит инкапсулировать в отдельные Query-объекты

Интересно, насколько удобно будет использовать это решение когда у нас пользовательский интерфейс написан на Silverlight? Ведь в таких случаях мы Business Layer не видим напрямую в своем Silverlight-приложении, а работаем с удаленными WCF-сервисами.

SQLite для .NET разработчика. Ссылки.

2009-04-14T03:12:00.000-07:00

Краткое описание на Wikipedia:
http://ru.wikipedia.org/wiki/SQLite

Обычная энциклопедическая статья, которая в общих чертах описывает функциональность этой встроенной СУБД. Очень радует лицензия продукта, которая Public Domain.

Официальный сайт SQLite
http://www.sqlite.org/

.NET программисту особенно тут делать нечего. Однако стоит прочитать две статьи в разделе Documentation - "Appropriate Uses For SQLite" и "Distinctive Features" чтобы иметь четкое понимание того, как именно позиционируется данный продукт.

SQLite Management Tools
http://www.sqlite.org/cvstrac/wiki?p=ManagementTools

Утилиты, которые позволяют управлять и выполнять запросы к базе SQLite

SQLite Converter Tools
http://www.sqlite.org/cvstrac/wiki?p=ConverterTools

Утилиты для конвертирования форматов других баз данных в формат SQLite и, наоборот.

SQLite Wrappers
http://www.sqlite.org/cvstrac/wiki?p=SqliteWrappers

Библиотеки, которые позволяют обращаться к базе SQLite из различных языков программирования.

System.Data.SQLite
http://sqlite.phxsoftware.com/

Наиболее развитый на мой взглять ADO.NET Data Provider для SQLite.

На официальном сайте можно отметить следующие интересные возможности этого проекта:
- Полная поддержка стека ADO.NET 2.0
- Поддержка .NET, .NET Compact Framework, Mono
- Поддержка ADO.NET Entity Framework, который доступен в .NET 3.5
- Design-Time поддержка в Visual Studio 2008
- Есть возможность шифрования базы данных

Для того чтобы распространять .NET проект, в котором используется база данных SQLite достаточно включить в него сборку System.Data.SQLite.dll, которая сама уже содержит оригинальную библиотеку.
Кроме того, можно использовать альтернативный вариант распространения - включать в дистрибутив приложения сборку System.Data.SQLite.dll из каталога ManagedOnly + оригинальную sqlite3.dll.

[UPDATE 2009-11-26]

Пост вызвыл активную реакцию, чему я безмерно рад. Большое спасибо за фидбек, я получил целый ряд полезных "зацепок", которые в последствии могут пригодится.

Насчет ссылочной целостности в SQLite. Действительно, неделю назад обнаружил в документации что по-умолчанию в SQLite не включены FK Constraints. Да, не фонтан. Пусть даже это и встроенная СУБД, но я бы не отказался от такого полезного механизма контроля.

По ссылке ниже описывается как можно проверить включены ли они или нет и что нужно сделать чтобы их таки включить:
http://www.sqlite.org/foreignkeys.html

Из документации видно, что в будущих релизах FK Constraints могут быть включены.

Плюс еще довольно полезная информация по поводу того, чего SQLite не умеет из SQL92 стандарта:
http://www.sqlite.org/omitted.html

Пока для себя расставил такие приоритеты:
- если размер дистрибутива важен, и можно принебречь остутствием ряда продвинутых фич, то я предпочту SQLite;
- требовать уж очень высокой скорости работы от встроенной СУБД думаю что не стоит;
- Embedded Firebird выгодно отличается от SQLite возможностью с нее "соскочить" на полновесную Firebird. Предполагаю что это будет максимально безполезненно;
- Еще подумываю об необходимости использовании ORM + встроенная БД. Тогда и поставщиков БД можно будет менять как перчатки. Ну или почти...

Доступ к DreamSpark по студенческому билету для украинских студентов и аспирантов

2009-03-18T09:30:00.000-07:00

Если ты студент и у тебя есть студенческий билет, то ты можешь получить ряд продуктов бесплатно:
Visual Studio 2008
Visual Studio 2005
XNA Game Studio 3
SQL Server 2008 Developer
Windows Server 2003
Windows Server 2008 Standard
Expression Studio 2

Подробности тут:
Доступ к DreamSpark по студенческому билету для украинских студентов и аспирантов

Необычный подход к написанию юнит тестов

2009-03-16T03:40:00.000-07:00

Обнаружил довольно необычный подход к написанию юнит тестов у автора вот этого поста:
Test Driven Design и Test First Development -- в чем разница?

Меня привлекло то, что тест класс представляет из себя наследник тестируемого класса.

Приведу пример классического и альтернативного подхода (пример из документации NUnit).

Тестируемый класс:

namespace bank
{
 public class Account
 {
   private float balance;
   public void Deposit(float amount)
   {
     balance+=amount;
   }

   public void Withdraw(float amount)
   {
     balance-=amount;
   }

   public void TransferFunds(Account destination, float amount)
   {
   }

   public float Balance
   {
     get{ return balance;}
   }
 }
}

Тест, написаный при помощи "классического" подхода:

namespace bank
{
 using NUnit.Framework;

 [TestFixture]
 public class AccountTest
 {
   [Test]
   public void TransferFunds()
   {
     Account source = new Account();
     source.Deposit(200.00F);
     Account destination = new Account();
     destination.Deposit(150.00F);

     source.TransferFunds(destination, 100.00F);
     Assert.AreEqual(250.00F, destination.Balance);
     Assert.AreEqual(100.00F, source.Balance);
 
   }
 }
}

Тест, написанный с помощью альтернативного подхода с наследованием:

namespace bank
{
 using NUnit.Framework;

 [TestFixture]
 public class AccountTest : Account
 {
   [Test]
   public void TestTransferFunds()
   {
     this.Deposit(200.00F);
     Account destination = new Account();
     destination.Deposit(150.00F);

     this.TransferFunds(destination, 100.00F);
     Assert.AreEqual(250.00F, destination.Balance);
     Assert.AreEqual(100.00F, this.Balance);
   }
 }
}

Сразу отмечу, что конкретно в этом примере второй вариант, вероятно, выглядит неудачно. Скорее всего в каких-то случаях наследование, возможно, выглядит более привлекательно.

Лично у меня возникает вопрос. А стоит ли вообще так писать тесты?

У меня сходу возникли следующие мысли насчет альтернативного подхода:
+ Наследование позволяет протестировать protected методы
+ Я могу написать helper-методы в тест классе, который будет активно работать с protected методами и свойствами
- Наследование дает бОльшую связность между тестовым и тестируемым классом
- Наследование скорее всего завяжет мне руки в SetUp/TearDown методах
- Если класс sealed, то о подходе с наследованием можно забыть
- Когда я пишу классический тест-метод, то я получаю лаконичную документацию к своему коду в виде маленьких примеров
- Когда я пишу классический тест-метод, то я использую класс точно так же как это делает production-код
- У класса Account будет аж два клиента - production code and unit tests, что как правило будет положительно отражаться на его интерфейсе

Очень интересны ваши мнения на этот счет.

Тест. Какой вы ученый?

2009-03-11T13:19:00.000-07:00

Очередное баловство на тему тестов.

Да, действительно, я всегда стараюсь копнуть глубоко в тех вещах, которыми занимаюсь, которые считаю важными для себя.

Как правило это играет мне на руку, хотя иногда все-же делает меня занудой. :)

О, да вы - физик.

Вы дотошны и предпочитаете во всем докапываться до самой сути вещей. Перед покупкой сложной техники вы обязательно потратите кучу времени на сравнение всех возможных моделей пока не узнаете про них все. Порой вы иронично посмеиваетесь над серьезностью этого мира, но мало кто так же хорошо, как и вы, понимает, насколько хрупкая и сложная игрушка этот самый мир.

Пройти тест

IronPython. Ссылки.

2009-02-19T05:14:00.000-08:00

Начинаем работать с IronPython.
http://blogs.gotdotnet.ru/personal/AlexanderByndyu/PermaLink.aspx?guid=71d5dcff-7833-4242-ac06-5388ad993acf

Entry point для того чтобы начать работать с IronPython в Visual Studio 2008.

Блог автора языка IronPython:
http://blogs.msdn.com/haibo_luo/default.aspx

IronPython: Grab the .NET Type
http://blogs.msdn.com/haibo_luo/archive/2007/09/25/5130087.aspx

Можно сказать entry point по IronPython/.NET interop. Очень мало, но наглядно :)

IronPython: Keyword Argument to Set .NET Property/Field
http://blogs.msdn.com/haibo_luo/archive/2007/10/02/5246577.aspx

Если кто-нибудь любит свеженькие конструкции C# вроде Object Initializer, то стоит просмотреть этот пост.

IronPython: Passing Arguments for a Call
http://blogs.msdn.com/haibo_luo/archive/2007/10/01/5230964.aspx

Примеры использования разных способов передачи параметров в функцию - позиционные параметры, параметры со значением по-умолчанию, опциональные параметры, передача параметра по имени.

IronPython: Provide (or not) Argument for by-ref Parameter
http://blogs.msdn.com/haibo_luo/archive/2007/10/04/5284947.aspx

Вызов методов с ref-параметрами.

IronPython Cookbook
http://www.ironpython.info/index.php/Main_Page

Собрание материалов по IronPython.

SimplePrograms
http://wiki.python.org/moin/SimplePrograms

Своеобразные подсказки для тех, кто не хочет держать все время языковые конструкции в голове ;)

DLR Hosting and related stuff...
http://blogs.msdn.com/seshadripv/default.aspx

Релизная версия IronPython 2.0 работает поверх Dynamic Language Runtime. Если вам (не дай бог :) ) придется интегрировать хостинг Python-скриптов с вашим .NET-приложением, то тут можно почерпнуть максимум возможной информации.

Тест. Какая культура вам ближе?

2009-02-09T14:32:00.000-08:00

Решил расслабить мозги после тяжелого трудового понедельника очередным тестом :)

Поздравляем!!! Вам ближе американская культура

Вас зовет земля свободы! Вам импонируют американское видение жизни и ценности "нового света".

Пройти тест

KDE 4.2. Релиз для всех.

2009-01-30T03:52:00.000-08:00

Выпущен релиз KDE 4.2, который, как утверждают разработчики, уже готов для конечного пользователя.

До этого было два релиза, которые опционально включались в дистрибутивы, однако не были готовы к повседневному использованию простыми смертными.

Обзор. Можно ограничиться просмотром картинок :)
http://adymo.blogspot.com/2009/01/kde4-review-from-inside-out-part-1.html
http://adymo.blogspot.com/2009/01/kde-42-review-from-inside-out-part-2.html

Я с большим интересом наблюдаю за развитием ветки 4.x. Было даже несколько попыток установить его на свой дистрибутив Ubunut. Однако каждый раз я возвращался на стабильный Gnome. Хотя во многих моментах KDE 4.x мне нравится больше чем Gnome.

Отмечу так же что стабильный релиз KDE 3.5 мне вообще не нравился.

Знаю ли я русский язык?

2008-12-20T05:17:00.000-08:00

Недавно наткнулся на нехитрый тест по проверке знаний русского языка.

Я проверил свои знания русского языка и получил четверку.

Сходи, проверься?

Кроме информации выше, на странице был еще вот такое резюме по поводу моего результата:

Вы ответили на 6 из 8 простых вопросов. Не самый плохой результат на общем фоне. Скорее всего, вы неплохо знали русский язык в школе, просто было это давно, и теперь учебник Розенталя для вас заменяет грамматическая автопроверка в "Ворде". Гордиться вам особенно нечем, но для выживания в среде носителей русского языка этого вполне хватит. Таких, как вы, в стране, согласно опросу ВЦИОМа, - 21%.*

Какие мои личные выводы?

1. Мои учителя действительно были правы, когда ставили мне 4 на протяжении многих лет школы.
2. Спустя много лет мой мозг еще не успел засохнуть :)
3. Как гражданин Украины, который родился и вырос в этой стране, вполне могу себе позволить иметь оценку четыре по языку, который не является государственным.
4. По украинскому языку у меня тоже было четыре. Но это связано с тем что я говорю и думаю на русском языке, а мое любимое, [censored], государство считает что я (и еще 1/2 - 1/3 граждан) должен знать государственный язык.

XML в качестве DataSource для юнит тестов

2008-11-09T08:12:00.000-08:00

Что-то в последнее время я вижу просто невообразимое обилие постов на тему TDD, что не может не радовать :)

Регулярно читая посты одного моего уважаемого коллеги по имени Mike Chaliy обнаружил заметку CSV у якості DataSource.

Вначале хотел оставить комментарий, но потом решил сделать это в виде отдельного поста.

Итак, Mike предпочитает CSV. Он достаточно подробно описал причины его решения, поэтому я решил немного пропиарить формат XML :)

Естественно что для табличных данных XML дает достаточно неслабый overhead. Для того чтобы заполнить файл нужно потратить дополнительное время чтобы описать XML-структуру для новых данных вместо того, чтобы просто их перечислять.

На мой взгляд, у CSV формата в качестве источника данных для юнит тестов так же есть несколько недостатков, которые я привожу ниже:

1. Изменение структур данных. Добавляется новое либо удаляется старое поле. Приходится менять CSV документ. Причем придется чуть-чуть поколдовать над загрузкой документа в тот же Excel для того чтобы представить его в табличном виде. После чего нужно отредактировать эту таблицу и опять сохранить в CSV.

В случае с XML можно обойтись банальным Find/Replace в текстовом редакторе. Хотя это конечно дело вкуса. В любом случае нужно помнить об этом, поскольку для кого-то это может быть проблемой.

2. Обработка ошибок чтения. В .NET достаточно бедные средства для того чтобы работать с CSV форматом. С другой стороны, связка XML-файл + XSD-схема + класс-контейнер полученный от XSD.exe + чтение файла с валидацией по схеме выглядит очень привлекательно.

Предположим другой разработчик, меняет функциональность подсистемы. Для этого он должен дополнить CSV-файл новыми данными. Он обновляет документ, и тут бац! Оказывается что он ошибся, поэтому документ не читается. Очень часто потребуется немного поднапрячь свой мозг чтобы понять что же там не так.

Если бы он обновлял XML документ он бы получил довольно внятное объяснение почему документ не может быть загружен.

3. Строгая типизация. Если использовать класс-контейнер, то сериализатор сам будет делать все приведения типов. В случае с CSV тебе придется этот код писать самому.

В качестве контр-аргумента можно сказать что разработчику все равно придется перекладывать данные из Xml-класса в класс, который нужен юнит тесту.

Таким образом, для меня выбор между CSV и XML практически эквивалентен с очень небольшим перевесом в пользу XML ;)

Начинающим на заметку. Два поста об оформлении исходного кода.

2008-09-26T02:07:00.000-07:00

Фигурные скобки и их влияние на качество кода:

http://blogs.gotdotnet.ru/personal/ezakhareyev/CommentView.aspx?guid=77a8ef9b-19cb-401a-b832-ffac0ad7b3ad

В статье автор дает достаточно логичное обоснование почему фигурные скобки нужно расставлять именно так, как он предлагает :)

Точки выхода или немного о структурном программировании:

http://blogs.gotdotnet.ru/personal/XaocCPS/PermaLink.aspx?guid=72b2322a-6782-4ee6-b4e9-66df9678b56a

Так же обоснование одного из правил по оформлению методов и функций. Я разделяю точку зрения автора с одним лишь исключением: если метод очень простой И содержит 5-ть и менее строк, то я все-же использую несколько точек выхода.

UPDATE:
Поправил вторую ссылку в которой текст и целевой url не совпадали.

Пожалуй отвечу на коментарии прямо в этот пост.

[mormat] Не знаю, почему в компании DevExpress другие гайдлайны (открывающая скобка на старой" строчке), неужели им удобно читать собственный код.. Сила привычки?

Мне один мой коллега на работе сказал что Мартин Фаулер так же придерживается нотации, согласно которой открывающая фигурная скобка не переносится на новую строку. Так что насчет расположения фигурных скобок это скорее вопрос выбора. Я не берусь утверждать что переносить фигурную скобку на новую строку это серебряная пуля, но мне нравится именно эта нотация.

[mormat] Что касается множественных return-ов в теле метода, то помоему односторонняя совершенно статья. Где обоснование, где рассмотрение альтернативных точек зрения? Где плюсы, минусы? Я, например, знаю обратную точку зрения, что ряд валидирующих проверок в начале метода (с return-ами) сильно упрощает поддержку кода.

Честно говоря тут я более категорично настроен :) Если речь идет имено о валидации переданных данных, то тут стоит бросать исключения, а не использовать return. Хотя, уверен что ты имел ввиду скорее не валидацию параметров, а проверку на применимость метода.

Как бы там ни было гораздо удобнее поставить точку останова на один-единственный return для того чтобы посмотреть возвращаемое значение.

К тому же если у меня идет некотороая проверка данных и лишняя вложенность уложняет код, то это можно решить следующим образом:

copy to clipboardподсветка кода
public ResultType DoSomething(SomeType value)  
{  
    // Если параметр невалидный, то этот метод прокинет исключение.  
    ValidateSomeType(value);  
  
    // В некоторых случаях бывает удобно инициализировать объект значением по-умолчанию сразу с его объявлением.  
    ResultType result;  
  
    // Если нам не нужно выполнять никаких действий над объектом, то мы просто выйдем из метода.  
    if (IsAcceptable(value))  
    {  
        ...  
    }  
  
    return result;  
}  

Миграция данных из одной таблицы в другую. Гибкое решение.

2008-08-15T10:04:00.000-07:00

Буквально пару дней назад один мой знакомый, начинающий .NET программист показал мне код, который занимается переносом данных из одной базы в другую, причем паралельно делает преобразование типов:

copy to clipboardподсветка кода
string nsvid="";  
string nsit="";  
string type="";  
string nzav="";  
string ninv="";  
string lim="";  
string tochnost="";  
string where="";  
System.DateTime dtp = System.DateTime.Today;  
Int64 pov=0;  
System.DateTime dtn = System.DateTime.Today;  
string texsos="";  
  
for (Int64 i = 0; i <>
{  
    if (!bdt[int.Parse(i.ToString())].Is___п_пNull())  
       pp = long.Parse(bdt[int.Parse(i.ToString())].___п_п.ToString());  
    if (!bdt[int.Parse(i.ToString())].Is___свид_Null())  
       nsvid = bdt[int.Parse(i.ToString())].___свид_;  
    if (!bdt[int.Parse(i.ToString())].IsНаименование_СИТNull())  
        nsit = bdt[int.Parse(i.ToString())].Наименование_СИТ;  
    if (!bdt[int.Parse(i.ToString())].IsТипNull())  
        type = bdt[int.Parse(i.ToString())].Тип;  
    if (!bdt[int.Parse(i.ToString())].Is_Заводской__Null())  
        nzav = bdt[int.Parse(i.ToString())]._Заводской__;  
    if (!bdt[int.Parse(i.ToString())].Is_Инвентарный___Null())  
        ninv = bdt[int.Parse(i.ToString())]._Инвентарный___;  
    if (!bdt[int.Parse(i.ToString())].IsПредел_измеренийNull())  
        lim = bdt[int.Parse(i.ToString())].Предел_измерений;  
    if (!bdt[int.Parse(i.ToString())].Is_Класс__разряд__ц_д___погрешностьNull())  
        tochnost = bdt[int.Parse(i.ToString())]._Класс__разряд__ц_д___погрешность;  
    if (!bdt[int.Parse(i.ToString())].IsВладелецNull())  
        where = bdt[int.Parse(i.ToString())].Владелец;  
    if (!bdt[int.Parse(i.ToString())].IsДата_поверкиNull())  
        dtp = bdt[int.Parse(i.ToString())].Дата_поверки;  
    if (!bdt[int.Parse(i.ToString())].IsПериодичность_поверкиNull())  
        pov = long.Parse(bdt[int.Parse(i.ToString())].Периодичность_поверки.ToString());  
    if (!bdt[int.Parse(i.ToString())].IsДата_следующей_поверкиNull())  
        dtn = bdt[int.Parse(i.ToString())].Дата_следующей_поверки;  
    if (!bdt[int.Parse(i.ToString())].Is_Тех_состояниеNull())  
        texsos = bdt[int.Parse(i.ToString())]._Тех_состояние;  
  
    pdt.AddPriborRow(i+1, nsvid, nsit, type, nzav, ninv, lim, tochnost, where, dtp, pov, dtn, tochnost);  
     
}  
priborTableAdapter.Update(pdt);  
pdt.AcceptChanges();  

Достаточно беглого взгляда на этот код чтобы понять - реализация метода неоптимальна.

Мы наблюдаем большое количество операторов ветвления, что является признаком плохого тона и должно наталкивать на размышления об улучшении этого кода.

Поэтому, для иллюстрации я на коленке набросал более лаконичный подход, который можно повторно использовать.

1. Делаем универсальный конвертер данных:

copy to clipboardподсветка кода
public static class ConvertUtils  
{  
    public static object ToType(object originalValue, Type targetType)  
    {  
        if (targetType == typeof(string))  
        {  
            return originalValue.ToString();  
        }  
        if (targetType == typeof(int))  
        {  
            return int.Parse(originalValue.ToString());  
        }  
  
        throw new Exception(  
            string.Format(  
            "Type {0} is not expected.",  
            originalValue.GetType().FullName));  
    }  
}  

Если есть необходимость можно расширить метод до ToType(object originalValue, Type originalType, Type targetType)

2. Заводим "словарик" для преобразования данных:

copy to clipboardподсветка кода
var migrateDictionary = new SortedDictionary<string, type="">()  
    {  
        { "___п_п", typeof(long) },  
        { "___свид_", typeof(string) },  
        { "Наименование_СИТ", typeof(string) },  
    };  

Можно расширить словарик до такого вида:

Ключ = Имя исходного поля + его тип
Значение = Имя целевого поля + его тип

3. И непосредственно реализация метода по переносу данных. Ни зависит ни от чего, разве что от ADO.NET, а именно типов DataRow, DataTable, DataSet :)

copy to clipboardподсветка кода
// Объекты DataRow естественно реально существуют :)  
DataRow sourceDataRow = null;  
DataRow targetDataRow = null;  
  
foreach (var migrateInfo in migrateDictionary)  
{  
    var columnName = migrateInfo.Key;  
    var targetType = migrateInfo.Value;  
  
    var sourceValue = sourceDataRow[columnName];  
  
    targetDataRow[columnName] = ConvertUtils.ToType(sourceValue, targetType);  
  
}  

Итого задача сводится только к заполнению словарей, которые описывают алгоритм миграции. Т.е. по сути метод на вход ожидает предельно простые структуры данных, а реализация самого метода пишется один раз для миграции разных типов данных из разных таблиц.

Надеюсь что идея понятна. Не сочтите меня за велосипедостроителя. Я знаю что подобных примеров масса в интернете, и просто хочу донести эту мысль до тех, кто читает этот блог :)

Ubuntu Linux и менеджер пакетов от Debian.

2008-07-30T14:59:00.000-07:00

Провел небольшой эксперимент на тему "насколько хороша ОС Ubuntu Linux (и менеджер пакетов от Debian в частности)".

Лично я просто обажаю систему управления пакетами в Linux, она насколько логичная, мощная и гибкая, что я в нее просто влюблен :)

Неоднократно испытавал на прочность различными способами менеджер пакетов в Ubuntu.

Оставим вопросы о моем ментальном здоровье, вопросы о том, какое ПО нужно устанавливать и использовать. Все же для меня пока ОС Linux это в первую очередь полигон для ведение варварских экспериментов.

Я сделал следующее:
1. Запустил Krusader 2.0 SVN trunk (KDE4/Qt4)
2. Запустил из под него Konsole (KDE3/Qt3)
3. Запустил менеждер пакетов Synaptic и отметил для удаления библиотеку Qt3 и все от нее зависящие
4. Применил изменения, после чего менеджер пакетов удалил мне весь KDE3 и все Qt3 приложения, однако я с нетерпением ждал что же будет с приложением Konsole которое было запущено. Причем это приложение не бездействовало, в нем происходила компиляция Krusader 2.0, ветки trunk.
5. Закрыл Krusader 2.0 SVN trunk
6. Дождался окончания компиляции и обновления Krusader 2.0 в окне Konsole
7. Закрыл окно Konsole, попытался повторно запустить это приложение, но мне сообщили что оно было удалено.
8. Вуаля, это просто великолепно!

Остается надеятся что никаких "хвостов" из-за таких финтов на моем жестком не осталось, а вы как считаете?

Динамические языки в .NET проектах не за горами

2008-06-19T09:34:00.000-07:00

Думаю что многие из .NET разработчиков уже неоднократно слышали о IronPython.

Да, действительно, поддержка настоящего скриптового языка была бы для такой серьезной платформы как .NET очень кстати.

IronPython начинал разрабатываться вначале независимым разработчиком, который в последствии перешел под крыло Microsoft.

Я начинал использовать IronPython еще когда для него не было никакой современной инструментальной поддержки.

Скажу что занятие это не то чтобы совсем уж тяжелое, но все-таки требует некоторой выдержки от разработчика.

Около полугода назад я ознакомился с IronPython Studio, средой разработки на языке IronPyton, которая была выполнена на базе Visual Studio 2008 Shell (isolated mode). Если проще, то это отдельная среда, как две капли воды похожая на Visual Studio 2008, однако исключительно для этого языка.

Сегодня я узнал о существовании IronPython Studio на базе Integrated Shell, что дает возможность сопровождать проекты на IronPython в одном решении вместе с проектами на других языках. А это уже совсем другая история... Очень надеюсь, что я не ошибаюсь на этот счет :)

Интересующимся рекомендую взглянуть на подкаст, который можно взять тут.

Метод Path.Combine, который собирает путь из многочисленного набора аргументов.

2008-06-06T04:21:00.000-07:00

Набрел на статью, которая открыла мне глаза :)

Почему-то я постоянно использовал неудобный Path.Combine(string, string) и ничего с этим не делал.

Настало время перемен :)

Очень креативный скрин с LORа

2008-05-18T15:11:00.000-07:00

Друзья, эта картинка просто выносит мозг.

Я думаю что после этого скриншота вопросов о пределах креативности сообщества пользователей Linux вообще не будет...

...после того как пройдет истерика, традиционно прочесть все комментарии...

Правила внятной обработки ошибок на .NET

2008-04-02T08:03:00.000-07:00

Я довольно неравнодушно отношусь к организации обработки ошибок.

Недавно нашел одну полезную статью, правда на английском языке.

В любом случае стоит прочесть, потому как там содержится выжимка всех приемов, которые стоит использовать при программировании на .NET:

http://www.codeproject.com/KB/architecture/exceptionbestpractices.aspx

От себя добавлю, что даже я не соблюдаю все из перечисленных автором моментов.

Естественно, что это очень плохо...

Фильм "Семь"

2008-03-06T12:51:00.000-08:00

На днях еще раз посмотрел фильм "Семь".

Все-таки Кевин Спейси очень хороший актер. Удивительно, но в такое короткое время, которое он был в кадре, он очень хорошо показал своего героя - серийного убийцу.

Очень понравился его диалог с детективом. Если кто фильм не видел, рекомендую посмотреть в обязательном порядке. Я даже диалог двух детективов с Джоном До несколько раз пересмотрел в оригинальной озвучке.

Джон: Ничего плохого если человек любит свое дело,
Не буду отрицать, что хочу повернуть грех против грешников

Милз: Подожди, но ты же убиваешь невинных

Джон: Невинных? Это шутка такая?
Этот жирняк, который на ногах не стоял.
Ты бы обсмеял его с дружками на улице
Если ты увидишь его, когда сам ешь, то ты не доешь до конца
Потом был адвокат, вы должны мне спасибо сказать за это
Этот человек делал деньги на лжи чтобы насильники и убийцы были на воле

Милз: Убийцы...

Джон: А женщина...

Милз: Убийцы как ты сам, Джон

Джон: Женщина! Такая гадкая внутри, что не смогла бы жить, если только не ее красота снаружи
Торговец наркотиками, педераст и торговец наркотиками
Не забудем про шлюху, разносчицу заразы
Только в этом гавеном мире можно сказать что эти люди невинны
И сказать это не смеясь, вот в чем проблема

Вывод.

Люблю фильмы, которые способны вызвать во мне сильные эмоции. Не важно положительные или отрицательные, стресс или расслабление, принесет мне радость или нагнетет на меня ощущение глубочайшего разочарования...

Очень полезный Add-in для VS 2003

2008-02-20T02:39:00.000-08:00

Кому как, а мне иногда в дебагере очень хочется посмотреть содержимое DataSet :)

Причем хочется посмотреть содержимое целиком. А еще хочется скопировать содержимое, вставить в Exel и поиграться с автофильтрами...

В общем много чего разного хочется, и я вот узнал что все это оказывается очень даже возможно :)

Special QuickWatch for a DataSet

Особенности восприятия против реалий Web-дизайна

2007-12-23T10:23:00.000-08:00

Сегодня испытал на себе достаточно занятные ощущения.

Все выходные я занимался изучением существующего рынка продуктов, которые обеспечивают миграцию данных между СУБД различных поставщиков.

Может быть проблема была в моей усталости, либо в чем-то другом, но вот на этом сайте я потратил неприлично много времени, прежде чем таки нашел то, что искал.

Меня интересовало, какие именно СУБД поддерживает программный продукт. В итоге, после ~5 минутного чтения по-диагонали страниц на сайте я таки обнаружил эту информацию.

Естественно, что эта информация отражалась непосредственно на главной странице сайта.

Каким-то чудом я отсеил как раз ту часть страницы, на которой как раз находилась ключевая информация! Любопытно, не правда ли? :)

Я призадумался. И понял в чем дело. Секция сайта, которая отражала нужную мне информацию напомнила мне рекламный баннер, поэтому мой мозг взял, да и отсеял ее :)

Действительно, опираясь на мой жизненный опыт, я перестал обращать внимания на цветные, яркие анимированные фрагменты, включенные в страницу.

Так что рекламщикам меня не подцепить :))

Суббота. Работа. Ужасное настроение.

2007-12-01T07:43:00.000-08:00

Сегодня наткнулся на грабли с типизированными DataSet, на которые раньше очень часто наступал, но в последнее время этого удавалось избегать.

Видимо это связано с повышением профессионализма :)

Но сегодня как раз тот самый день. И я сижу и наблюдаю эту чертовски загадочное сообщение об ошибке:
Failed to enable constraints. One or more rows contain values violating non-null, unique, or foreign-key constraints.

Какой constraint, какое поле, какой not null, какой уникальный, какой внешний ключ?! ....

Неужели бравые ребята в MS не имели возможности это сделать? Они же умные, не то что я...

Помогите, поделитесь опытом. Какой методологией вы пользуетесь для выявления источника проблемы? :(

Stack trace целиком, если кому интересно:

System.Data.ConstraintException: Failed to enable constraints. One or more rows contain values violating non-null, unique, or foreign-key constraints.
at System.Data.DataSet.FailedEnableConstraints()
at System.Data.DataSet.EnableConstraints()
at System.Data.DataSet.set_EnforceConstraints(Boolean value)
at System.Data.DataTable.EndLoadData()
at System.Data.Common.DbDataAdapter.FillFromReader(Object data, String srcTable, IDataReader dataReader, Int32 startRecord, Int32 maxRecords, DataColumn parentChapterColumn, Object parentChapterValue)
at System.Data.Common.DbDataAdapter.Fill(DataSet dataSet, String srcTable, IDataReader dataReader, Int32 startRecord, Int32 maxRecords)
at System.Data.Common.DbDataAdapter.FillFromCommand(Object data, Int32 startRecord, Int32 maxRecords, String srcTable, IDbCommand command, CommandBehavior behavior)
at System.Data.Common.DbDataAdapter.Fill(DataSet dataSet, Int32 startRecord, Int32 maxRecords, String srcTable, IDbCommand command, CommandBehavior behavior)
at System.Data.Common.DbDataAdapter.Fill(DataSet dataSet)

Список свободного ПО для Windows и обычного пользователя :)

2007-11-17T05:52:00.000-08:00

Я сторонник открытого программного обеспечения. Уверен, что кроме глюков, сторонее ПО обладает гораздо большей гибкостью.

Сегодня общался со своим товарищем, рассказывал ему про свободное ПО и как раз созрела небольшая заметка :)

Итак, список свободного ПО под Windows для среднестатистического, обычного пользователя:

OpenOffice.org - Рекомендую поставить и поработать в нем. По-моему мнению последние версии выполняют 100% нужд обычных пользователей.

Работать в нем стоти только с документами родного формата, несмотря на то, что он прекрасно понимает формат Microsoft Office. Просто так загрузка документа будет в несколько раз быстрее.

Единственная пока в нем проблема, отсутствие хорошей совместимости с Microsoft Access.

Firefox - браузер. Вообще отказываюсь комментировать. Все остальные браузеры в топку. Точка :)

7-zip - упаковщик. может распаковывать RAR 3.0 архивы. Рекомендую формат 7Z для упаковки, по сравнению с ним RAR проигрывает по степени сжатия. В крайнем случае формат ZIP никто не отменял.

Mozilla Thunderbird - почтовый клиент. один мой товарищ, продвинутый пользователь сказал что у этой программы нехватает только одной! фичи, которая есть в коммерческом The Bat! Но эта фича, реально нужна только системным администраторам. По-правде говоря я даже не помню что он говорил... :)

Miranda - многопротокольный клиет для обмена мгновенными сообщениями. В стандартной поставке требует большого количества времени для настройки. Имеет мощнейшую систему плагинов. Рекомендую использовать уже скомпонованные сборки типа Miranda IM - LEM pack или Miranda IM zeleboba's pack

VLC Media Player - видеплеер, который идет в поставке с набором своих самостоятельных кодеков. Умеет воспроизводить большинство распространенных форматов, а так же недокаченное видео. В отличие от других плееров не рвет видео высокого разрешения в процессе просмотра через Wi-Fi сеть.

MPlayer - видеоплеер, который также имеет свои собственные кодеки. Работает без установки - достаточно распаковать архив. После установки 60-мб пакета кодеков воспроизводит АБСОЛЮТНО ВСЁ. Использую как альтернативный плеер. Есть проблемы с работой под Windows Vista.

Notepad++ - очень удобный текстовый редактор. Убийца стандартного блокнота. В большей степени полезен программистам, в меньшей - рядовому пользователю.

WinDjView - программа для просмотра электронный книг в формате DejaVu. Документы формата DejaVu имеют расширение .djvu и для неопытного пользователя чем-то напоминают PDF, но при этом документы намного комактнее из-за того, что там применяется сжатие векторного изображения.

P.S. Естественно, что этот списк можно дополнить софтом для гиков. Может быть я это когда-нибудь и сделаю.

Самый быстрый способ посчитать число уникальных строк

2007-11-09T02:08:00.000-08:00

Самый быстрый способ посчитать число уникальных (и не уникальных) строк.

Предположим, есть входные данные:
abc
bcd
bcd
def
efg
fgh
efg

Нужно по-быстренькому проверить, что все записи будут уникальны.

Для этого может пригодится Microsoft Exel.

Вставляем этот список значений в столбец.
Добавляем эту формулу =+COUNTIF($A$1:$A$7,A1) в той же строке что и наша первая запись.

При этом нужно проследить чтобы диапазон, заданный в абсолютных координатах A$1:A$7 полностью охватывал все входные данные.

После того как одна ячейка заполнена формулой нужно размножить формулу ровно на все строки данных. Для этого нужно "перетащить" мышью за нижний правый край ячейку с нашей первой формулой.

После этого вы можете увидеть количество повторений каждой строки в исходной коллекции. Можно для эффективности поиска воспользоваться автофильтром.

Чем отличаются ASP.NET проекты Web Application и Web Site

2007-11-08T09:37:00.000-08:00

Нашел довольно внятное объяснение тут.

Общий вывод. Web Site проект это настоящий шлак, который допустим к использованию только в детском саду.

Самое обидное, что проект типа Web Application доступен только начиная с Visual Studio 2005 SP1. В оригинальной 2005-й студии его упразднили... как мы видим по service paсk'у - неудачный ход.

Есть есть конструктивные замечания против. Буду рад услышать.

Необычное поведение индексатора у XmlAttributeCollection

2007-11-08T05:41:00.000-08:00

В .NET 1.1 этот код НЕ работает:

ExtraCell extraCell = new ExtraCell(
node.Attributes[ATTRIBUTE_NAME].Value,
node.Attributes[ATTRIBUTE_VALUE].Value);

а этот - работает:

ExtraCell extraCell = new ExtraCell(
node.Attributes.GetNamedItem(ATTRIBUTE_NAME).Value,
node.Attributes.GetNamedItem(ATTRIBUTE_VALUE).Value);

Остается открытым вопрос... кто виноват :)

UPDATE:

Как оказалось были виноваты мои руки... прошу меня простить за совершенно бесполезный пост :(

Miranda. Проблемы с unicode версией irc.dll

2007-10-14T06:30:00.000-07:00

status_alexus: привет
ctype: +
status_alexus: Miranda IM 0.7.0.48 (IRC v.0.7.0.2 Unicode)
status_alexus: это у тебя
status_alexus: ты знаешь, тут Саша Белый один бажок нашел
status_alexus: если ты юзаешь юникодовую версию irc.dll
ctype: пишет 0.7
status_alexus: то к тебе не приходят сообщения от пользователей имя которых начинается с большой русской буквы С
status_alexus: :)
ctype: да ну
status_alexus: ctype я тебе серьезно говорю
status_alexus: короче мы тут мудились с полчасика
status_alexus: я попробовал все порты (читай кодировки) которые поддерживает сервак онеат
ctype: г.м. я сам на себя послал - приходит
status_alexus: ircd-RU!
status_alexus: да. но у тебя же с латинской С
status_alexus: а я говорю о заглавной русской
ctype: ну я заглавную русскую себе послал
status_alexus: так вот
ctype: а. от пользовоталей
status_alexus: и только в одном случае я видел сообщения от такого пользователя
ctype: прикольно
status_alexus: когда подключался в режиме транслита
status_alexus: но тогда от него приходил транслит, а мне приходилось отправлять латиницей
status_alexus: и ник соотв. его начинался с S
status_alexus: такие от грабли :(
ctype: гы. вообще-то у мну нет знакомых с русскими никами
status_alexus: Аналогично ;)
ctype: так что это не баг, эта фича :)
status_alexus: в общем я буду юзать новый глючный плагин ирки в миранде :)
Sasha_Beluj: =))
status_alexus: а кто юзает ники на русском в IRC пускай идут гулять лесом
Sasha_Beluj: да не. Даже не так
status_alexus: а как?
Sasha_Beluj: те, кто юзает ники с большой буквы С пусть идут гулять :)
status_alexus: не важно
status_alexus: Кошечки, Ромашки и Писечки тоже пусть гуляют...
ctype: меня только один глюк волнует - досихпор rss переодически падает. и плагин без исходников
status_alexus: я RSS давно читаю через Google Reader
Sasha_Beluj: А глюк с буквой С большой не волнует? :)
ctype: Sasha_Belu. абсалютна

Firefox HTML Validator

2007-10-03T06:50:00.000-07:00

Нашел довльно любопытное расширение для Firefox.

На странице находится следующее описание:

Расширение основано на Tidy и OpenSP (SGML Parser). Оба алгоритма были разработаны консорциумом W3C. Оба алгоритма встраиваются внутрь Mozilla Firefox и проводят валидацию локально на вашем компьютере без отправки HTML на сервер третьей стороны.

Любопытно, насколько влияет работа этого плагина на общую производительность во время серфинга.

Окно конфигурации, которое появилось после установки:

Вот непосредственно "рабочее" окно валидатора:

T-SQL. Как "округлить" datetime до date?

2007-10-02T07:13:00.000-07:00

Постоянно забываю :(

convert(datetime, convert(varchar, od.SomeDateTime, 1), 1) as SomeDate

Google Mail vs Велтон телеком. Уведомления о почте

2007-09-29T04:29:00.000-07:00

Когда-то давно, когда у меня был основной почтовый ящик на mail.ru я настраивал уведомления на почте.

Я являюсь абонентом сети "Велтон-телеком" и пользователем почтового сервиса Goggle Mail и хочу поделиться как настроить уведомления о приходе новой почты.

Для этого нужно зайти на сервис Google Mail, выбрать Settings -> Forwarding and POP -> Forwarding.

После этого выбрать пункт "Forward a copy of incoming mail to" и ввести почтовый адрес вида 805XXXXXXX@sms.velton.ua, который содержит семизначный номер вашего телефона.

После этого по приходе новой почте вам будут приходить текстовые сообщения с номера 3333 такого вида:

From: some.address+caf_=8057XXXXXXX=sms.velton.ua@gmail.com
Date: Sat 29 Sep 2007 13^53^52+0300
Subj: Hello world
Text: This is a test e-mail.

Однако, позже я выяснил, что если содержимое письма велико, то это письмо будет приходить кусками несколькими сообщениями.

Так что на повестке дня вопрос по-прежнему открыт.

Total Commander и PDA

2007-08-27T03:33:00.001-07:00

В связи с недавным приобретением КПК постепенно обустраиваю свое рабочее место.

За последние полмесяца софта было перепробовано порядочно. Однако все время меня раздражал тот факт, что с моим устройством приходится работать через проводник, который открывается из окна ActiveSync приложения.

Буквально недавно нашел соответствующий плагин для моего единственно возможного файлового менеджера - Total Commander :)

Плагин WinCE обеспечивает доступ Pocket PC, который  подключен через ActiveSync соединение. Сам плагин выполнен в виде виртуальной файловой системы.

В общем я доволен находкой и скорее всего буду ею пользоваться и на работе и дома.

P.S. Руководствуясь спортивным интересом обнаружил еще плагин WM Explorer  - аналогичный плагин для Far. Любопытно, какой же из двух этих плагинов более функциональный :)

Тестирование - в массы :)

2007-08-26T16:38:00.001-07:00

Пару месяцев назад я проходил один занимательный тест.

В результате получил следующий результат:

Составление вашего психологического портрета окончено. Результаты: Тихий Гений

Довольно редкая и положительная психологическая группа людей. В одежде эти люди не стремятся к гламурному блеску, но умеют найти свой стиль. Волосы, например, красят редко, предпочитая натуральность и уход за кожей. Характер в целом "в штиле", но бывают редкие скачки, выливающиеся в недовольство окружающих. Их мирок кишит неуловимыми замыслами, которые они, однако, не всегда воплощают. Про таких говорят "деньги его любят". В работе Гении делают ставку на свою коммуникабельность, и редко проигрывают. У них отлично получается рисовать и пространственно мыслить, однако задания, требующие усидчивости, им будут не по плечу. Редкие люди, видящие душу Тихого Гения насквозь, ценят и уважают его как друга. Люди этого типа чувствуют свою связь с богом и людьми. Опасными друзьями могут стать попытки забыться от мира: телевизор, компьтер, алкоголь, наркотики.

Пройти тест

А сегодня прошел еще один:

Обратив взор свой в бездну, понял ты, что сила в тебе есть - Надежда

Мы знать, не знаем и не помним, пока не встретимся с бедой, что весь наш мир такой огромный весит на ниточке одной, она ... В палящий зной, Вы тень на горизонте, в кромешной тьме Вы света луч. Вам не приходила в голову мысль, что если во мраке, горит хотя бы один огонёк, то свет не сможет погибнуть никогда! Вы тот, что дарит надежду, на спасение, поддержку близким друзьям, для них вы луч в тёмном царстве. Для света Вы последняя надежда!

Пройти тест

Вот такие вот дела. Если подойти к результатам с некоторой долей юмора, то можно сделать вывод "тихий гений, подающий надежды" :) ...довольно оптимистично ;)

Вожделенное приобретение

2007-08-21T14:22:00.001-07:00

Совсем недавно купил себе КПК, о котором достаточно давно мечтал.

Очень долго колебался и выбирал что же лучше всего себе приобрести. Мой выбор затянулся наверное на целый год, а может быть и на полтора :)

Так или иначе он пошел мне на пользу. Потому что как-то я чуть было не приобрел себе Dell X51.

Вообще это была занятная история. Я уже собрал все свое нажитое и отправился с одним своим товарищем в магазин за покупкой сего девайса, выбил чек и пошел с ним получать наладонник.

Однако, после моей ревизии содержимого коробки стало очевидна нехватка кабеля который должен был идти с ним в поставке. Т.е. складывалась ситуация, обязывающая меня таскать с собой всегда кредл.

Естественно, ребята на выдаче пытались мне впарить этот девайс. Однако я сделал волевое решение и затребовал либо дополнения некомплекта либо возврат денег.

Как раз в тот момент более в наличии этих КПК не было мне вернули деньги.

И вот, спустя больше года и совершенно в другом магазине я таки себе приобрел совершенно другой по классу девайс - Fujitsu Siemens Pocket Loox C550.

Так что я доволен что тогда я таки не сделал эту покупку, потому как технологии за это время не стояли на месте.

Естественно что этот девайс был несколько дороже.

Как говориться сегодня раки (Fujitsu-Siemens) были большие, но за $520 против вчерашних, маленьких (Dell X51) но за $400 ;)

В общем я крайне доволен функциональностью этого умного устройства, если бы не одно НО!

Софт, который осуществляет поддержку Wi-Fi от производителя мало того что малополезный, дык он еще и вредоносный :(

Программу CONNECTMOBILITY-E2C необходимо засовывать непосредственно в естественное отверстие разработчикам. Простите пожалуйста, уважаемые коллеги, но такой софт должно быть стыдно поставлять конечному покупателю.

После того, как я посвятил этой программе достаточно большое время и проколдовал со своим КПК наверное две недели подряд (от случая к случаю, в свободное время) в конечном счете мне открылась святая истина...

Вот целая ветка бесконечно благодарных пользователей этой программы...

"вобщем после хард ресета n560 пикнет и все что было до этого
установлено будет удалено. теперь ни в коем случае не запускаем e2c,
удалить ее не получится т.к. она вшита в винду, но можно просто не
запускать ее."

В общем это оказалось абсолютной правдой. При первом запуске эта замечательная программа вправляет мозг мобильной операционке и лечить это проще всего ампутацией памяти вашего мобильноо питомца...

Такие вот забавные программки поставляются с КПК. Обхохочешься...

Функциональные требования MP3 плееру

2007-08-12T10:11:00.001-07:00

Сегодня общался с товарищем по аське и в ходе беседы я вывел для себя следующие требования:

- небольшие размеры, логичные пропорции
- как можно больше отображаемых строк на экране
- возможность заливки мелодий без дополнительного софта
- удобное управление, возможность управления одной рукой
- работа от стандартного элемента питания (AAA)
- поддержка эквалайзера (бывает что нужно немного докручивать под наушники)

Visual Studio 2008

2007-08-02T13:58:00.001-07:00

Сегодня стал счастливым обладателем версии Beta 2.

Эту версию студии еще называют Orcas. В принципе я уважаю маркетинговые изыски кампаний. Если это им помогает, то пожалуйста ;)

Для меня же эта студия 2008 :) Была бы моя воля я бы вообще порядковые номера вел. Без всяких премудростей. Если продукт хороший, ему вообще название не нужно...

В общем, если кому нужно, могу записать диск.

Managed C++. Проба пера

2007-07-14T08:52:00.000-07:00

Сегодня попробовал поработать с управляемым C++.

Ну и в качестве упражнения хотелось попробовать что-то интересное, а не ограничиваться переписыванием примеров из того же MSDN.

Поэтому мой выбор пал на одну небольшую библиотеку - minifmod. Это часть библиотеки FMOD - кроссплатформенной библиотеки для работы с различными аудиоформатами.

Библиотека minifmod поставляется с открытым исходным кодом, а так же имеет в поставке статическую C-библиотеку для использования их в проектах Visual C++.

Но .NET программист не сможет использовать эту библитеку, поэтому я решил это исправить.

Действительно, достаточно типичная ситуация. Мы имеем огромную массу библиотек, написанных на C и C++, для того чтобы использовать вызовы к этим библиотекам можно использовать достаточно удобный интерфейс как Platform Invoke. Однако в моем случае это было невозможно, потому как это не *.dll, а static link library.

Было принято решение создать проект на Managed C++, который является оберткой вокруг minifmod, а так же тестовый проект Windows Forms на C# который бы использовал мою библиотеку-обертку.

Изучив исходный код minifmod я обнаружил, что сама библиотека заточена на работу с музыкальными треками как с файлами:

FMUSIC_MODULE * FMUSIC_LoadSong(signed char *name, SAMPLELOADCALLBACK sampleloadcallback);

По правде говоря меня это несколько расстроило, потому как это накладывало целый ряд ограничений на ее использование.

К счастью, я обнаружил еще механизм функций обратного вызова, которые вселили в меня надежду что не все так плохо как кажется на самом деле:

typedef void (*FMUSIC_CALLBACK)(FMUSIC_MODULE *mod, unsigned char param);

void FSOUND_File_SetCallbacks(
 unsigned int (*OpenCallback)(char *name),
 void (*CloseCallback)(unsigned int handle),
 int (*ReadCallback)(void *buffer, int size, unsigned int handle),
 void (*SeekCallback)(unsigned int handle, int pos, signed char mode),
 int (*TellCallback)(unsigned int handle));

Итак, я решил реализовать класс, который бы как минимум умел бы воспроизводить XM-треки из файла, и как максимум - работать с объектом типа System.IO.Stream.

Мне очень понравился процесс создания этой оболочки. Мне даже удалось в некоторой степени "обмануть" разработчиков, и передавать не строку с путем файла а указатель на объект типа System.IO.Stream.

Вот листинг .NET класса для воспроизведения XM-файлов:

namespace NModPlayer
{
 public ref class ModPlayer : public IDisposable
 {
 private:
     Stream^ _stream;
     FMUSIC_MODULE* _mod;
     GCHandle _gcHandle;

 public:

     ModPlayer(Stream^ stream)
     {
         _stream = stream;
         FSOUND_File_SetCallbacks(memopen, memclose, memread, memseek, memtell);
     }

     void BeginPlay()
     {
         GCHandle _gcHandle = GCHandle::Alloc(_stream);
         void* pStream = (void*)GCHandle::ToIntPtr(_gcHandle);

         _mod = FMUSIC_LoadSong((char*)pStream, NULL);
         FMUSIC_PlaySong(_mod);
     }

     void StopPlay()
     {
         if (_mod)
         {
             FMUSIC_FreeSong(_mod);
         }

         if (_gcHandle.IsAllocated)
         {
             _gcHandle.Free();
         }
     }

     ~ModPlayer()
     {
         StopPlay();
     }
 };
}

Обратите внимание на конструкцию вида:

GCHandle _gcHandle = GCHandle::Alloc(_stream);
void* pStream = (void*)GCHandle::ToIntPtr(_gcHandle);

_mod = FMUSIC_LoadSong((char*)pStream, NULL);

Сдесь мне пришел в голову один хак. Поскольку ответственность по реализации callback-функций я взял на себя, то я могу совершенно спокойно передавать что угодно.

Таким образом, я сделал фиксацию объекта Stream, получил на него неуправляемый указатель, привел его к типу который от меня хотели и передал в библиотечную функцию.

Реализация callback-функций выглядит следующим образом:

Stream^ handleToStream(unsigned int handle)
{
 GCHandle gcHandle = GCHandle::FromIntPtr((IntPtr)(void*)handle);
 Stream^ stream = (Stream^)gcHandle.Target;
 return stream;
}

unsigned int memopen(char* instance)
{
 return (unsigned int)((void*)instance);
}

void memclose(unsigned int)
{
 // Do nothing because GC will free all allocated memory
}

int memread(void *buffer, int size, unsigned int handle)
{
 Stream^ stream = handleToStream(handle);

 if (stream->Position + size >= stream->Length)
 {
     size = (int)(stream->Length - stream->Position);
 }

 array^ managedBuffer = gcnew array(
     (unsigned int)size);

 stream->Read(managedBuffer, 0, size);

 Marshal::Copy(managedBuffer, 0, (IntPtr)buffer, managedBuffer->Length);

 return size;
}

void memseek(unsigned int handle, int pos, signed char mode)
{
 Stream^ stream = handleToStream(handle);

 if (mode == SEEK_SET)
 {
     stream->Position = pos;
 }
 else if (mode == SEEK_CUR)
 {
     stream->Position += pos;
 }
 else if (mode == SEEK_END)
 {
     stream->Position = stream->Length + pos;
 }

 if (stream->Position > stream->Length)
 {
     stream->Position = stream->Length;
 }
}

int memtell(unsigned int handle)
{
 Stream^ stream = handleToStream(handle);

 return (int)stream->Position;
}

В фунции memopen вроде бы передают указатель на строку, но мы то знаем, что мы туда отдали ;)

В принципе реализация остальных функций не требует особых пояснений.

Так что теперь любой .NET программист сможет спокойно использовать эту библиотеку, потому как в его распоряжении окажется обычная .NET сборка с классом ModPlayer.

Вот например я этот класс использовал в Windows Form приложении:

namespace NMiniFMOD.Sample
{
 public partial class FormMain : Form
 {
     ModPlayer _modPlayer;

     public FormMain()
     {
         InitializeComponent();
     }

     private void FormMain_Shown(object sender, EventArgs e)
     {
         using (Stream stream = new MemoryStream(Resources.MusicTrack))
         {
             _modPlayer = new ModPlayer(stream);
             _modPlayer.BeginPlay();
         }
     }

     private void FormMain_FormClosing(object sender, FormClosingEventArgs e)
     {
         _modPlayer.Dispose();
     }
 }
}

Если интересно, могу выложить полный исходный код.

Браузерная головная боль

2007-07-04T06:18:00.001-07:00

Сегодня обнаружил, что IE6 и, что более удручающее, IE7 содержат аналогичные проблемы с закачкой файлов по HTTP.

Дело в том, что при попытке выкачать файл очень большого размера, скажем более 4,5 Гб, Internet Explorer испытывает арифметические переполнение из-за того, что пришедший Content-Length превышает максимальный размер 4-х байтового беззнакового целого числа (unsigned int).

Причем если IE6 выдает "левые" размеры о скачиваемом файле и продолжает его качать, то IE7 уведомляет нас о том, что страница не может быть отображена. К сожалению попыток выкачать этот огромный файл с помощью IE6 не было времени ни желания :)

Аналогичные опыты были проведены с Opera 8.5 - результат аналогичен IE6. К счастью Opera 9.21 никаких проблем в связи с этим не испытывает.

Ну и самое главное это то, что Mozilla Firefox 1.5 и 2.0 работают так, как должен работать самый лучший браузер в мире :)

И при этом не следует забывать, что Mozilla Firefox 1.5 является достаточно старой версией браузера.

Дискуссия Java VS .NET

2007-06-29T11:20:00.000-07:00

Не могу сказать что я обожаю holy wars, но сам лично стараюсь в них не ввязываться.
Сегодня у меня состоялась дискуссия по ICQ с одним моим знакомым, и я, с его позволения, решил опубликовать наш диалог.

Будем надеяться, что кому-то это покажется познавательным.

Дмитрий: Ты можешь в двух словах обрисовать отличие Явы от Шарпа?
status_alexus: Могу
status_alexus: Java - это консервативная выжимка из C++. Выкинули все редко используемое, которое только добавляло головную боль программистам. Язык реально кроссплатформенный это большой плюс. Язык открыли по лицензии GPL, поэтому это только пойдет ему на пользу, его буду портировать и дальше. Основная GUI библиотека - Swing - выглядит как не родная под целевой OC.
status_alexus: Есть еще либа SWT - приложения выглядят как родные на Windows, Mac OS, Linux
status_alexus: Есть Java Community Process - это группа по развтию технологий языка. Одновременно хорошо и плохо. Хорошо, потому что язык будет более стабильным, не будут прикручивать сомнительные фичи, которые "перегрузят" язык. Плохо, потому что добавляет инертность к введению новых языковых конструкций.
Дмитрий: эм, ну а указателей ведь там нет, и есть GC, как в Шарпе? а нотация венгерская, как в Си?
status_alexus: C# основной язык платформы .NET
Таким образом, зная Framework Class Library можно писать на любом языке. Сейчас реально можно писать на C#, Visual Basic .NET, Iron Python и это огромный плюс.
status_alexus: Говорят что .NET вроде как тоже кроссплатформенный, но реально пока нет.
Дмитрий: А это, Mono?
status_alexus: Есть разработка в виде Mono, но нужно прилагать усилия, чтобы приложение везде работало.
Дмитрий: а, даже так...
status_alexus: Уже в версии 2.0 C# начал "обрастать" сомнительными, на мой взгляд, возможностями.
status_alexus: Мне очень не нравится Nullable типы. Я считаю что это лишнее. Это моя точка зрения.
Дмитрий: Так это для баз данных, имхо
status_alexus: Указателей в C# нет. GC есть. Соответственно, код стабилен и управляем.
status_alexus: да для баз.
Дмитрий: Тем не менее, Ява умирает. Почему?
status_alexus: Ха. Пошутил :)
Дмитрий: Чем Шарп её обскакал?
status_alexus: Java никогда не умрет ;)
Дмитрий: Ну эта... на твоей фирме 2 года назад на Яве было 20% проектов, сейчас - меньше 5% ;)
status_alexus: .NET ее обскакал кроссязыковостью, пиаром, а также тем, что в Microsoft к разработчикам относятся лучше, чем наверное к пользвователям ;)
Дмитрий: Хе... Как по мне, так для программирования в среде .NET во сто крат лучше использовать шарп, а не что-либо иное
status_alexus: Э тут ты не прав. Не всегда C# тебе подойдет.
Дмитрий: А когда не подойдёт? Когда в большом тиме и не с нуля пишешь?
status_alexus: Мне как-то пришлось использовать язык IronPython - это реализация языка Python под платформу .NET. Есть Windows Service который в зависимости от пришедших данных поднимает ту или иную Assembly, в которой есть реализация некоторого интерфейса. Так вот фабричный метод реализован на языке IronPython. Таким образом, мы можем позволить Deployment новой компоненты без останова сервиса, наживую.
status_alexus: Достаточно выложить новую Assembly и новый скрипт с фабричным методом.
Дмитрий:Мммм, не понял... Это только IronPython позволяет? Помимо возможностей CLR?
status_alexus: IronPython это язык интерпретируемый. А C# копилируется в MSIL
Дмитрий: Оригинально... Я-то думал, что все языки на платформе .NET компилируются в MSIL

Большое спасибо Дмитрию за поставленные вопросы.

Eclipse CDT

2007-06-24T16:56:00.000-07:00

На выходных, я как обычно занимаюсь всякими бесполезностями :)

Вот решил тряхнуть стариной и поковырять немного Eclipse как среду разработки для языка C++.

Нашел достаточно внятную заметку, как эту штуку можно настроить вместе с компилятором MinGW. К сожалению, я решил съэкономить на трафике и воспользовался достаточно устаревшей MinGW версии 3.0.8.

В качестве полигона для тестирования я взял свой старый проект Gruz2. Это небольшая игрулька, написаная на C++ и имеет зависимость на библиотеку SDL. Еще несколько лет назад я добился, чтобы она собиралась на Visual C++ 7, Borland C++ Builder 5 и MinGW 3.0.8 (из-под среды Dev-C++) и GCC 3.x под Mandriva Linux 10.1.

Поэтому эксперимент можно назвать достаточно прозрачным. Все проблемы автоматически были списаны на настройку окружения ну и, естественно, на мои руки.

К сожалению мне так и не удалось осилить настройку линковщика, и рабочей версии приложения так и не получилось :(

Я уже было совсем расстроился от того, что мне ничего большего чем Hello World не удалось выжать, однако я вспомнил еще об одном моем древнем поделии под названием SmallBasic.

Это реализация интерпретатора подмножества языка Basic. Главная его "фишка" заключалась в том, что он имел зависимости только на C++ Standard Template Library и при этом тянул на аж 4 класса из 1363 строк :)

Простите за такие жуткие цифры, этот проект был наколбашен достаточно давно.

Вот как раз этот проект успешно собрался и даже удалось его немного подебажить.

В целом впечатления довольно положительные. Жалко только что MinGW - самый "медленный" C++ компилятор в мире :) Ну уж очень долго он собирает проект.

Вот такие фичи у CDT попали под угол моего зрения:

подсветка синтаксиса
code complete
outline полей и функций активного *.cpp или *.h файла
вкладки c открытыми файлами
список задач (TODO, предупреждения, ошибки)
console output во вкладке
подсветка ошибок и предупреждений (насколько я понял поддерживается парсинг GCC/MinGW и Visual C++)
поддержка нескольких targets (типа можно настроить на сборку под GCC, MinGW, Visual C++ 7, Borland C++ да еще и под разными ОСями что бы скучно не было)
дебагер с показом переменных области видимости и Expression (это типа Watch в Visual Studio)
генератор makefile для MinGW и GCC
парсер makefile (outline подсветка синтаксиса и т.п.)

И обязательно, документальное подтверждение моих мук:

Аудиопроигрыватель для Linux

2007-06-24T10:17:00.000-07:00

Сегодня у меня был очень приятный опыт использования сразу двух программ в Linux. :)

Первая это Exaile - аудиплеер. Достаточно продуманный интерфейс. Функционально программа, в некоторой степени, напоминает iTunes, однако не обременена такими вещами как интерфейс для покупки песен через интернет.
Очень удобный, на мой взгляд, фичер - боковая панель с деревом, контекст которого можно менять. Т.е. вы можете в дереве группировать аудиозаписи по исполнителю, альбому или жанру.
Кроме того, все плейлисты отображаются как табуляторы, таким образом у меня под рукой интерфейс ко всей моей аудиотеке.

Самой большой для меня проблемой оказалось невозможность назначать глобальные горячие клавиши на управление плеером. Лично для меня это очень важно, так как я ценю свое время ;)

В общем я, как пользователь достаточно нетривиального Windows-плеера Foobar2000, был очень доволен этим линуховым зверем.

Второй проблемой этого плеера стало отсутствие нормальной поддержки кирилицы в ID3 тегах версии 1. Как многие знают, большинство MP3 файлов имеют теги, которые сохранены в кодировке Windows-1251. А вот в Linux большинство софта по понятным причинам не любит эту кодировку.

Поэтому вторая программа - EasyTAG была ключиком к решению этой проблемы.

Скажу прямо, что такого продвинутого софта для обработки тегов я не видел даже под Windows. Хотя, возможно, подобный софт прошел мимо моего поля зрения, т.к. я ну очень редко занимаюсь обработкой тегов.

Правда интерфейс у этой программы не такой уж и интуитивный. Не знаю точно как нужно было авторам реализовывать пользовательский интерфейс, но вот он мне показался немного неудобным и все тут :)

Для решения проблемы с кодировками я настроил эту программу чтобы она читала все ID3 теги в кодировке Windows-1251, и принудительно записывала их в Unicode (UTF-8). Кроме того, я был вынужден запретить сохранение ID3 тегов версии 1, т.к. он не поддерживает многобайтовых кодировок.

После этого я выбрал все "проблемные" файлы с сказал программе, чтобы она принудительно перезаписала в них теги.

Еще одной очень полезной особенностью программы EasyTAG является то, что уровень ее подсказок об той или иной настройке представляет из себя компактную энциклопедию по обработке ID3 тегов :)

В общем ОС Linux постепенно "обрастает" действительно классным софтом. Так что даже .NET программист не гнушается этой интересной операционкой ;)

Скриншоты прилагаются:

Кому нужен WinRAR?

2007-06-17T12:45:00.001-07:00

Сегодня в очередной раз порадовался своему основному архиватору.

Последний год, или может быть два, я использую архиватор 7-Zip.

Во-первых, алгоритм упаковки LZMA который лег в основу формата 7z дает просто потрясающую степень сжатия. Правда платить за это придется высокоми требования на распаковку, и, особенно, на упаковку. Однако, в настоящее время это не является большой проблемой. И самое главное, что этот формат лицензирован по GNU LGPL, что дает вам полное право использовать этот формат где вам угодно. И как закономерность данного лицензирования - кроссплатформенность.

Сегодня нужно было упаковать игру Quake 2 (ну нужна она мне и все тут :) ), так я был просто поражен результатом.

Оригинальный размер дистрибутива был 210 Мб, который после упаковки превратился в ничтожные 79 Мб. Фантастика, не правда ли ;)

Особенно если учесть что ребята из ID Software молодцы. Они все игровые данные упаковывают в один файл pak.

Правда ложкой дегтя можно назвать требования по ОЗУ для работы с архивами в режиме ультра сжатия: для упаковки требуется 709 Мб, а для распаковки - 66 Мб.

Но согласитесь, на то он и архив. Чтобы хорошенько упаковать и записать на диск.

Тестовый пост

2007-06-09T06:21:00.001-07:00

Прошу прощения за "левый" пост, просто проверяю работу плагина для Firefox

Очень занятные шутки про блондинок

2007-05-24T14:19:00.000-07:00

Недавно нашел очень прикольные шутки про блондинок.

По правде говоря, даже не ожидал, что можно так действительно интересно шутить.

Инструкция по использованию Google Reader

2007-05-19T09:53:00.000-07:00

Вопрос: Как быть в курсе всех интересующих событий?
Ответ: Быть подписанным и читать новостные ленты

Вопрос: Что такое новостные ленты?
Ответ: Есть например три сайта - sport.ru, job.ru и hobby.ru и вам интересно чего там новенького появляется. В этом случае существует два варианта.

Bариант первый. C упорством дебила заходить один раз в несколько дней (неделю/месяц/год) на каждый из этих сайтов и проверять не появились ли новые новости/статьи/заметки, после чего их читать. При этом щедро одаривать любимого провайдера бесполезно израсходованным трафиком...

Вариант второй. Использовать ленты новостей. С их помощью новую информацию можно получать в виде определенных данных, которые обрабатывают специальные программы для чтения новостных лент. Из называют RSS-читателями. Таким образом, информация из нескольких ресурсов стекается к одному-единственному месту.

Вопрос: С помощью чего читать эти новостные ленты?
Ответ: Использовать Google Reader

Google Reader можно пользоваться следующим образом:
- зайти на сайт, новости которого, вас интересуют
- в адресной строке браузера должен появиться значек, который сигнализирует о том, что сайт поддерживает публикацию новостных лент в форматах RSS или Atom (Atom это более новый формат, желательно подписываться именно на него)
- скопировать ссылку на новостную ленту в буфер обмена
- зайти на http://www.google.com/reader
- залогиниться
- сделать клик на ссылке "Add subscription" и в появившемся окошке ввести url который был скопирован в буфер обмена
- щелкнуть на "Add"

UPD: сразу после того, как я опубликовал это сообщение, мне стало интересно, а был ли вообще смысл в подобной инструкции :)

Мой Firefox

2007-05-19T09:44:00.000-07:00

Вот такой винегрет по мотивам Firefox я использую на работе и дома.

Generated: Sun May 20 2007 19:42:29 GMT+0300
User Agent: Mozilla/5.0 (Windows; U; Windows NT 5.1; en-US; rv:1.8.1.1) Gecko/20061204 Firefox/2.0.0.1
Build ID: 2006120418

Enabled Extensions: [20]

Adblock Plus 0.7.2.4
CustomizeGoogle 0.55
DOM Inspector 1.8.1.1
Firebug 1.0
Fission 0.8.7
FlashGot 0.5.97.03
Google Browser Sync 1.3.20061031.0
Human URL 0.1.2.2
IE Tab 1.3.1.20070126
ImgLikeOpera 0.6.15
JavaScript Debugger 0.9.87
Menu Editor 1.2.3
MenuManipulator 20060418.1.1
MR Tech Local Install 5.3.2.3
PDF Download 0.7.9
Russian spellchecking dictionary 0.2
ScrapBook 1.2.0.8
Web Developer 1.1.2

Installed Themes: [4]

Installed Plugins: (8)

Adobe Acrobat
Java(TM) Platform SE 6
LogMeIn Inc. Remote Access Components 1.0.0.242
Microsoft® DRM
Mozilla Default Plug-in
PCMan's IE Tab Plug-in for Mozilla/Firefox
QuickTime Plug-in 6.5.1
Windows Media Player Plug-in Dynamic Link Library

В поисках святого грааля

2007-05-19T08:11:00.000-07:00

Сегодня вдруг захотелось отыскать plugin для Miranda, который добавляет проверку правописания в сообщениях. Спустя получасового сеанса нашел то что мне было нужно и то, что мне не было нужно :)

Нашел русскую инструкцию по установке этого плагина.
Вот еще одна инструкция на русском языке.
Официальный сайт на английском языке. Я использовал именно "официальную" инструкцию.
Для тех, кто хочет быть на гребне волны, может наблюдать за дискуссией в ветке на официальном форуме программы Miranda.

Проверка орфографии проводится не с помощью Aspell, как я предполагал, а с помощью движка, который использует OpenOffice.org

Меня в очередной раз порадовала идеология Open Source, которая проявляется в законе "на плечах гигантов". Любой разработчик может использовать готовое решение, причем переносимость этого решения не вызывает у меня никаких сомнений.

Так что попробую использовать этот plugin некоторое время. Думаю что он у меня приживется :)

Кроме того, обнаружил еще два любопытных плагина:

Miranda-GDS-V2 - обеспечит интеграцию Google Desktop Search с историей сообщений, которая хранится в базе Miranda. Не знаю насколько он будет мне полезен, так как я не использую дома Google Desktop Search. Для поиска сообщения по истории я использую Find A Message, хотя может быть мне стоит перестать жадничать и поставить у себя дома Google Desktop Search :)
WATrack - Отображает название проигрываемой песни в окне сообщений. Поддерживает Winamp, Apollo, 1by1, Media Player Classic, Window Media Player, JetAudio и FooBar. ...уверенная победа в номинации "самый бесполезный plugin" ;)

Параметры командной строки в .NET Windows Forms

2007-05-13T03:02:00.000-07:00

Оказывается, что это можно получить предельно просто :)

string[] args = Environment.GetCommandLineArgs();

Анализ функциональности Firebird, MySQL, PostgreeSQL

2007-05-07T12:19:00.000-07:00

Привожу текст одного из своих писем, которое я отправлял своему руководителю работы на бакалавриат. Заранее предупреждаю, что это мое частное, поверхностное мнение. Никаких тестов производительности, серьезных и глубоких исследований я не проводил. Вся последующая информация передается по принципу "все что было на поверхности моего взора" :)

I. PostgreSQL 8.1.5

Работает на Windows NT и на Win9x через Cygwin, Linux, FreeBSD, Mac OS X, Novell Netware 6, OS/2

BSD лицензия, существует так же коммерческая лицензия (которая предполагает техническую поддержку)

Поддерживает транзакции, подзапросы, триггеры, представления, внешние ключи, пользовательские типы и их наследование

Исталлятор на русском языке.

Поддержка языка запросов PL/pgSQL, который очень похож на PL/SQL Oracle.

Поддержка хранимых процедур, написанных на PL/Java, PL-J, plPHP, plR, pl-ruby. Соответственно, хранимые процеруры можно писать на диалектах Java, PHP, Ruby (и каком-то языке для статистики - R).

В пакете идет консольная и графическая консоль управления

В пакете идет JDBC, Npgsql, ODBC, OLEDB драверы, таким образом обеспечивается функциональность для языков Java (JDBC), .NET (Npgsql), ADO (OleDB) и прочих через драйвер OBDC.

FAQ

На официальном сайте я обнаружил очень подробную техническую документацию, в которой смог легко сориентироваться.

II. Firebird

Firebird - это СУБД InterBase, код которой открыла компания Borland

Работает под Windows, Linux, Mac-OS (Darwin) и некоторых Unix платформах.

Идет под лицензией MPL, с небольшими ограничениями.

Инсталлятор на английском языке.

Поддерживает транзакции, триггеры, хранимые процедуры.

Функциональность СУБД аналогична InterBase.

Официальный сайт мне вообще не понравился, информация слабо структурирована.

III. MySQL

Работает на Windows, Linux, Unix, MacOS

Является наиболее известной открытой СУБД. Существует масса материалов на русском языке в виде печатных изданий и интернет ресурсов.

В пакете идет только консольная утилита для администрирования.

Инсталлятор на английском языке.

Начиная с версии 5.0 начала поддерживать хранимые процедуры.

Существуют провайдеры данных для Java, ADO.NET, ODBC, PHP, Perl и многих других языков.

На официальном сайте обнаружил массу документации, однако организация сайта не очень понравилась.

IV. Сравнение существующих СУБД

Программа для тестирования производительности различных СУБД.

Поддерживаются:

Postgresql
Mysql
DB2
Oracle
Sapdb
Firebird
Microsoft SQL Server
Sybase

Результаты тестирования нескольких открытых СУБД

V. Личное мнение

От себя еще добавлю, то, что я пробовал использовать Oracle, MS SQL Server и MySQL из-под .NET

Лично мне диалект MySQL мне не очень понравился.

Все три вышеперечисленных СУБД совершенно спокойно работают с Unicode, так что проблем с интернационализацией быть просто не может.

Firebird предоставляет выбор запуска СУБД как приложение и как Windows служба. PostgreSQL работает только как сервис.

В общем, думаю что имеет смысл попробовать PostgreSQL. Многие мои знакомые программисты рекомендовали использовать именно.

UPD:
Поступило логичное замечание о том, что функциональность Firebird недостаточно освещена. Я это сделал по причине того, что Firebird вырос из Interbase. Соответственно то, что эта СУБД является форком когда-то коммерческого движка говорит только в ее пользу.

Для доступа к базе конечно же существует ODBC драйвер, .NET Data провайдер и CA-JDBC (Jaybird) драйвер. Кстати, замечу, что OleDb драйвер не упоминался :)

Сегодня обнаружил следующие, достаточно веские аргументы в пользу Firebird против MS SQL Server, PostgreSql.

Из всех аргументов, честно говоря для меня наиболее существенным было наличие хорошего ADO.NET провайдера, который судя по заявлению разработчиков, поддерживает такие сервисные API как резвервное копирование и восстановление, статистика, пакетное выполение SQL скриптов.

Однако, использование подобных вещей из-под .NET приложение мне кажется сомнительной пользой. На мой взгляд, подобные вещи должны выполняться несколько иными механизмами, находящимися за пределами .NET клиента СУБД.

log4net в три шага

2007-05-07T12:02:00.000-07:00

Сегодня решил воспользоваться библиотекой log4net для логирования сообщений в проекте, который я пишу в качестве работы на бакалавриат (слово "бакалавриат" мне подсказал spellchecker встроенный в Firefox, надеюсь что он меня не подвел :) ).

После непродолжительного гугления я сделал следующее:

1. Добавил ссылку на сборку log4net.dll в свой проект.
2. В App.config файл добавил следующее:

<configSections>
<section name="log4net" type="System.Configuration.IgnoreSectionHandler" />
</configSections>

<log4net>
<appender name="LogFileAppender" type="log4net.Appender.RollingFileAppender">
  <param name="File" value="log/trace.log"/>
  <param name="AppendToFile" value="true"/>
  <param name="RollingStyle" value="Date"/>
  <layout type="log4net.Layout.PatternLayout">
    <param name="ConversionPattern" value="%-5p %d{yyyy-MM-dd hh:mm:ss} [%t] %m%n" />
  </layout>
</appender>
<root>
  <level value="DEBUG"/>
  <appender-ref ref="LogFileAppender"/>
</root>
</log4net>

3. В AssemblyInfo.cs добавил следующую строку:

[assembly: log4net.Config.DOMConfigurator(Watch = true)]

4. И после этого смог воспользоваться логированием из своего кода следующим образом:


static class ApplicationEntryPoint
{
 public static ILog log = LogManager.GetLogger(string.Empty);

 [STAThread]
 static void Main()
 {
  log.Info("Application: start");
  Application.EnableVisualStyles();
  Application.SetCompatibleTextRenderingDefault(false);

  FormMain formMain = new FormMain();
  Application.Run(formMain);
  log.Info("Application: end");
 }
}

Таким образом, лог будет выглядеть следующим образом:


INFO  2007-05-07 10:02:14 [1064] Application: start
INFO  2007-05-07 10:02:17 [1064] Соединение с базой Paradox было успешно установлено.

Notepad++ 4.1 Released

2007-05-03T11:19:00.000-07:00

Сегодня прочел новость о выходе новой версии моего любимого легковесного текстового редактора Notepad++.

Был очень приятно удивлен добавлением плагина SpellChecker, который работает на базе aspell. Нужно будет на досуге обязательно попробовать эту функциональность. Меня давно интересовал этот движек для проверки орфографии, однако я до сих пор не видел продукта под-Windows-для-людей, который бы его использовал (Vim и Emacs я считаю достаточно сложными в освоении).

Вдруг вспомнилось о плагине для Miranda, который тоже, используя aspell, проверяет орфографию при наборе сообщения, который я так и не испытал до сих пор :)

Все гораздо сложнее, чем кажется

2007-04-27T09:07:00.000-07:00

Сегодня несколько часов потратил на решение проблемы, которую и решать-то не нужно было:
http://www.id-as.com/arts/ala/slidingdoors2/

«Западание» в IE: Если вы наблюдаете «западание» (исчезновение) фоновых изображений при наведении курсора на закладки в IE/Win, проверьте установки кэша для временных файлов (Сервис > Свойства обозревателя > Общие > Настройка). Вы, возможно, поменяли установку по умолчанию, чтобы быть уверенным, что видите последнюю версию страницы при каждом ее обновлении. IE/Win имеет проблемы с отображением фоновых изображений для ссылок, если вы указали «При каждом посещении страницы». Установка по умолчанию «Автоматически». Она позволяет браузеру мгновенно получать изображение из кэша, предотвращая любые мигания. Большинство пользователей не меняют эту установку, скорее всего, они даже не знают о ее существовании.

Google Talk - впустим прогресс в нашу жизнь

2007-04-20T14:01:00.000-07:00

Основные плюсы:

- основан на октрытом протоколе Jabber
- для передачи текстовых сообщений существует просто уйма клиентов на просто уйме платформ
- позволяет сохранять историю сообщений на сервере
- официальный клиент никогда не будет перегружен рекламой, т.к. протокол открыт и ты можешь спокойно использовать прочие клиенты
- никогда не будет проблем с альтернативными клиентами по причине открытой спецификации протокола
- политика google заключается в многоплотформенности, мобильности и интеграции
- поддерживает видео и аудио конференции
- поддерживает линковку с другими jabber-серверами
- дает самую достойную связь на dial-up линиях. Когда Skype рвет, Google Talk меняет компрессию так, что ты голос собеседника узнать вообщен не можешь (металлический голос), но слышишь его очень отчетливо
- имеет два варианта Online клиента, что дает возможность чата из интернет-кафе

Я, например, использую Google Talk протокол + Miranda клиент.
В случае, если мне вдруг понадобиться голосовой чат - запускаю официальный клиент не закрывая Miranda.

Как обуздать Windows Service

2007-04-20T09:28:00.000-07:00

По своей работе частенько приходиться ковыряться с самописными Windows Service на удаленных машинах.

Можно достаточно быстро и удобно это делать из командной строки:
Посмотреть статус сервиса - sc query <имя сервися>
Запустить сервис - net start <имя сервиса>
Остановить сервис - net stop <имя сервиса>

Есть так же возможность делать запуск/останов сервиса командами sc start <имя сервиса> и sc stop <имя сервиса>, но при этом команда отправляет сигнал сервису и сразу же возвращает управление консоли.

Мне лично такой вариант меньше подходит, потому как меня интересует синхронная команда. В случае с net start и net stop я вижу сколько приблизительно времени занимает операция запуска и останова сервиса и сразу же смогу обратить внимание на случаи, когда подобные операции с сервисом заканчиваются неудачей.

Можно так же удобно управлять удаленными Windows службами при наличии необходимых прав:
sc <имя компьютера> <команда> <имя сервиса>

Например мы хотим узнать статус службы dhcp (это служба "DHCP клиент") на компьютере с сетевым именем notebook :)
sc \\notebook query dhcp

Особенности учебного процесса заочного отделения

2007-04-13T13:34:00.000-07:00

В настоящее время я переживаю сессию :)

Недавно была лабораторная работа по операционной системе Unix, которая продолжалась 4 пары.

Хорошенько выспавшись, и опоздав на целый час, пришел на нее со своим ноутбуком, потому как на своем Ubuntu Linux 6.10 в графическом окружении Gnome мне будет легче писать лабы.

Дело было в субботу утром, и, оказалось что сервер Solaris в этот момент был нам недоступен по техническим причинам, а системных администраторов нет, потому как выходной.

И тут, значит, являюсь я, с ноутбуком и обжатой витой парой в сумке...

Наблюдаю картину, как несколько человек сидит и читает методички и при
этом на практике сделать не может ничего.

После некоторой дискуссии с лаборантом и одного телефонного звонка домой системному администратору, мне выдают один свободный IP-адрес, после чего я подключаюсь к коммутатору, добавляю новых пользователей, устанавливаю пакеты для работы Telnet и SSH, После чего вся группа ходит на мой мобильный Linux-сервер... :))

Да, если кто не в курсе, я - .NET программист :)))

Первая заметка

2007-04-13T13:21:00.000-07:00

Долгое время думал о создании блога, вот наконец-то решился :)

Не знаю, насколько это будет оправдано, просто иногда хочется одну и ту-же информацию донести сразу до нескольких своих друзей, при этом не теряя важные моменты.

Попробую воспользоваться для этого блогом, быть может из этого что-нибудь да получится.

О чем вообще в этом блоге может пойти речь?

Я работаю инженером по разработке программного обеспечения (Software Engineer) в Харькове.

Как показывает практика, делаю практически все, что связано со словом .NET :) Уверенно себя чувствую в области ASP.NET, ADO.NET, Windows Service. Наверное наибольшие пробелы у меня в сфере .NET Remoting и, особенно, Windows Forms. Но, надеюсь, что со вторым, в случае "столкновения", особых проблем не будет.

На досуге люблю сидеть ковырять различный интересный софт, при этом, отдаю предпочтение свободному программному обеспечению. Естественно, стараюсь придерживаться некоторого баланса между реалиями жизни и идейными предпочтениями.

Мне очень симпатична операционная система Linux за ее открытость, гибкость и переносимость.

Когда-то в далеком прошлом долгое время увлекался программированием на С++ и Assembler.