Тимчасовий обхід обмеження довжини varchar
В одному з моїх поточних проектів у процесі розробки процесу імпорту великих об’ємів даних виникла задача ефективно (швидко) обійти обмеження довжини varchar полів у базі даних. Фактично, ми готові були пожертвувати частиною даних задля збереження швидкості роботи.
Річ у тім, що MySQL за умовчанням не дозволяє запхати в поле varchar рядок довший за наперед визначену розмірність.
Але це можна обійти скинувши налаштування @@sql_mode.
В якості демонстрації принципу наведу шмат коду, коментарі мають все пояснити.
<!---
CREATE TABLE IF NOT EXISTS contacts (
contactId int(10) unsigned NOT NULL AUTO_INCREMENT,
salutation varchar(5) DEFAULT NULL,
firstname varchar(255) DEFAULT NULL,
PRIMARY KEY (contactId)
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
--->
<cfset local = {} />
<cfset local.value = "Doctor" />
<!--- save the current SQL mode --->
<cfquery datasource="my_test_dsn" name="local.getSqlMode">
select @@sql_mode as sqlmode
</cfquery>
<!--- reset the SQL mode --->
<cfquery datasource="my_test_dsn" result="local.resetSqlMode">
set sql_mode = ''
</cfquery>
<!--- this should work fine --->
<cfquery datasource="my_test_dsn" result="local.pushContact">
INSERT INTO contacts (salutation, firstname) VALUES ('#local.value#', '#local.value#')
</cfquery>
<!--- restore the SQL mode --->
<cfquery datasource="my_test_dsn" result="local.revertSqlMode">
set sql_mode = '#local.getSqlMode.sqlmode#'
</cfquery>
<!--- this should fail --->
<cfquery datasource="my_test_dsn" result="local.pushContact">
INSERT INTO contacts (salutation, firstname) VALUES ('#local.value#', '#local.value#')
</cfquery>
<cfdump var="#local#">
Нові розділи сайту: робота і компанії
Сьогодні ми трішки розширили можливості сайту, додавши два розділи:
- Робота - тут можна буде знайти чи розмістити оголошення про роботу для CF-програмістів.
- Компанії - тут можна буде знайти інформацію про українські компанії, що займаються розробкою з використанням ColdFusion.
Запрошуємо долучитися з наповненням, якщо вас щось зацікавило.
Ну й опис сайту англійською не завадить.
Також в нас накопичилося чимало цікавих матеріялів, чекайте багато оновлень цього місяця.
Семантическая верстка
Не совсем про Coldfusion, но на смежную тему, хочу представить небольшой обзор семантической верстки. Так или иначе, но конечным продуктом обработки Coldfusion-шаблонов или PHP-скриптов становится щедро приправленный CSS-ом HTML-код. Полезно будет знать как сделать этот винегрет правильно.
Читати далі...
Самопідписаний SSL сертифікат в Railo
Нещодавно зіткнувся з доволі відомою проблемою для CFML-розробників: CFHTTP відмовляється працювати з HTTPS-сайтом якщо сертифікат є само-підписаним, або не засвідченим авторизованим центром. Більше того, у мене сертифікат був у порядку, оглядачі чудово його сприймали, але не Railo.
Стандартним рішенням є додавання відкритої частини сертифікату до сховища ключів (keystore) JVM, котру використовує ColdFusion/Railo.
Але ця процедура може виявитися доволі хитрою, коли мова йде про Railo.
Спочатку я спробував піти "правильним" шляхом, та скористатися вбудованими функціями якраз для цього діла:
SSLCertificateList("hostname") чудово показала мені список сертифікатів (а він там був один) потрібного сайту.
SSLCertificateInstall("hostname") без жодних претензій його встановила.
Але ж дулі! Все одно продовжив бачити помилку sun.security.validator.ValidatorException: PKIX path building failed: sun.security.provider.certpath.SunCertPathBuilderException: unable to find valid certification path to requested target
Тоді я взявся за консоль. Спочатку я перевірив чи спрацювали функції:
$ cd ~/webapps/xxxxx/WEB-INF/railo/security/
$ keytool -list -keystore cacerts
Потрібний сертифікат був у списку. Підказка: за умовчанням пароль для keytool є "changeit" (без лапок, звісно).
Про всяк випадок я спробував перевстановити його вручну. Для цього експортував .crt файл сертифікату сайту за допомогою оглядача (Firefox, в моєму випадку) та замінив запис:
$ keytool -delete -alias myalias -keystore cacerts
$ keytool -import -alias myalias -keystore cacerts -file /home/zzz/xxxxx.crt
$ keytool -list -keystore cacerts
Після цього перезапустив Railo та... не отримав нічого.
Наступна спроба зареєструвати сертифікат аналогічним способом була пов’язана з JVM, для Ubuntu та JVM від Sun шлях до них виглядає десь так:
/usr/lib/jvm/java-6-sun/jre/lib/security/
Вона теж виявилася невдалою, хоча для Adobe ColdFusion цей спосіб зазвичай працює.
Насамкінець я згадав, що Railo має ще кореневий контекст, в моєму випадку це тека
/opt/railo/webapps/ROOT/WEB-INF/railo/security/
Повторивши імпорт ще тут та перезапустивши Railo все запрацювало!
Ошибка инсталлятора Coldfusion 8 в Centos 5
Проблема - при инсталляции не создается коннектор для Apache. Вполне вероятно, что это можно наблюдать не только на CentOS.
Нужно доустановить пакет http-devel, и после этого не постеснятся скомпилировать коннектор вручную, подправив и запустив этот скрипт:
# cd /opt/coldfusion8/bin/connectors
# ./apache_connector.sh
Также может помочь GUI-тулза /opt/coldfusion8/runtime/bin/wsconfig
Немного статистики
По словам Adobe, в мире 778 тысяч разработчиков на Coldfusion и более 1млн Coldfusion-приложений. При этом в Европе собрались не больше 20% всех разработчиков. Из них в UK порядка 30%, в Benelux и DACH по 25% и 20% в остальных странах EMEA.
* DACH = Германия, Австрия и Швейцария
* EMEA = Europe, Middle East, Africa
Flex и Railo "из коробки"
Как известно, для работы с Flex-приложениями, и Adobe Coldfusion и Railo используют BlazeDS. Наверное, нет проще пути для разработки серверной части Flex-приложений, чем разработка на CFML.
Для ограниченных в ресурсах проектов, использование Railo - отличный выход. Для простоты можно взять инсталлятор Railo, созданный Viviotech. В него включен преднастроенный BlazeDS, что позволяет в течение нескольких минут развернуть и начать создание серверной платформы Flex-приложения.
Рассмотрим инсталляцию под Windows.
После установки Railo+Tomcat можно соединить Railo и Apache, для этого пишем в httpd.conf:
LoadModule jk_module modules/mod_jk.so
JkLogFile "C:/Apache/logs/mod_jk.log"
JkWorkersFile "C:/Apache/conf/jk/workers.properties"
JkLogLevel error
JkLogStampFormat "[%a %b %d %H:%M:%S %Y] "
JkOptions +ForwardKeySize +ForwardURICompat -ForwardDirectories
JkRequestLogFormat "%w %V %T"
JkMountCopy all
Потом настроить под Railo отдельный virtualhost в Apache с такими параметрами:
<VirtualHost *:80>
DocumentRoot "C:/inetpub/wwwroot"
ServerName railo-local
JkMount /*.cfm worker2
JkMount /*.cfml worker2
JkMount /*.cfc worker2
JkMount /flex2gateway/* worker2
JkMount /flashservices/gateway/* worker2
</VirtualHost>
При этот сам worker2 определяется в C:/Apache/conf/jk/workers.properties таким образом:
workers.tomcat_home="C:/railo/tomcat"
workers.java_home="C:/jdk1.6.0_20"
ps=\
worker.loadbalancer.type=lb
worker.loadbalancer.balance_workers=worker2
worker.inprocess.type=jni
worker.list=worker2
worker.worker2.type=ajp13
worker.worker2.host=localhost
worker.worker2.port=8019
worker.worker2.lbfactor=50
worker.worker2.cachesize=10
worker.worker2.cache_timeout=600
worker.worker2.socket_keepalive=1
worker.worker2.socket_timeout=300
worker.worker2.connection_pool_timeout=600
Ну и напоследок, прописываем настройки Flash Remoting (в Railo встроен BlazeDS, но его надо поднастроить) в C:/Railo/Tomcat/webapps/ROOT/WEB-INF/web.xml:
<servlet>
<servlet-name>MessageBrokerServlet</servlet-name>
<servlet-class>flex.messaging.MessageBrokerServlet</servlet-class>
<init-param>
<param-name>services.configuration.file</param-name>
<param-value>/WEB-INF/flex/services-config.xml</param-value>
</init-param>
<init-param>
<param-name>messageBrokerId</param-name>
<param-value>MessageBroker</param-value>
</init-param>
<load-on-startup>1</load-on-startup>
</servlet>
<servlet-mapping>
<servlet-name>MessageBrokerServlet</servlet-name>
<url-pattern>/flex2gateway/*</url-pattern>
</servlet-mapping>
Для желающих глубже разобраться с настройками BlazeDS, рекомендую этот раздел Railo Wiki.
Кінець OpenCFML
Кілька місяців тому ми згадували про створення дорадчого комітету з CFML, що мав би займатися розробкою та стандартизацією мови програмування. Плани були серйозні, команда підібралась відповідна.
Але не так сталося, як гадалося. Після тривалого затишшя з’явилися повідомлення про "смерть" проекту.
Спочатку Адам Леман повідомив про те, що Adobe виходить з комітету. Незабаром відреагував і Шон Корфілд, а також і Метью Вудвард, остаточно розв’язавши ситуацію.
В чому ж причини?
В першу чергу недостаток відкритості, що не спонукало учасників до активної діяльності.
Проблематичність пошуку консенсусу, наприклад в стандартизації CFScript в новій версії ACF, призвела до занепаду зацікавлення учасників, що й вилилося в поступове згасання діяльності.
Звісно, не обійшлося від деяких взаємних звинувачень в ігноруванні прийнятих рекомендацій та інших непорозуміннях.
Альтернативою цього року стало створення відкритої спільноти Conventional CFML Wisdom в групах Google, в якій спілкуються в тому числі деякі (колишні й поточні, якщо ще можна так сказати) учасники комітету.
Гадаю, що ця подія не справить великого впливу на спільноту, бо комітет так і не досяг жодних цілей, проваливши затвердження стандарту CFML2009. Але в цілому ситуація малоприємна, хоч і корисна з точки зору досвіду організації роботи зі стандартизації мови CFML, що все одно доведеться колись робити.
Доклад на FPUG #20 - Coldfusion+Flex
Наша юзер-группа в лице меня выступила на 20й встрече украинской группы пользователей Flash Platform в Киеве 10 июля 2010 года. Были и полезные доклады и живое общение и даже небольшой конец света (спонсор - погода в г.Киеве). От встречи осталась масса положительных эмоций, спасибо всем кто был к этому причастен.
Тема доклада - знакомство с Coldfusion и основы работы с Coldfusion-сервером из Flex-приложения. Слайды, описание и код демки - внутри.
Читати далі...
Випущено Tour de ColdFusion Beta
Tour de ColdFusion це програма для стільниці, побудована на Adobe AIR, що включає в себе сотні зразків коду та прикладів. Кожен приклад поєднує в собі результат виконання (на віддаленому сервері) та вихідний код.
Поки що база прикладів має пробіли, тому й позиціонується як бета, але автори обіцяють швидке наповнення, при чому зміни будуть автоматично прийняті при перезапуску програми.
Треба зауважити, що програма є аналогом вже існуючих проектів Tour de Flex та Tour de LiveCycle.
Виглядає це приблизно так:
Встановити програму можна прямо з сайту Tour de ColdFusion.
Подякувати чи допомогти розробникам можна в блозі Ґреґорі Вілсона, або написавши листа.
Помилка в Transfer 1.1 при роботі з ACF9 та Railo 3.1.2.0xx
Після оновлення Railo (до bleeding edge) перестали працювати get-методи для неіснуючих первинних ключів. Раніше в такому випадку просто вертався новий bean, що було зручно використовувати для створення нових об’єктів, наприклад таким чином:
<cfset beanContact = variables.transfer.get("cnt.Contact", 0) />
<cfdump var="#beanContact.getMemento()#" label="beanContact" />
Натомість почало вилітати виключення виду:
transfer.EmptyQueryException -- It is likely the ID that has been selected for this query no longer exists
Виявилося, що така сама проблема виникла спочатку з CF9, а Railo пізніше "наздогнали".
На щастя, розробник Transfer оперативно її виправив. Тож ті, кому горить, можуть вже зараз витягти останню версію з SVN, решта можуть дочекатися випуску 1.1.1, що нібито вже не за горами.
Треба зауважити, що завдяки заздалегідь спланованому використанню маппінґів, переключення до іншої версії та позбавлення від проблеми були легкими як ніколи.
Новини CF-OpenSource v17
Цей випуск повністю присвячено новинкам з RIAForge.
Додаток для взаємодії з API популярної блоґо-платформи Tumblr.
Втілення великої кількості можливостей служби Google Geocode.
Додаток для взаємодії з API Recurly.com, системи для організації регулярних платежів.
Lorem Ipsum Dummy Text Generator v1.0
Назва говорить сама за себе. Додаток для CF Builder.
Бібліотека для локалізації додатків, створена за подобою аналогічного пакету для Flex.
Обгортка для Java-бібліотеки OpenID4Java.
Втілення взаємодії з означеною службою.
Цікавий проект, побудований на FW/1, що втілює фабрику для об’єктів різних типів.
Додаток для CF Builder для швидкого написання керівних конструкцій FB5NoXML.
Бібліотека для базової взаємодії з сервісами на базі протоколу OAuth 1.0
Додаток для CF Builder, що може стати у нагоді при роботі з CF9 ORM.
Додаток на базі MG, презентований автором на конференції NCDevCon 2010.
CFC Hint Checker Extension 0.9
Додаток для CF Builder, що шукає визначення методів із загубленими hint-ами.
Making OO/MVC ColdFusion Simple 2.0
Ще один CFML-приклад, презентований автором на конференції (CFObjective 2010).
Втілення стандарту WS-Security без використання Java-бібліотек.
Бібліотека для взаємодії з поштовими службами.
Нова версія популярної відкритої CMS.
Додаток, що допомагає швидко спакувати (та надіслати поштою) код прямо з CF Builder.
Новини Adobe ColdFusion - 06.2010
На останній конференції SOTR з’явилася інформація про деякі плановані оновлення в ACF 9.0.1. Серед найбільш цікавих: множинні ORM джерела даних, HQL з cfquery та підтримка Amazon S3. Не кажучи вже про більш як півтисячі виправлень.
Було випущено офіційний посібник з безпеки ColdFusion Lockdown Guide (PDF).
Вийшли друком перша та друга частини головної книги CFML-програміста: Adobe ColdFusion 9 Web Application Construction Kit. Вже можна знайти на Амазоні.
Випущено оновлення безпеки для ACF 8.0, 8.0.1 та 9.0 та всіх ОС, що виправляє ряд серйозних вразливостей. Більше деталей в офіційному бюлетені APSB10-11.
На завершення можна згадати про гарний холівар, ініційований Террі Райяном, в якому з ентузіазмом взяли участь чимало провідних учасників спільноти. Насолоджуйтесь :)
Новини Railo - 06.2010
Цей спец-випуск присвячено новинам зі стану Railo з моменту останньої публікації на цю тему.
Перш за все, процес розробки не зупиняється ні на день, bleeding-edge випуски з’являються ледь не щотижня, на момент написання цього тексту поточною є версія 3.1.2.014. Більшість виправлень та оновлень можна детально відслідкувати в офіційному баґтрекері, а також на форумах Uservoice. Наприклад, я очікую на виправлення невеличкої проблеми з cfdump.
Починаючи з версії 3.1.2.009 дистрибутив включає в себе ядро проекту Railo Ajax, в тому числі підтримку базових міток (cfajaxproxy, cfajaximport, cfdiv) та JavaScript-бібліотеку (jQuery). Ця частина має назву CORE, інша (UI) включає решту розширень (cfwindow, cfmap, cflayout) та має підключатися за допомогою розділу Extension адміністративної панелі, докладніше описано в цій публікації.
Андреа Камполоньї розробив ще два схожих між собою розширення: cfjavascript та cfstylesheet. Призначено їх для стиснення та об’єднання статичних файлів для пришвидшення їх завантаження. Тодд Реферті написав дуже докладну замітку з використання цих розширень.
Дуже приємною новиною стало включення до ядра раніше платного розширення для роботи з Amazon S3. Коли конкретно це станеться не дуже зрозуміло, але на пам’ять залишимо тут посилання на стареньку замітку про те, як ним користуватися. Що цікаво, це рішення скоріш за все було прийняте під впливом повідомлень зі стану Adobe, але про них ми поговоримо окремо.
Особливо цікавим для мене стало представлення Roadmap проекту, що включає опис планованих можливостей версій 3.2 та 4, а також деяких додаткових можливостей. На жаль, поки невідома конкретна дата виходу 3.2, на яку особисто я чекаю з нетерпінням з огляду на наближення моменту виходу на публіку робочого проекту, що працює поки на останньому стабільному випускові.
Новини CF-OpenSource v16
Цей спец-випуск присвячено виходу нових версій двох прогресивних фреймворків.
Команда розробників CFWheels невпинно наближається до великого релізу, тим часом випустивши оновлення за номером 1.0.5.
Воно включає в себе більш як 2 десятки виправлень. Повний їх список можна переглянути в публікації Released: ColdFusion on Wheels 1.0.5
Натомість Шон Корфілд (Sean Corfield) його вже досяг, повідомивши про вихід версії 1.1.
Серед оновлень:
- Рекомендований скелет додатку.
- Більш гнучка конфігурація підсистем та контролерів.
- Нові можливості API.
Повний список можна переглянути в публікації FW/1 Release 1.1 Available!
Adobe Enterprise Cafe
Корпорация Adobe и сообщество регулярно доставляет выдает килотонны информации, которую бывает сложно собрать и осмыслить. В помощь утопающим в потоке, Adobe выпустила тулзень Adobe Enterprise Cafe - AIR-программу для отображения новостей, сбора фидов с блогов, видео Adobe TV и т.д. До этого я припоминаю только Adobe Coldfusion Box, но эта тулза довольно узко-специализирован на Coldfusion в Европе.
Flex+Railo+BlazeDS+MySQL+Tomcat+Apache+Linux
При всем уважении к Матушке-Coldfusion, нельзя забывать что она стоит денег. Деньги большие, но на каждый доллар инвестиций покупатель получает очень много. К сожалению, не все могут оплатить стоимость лицензии, однако это не повод считать их людьми второго сорта. Все перечисленные в заголовке технологии - бесплатны, два первых - продукты Adobe. Если знаешь Java, можно обойтись без Railo, но скорость разработки будет существенно меньше. Все одно, получается, что задаром, можно легко создавать классные RIA !
Coldfusion 9 и проблема с Apache Virtualhost
После "чистой" установки Coldfusion 9 возникла странная проблема. Виртуальные хосты Apache 2.2 не работали, и документы *.cfm отдавались только по прямой ссылке в текстовом виде. То есть казалось, что проблемы две - неработающая Coldfusion и неработающие хосты. Однако, оказалось что инсталлятор не добавил handler, и обе проблемы решились одновременно, исправлением httpd.conf - в строчке AddHandler надо добавить .cfm и .cfc
# JRun Settings
LoadModule jrun_module "C:/ColdFusion9/runtime/lib/wsconfig/2/mod_jrun22.so"
<IfModule mod_jrun22.c>
JRunConfig Verbose false
JRunConfig Apialloc false
JRunConfig Ignoresuffixmap false
JRunConfig Serverstore "C:/ColdFusion9/runtime/lib/wsconfig/2/jrunserver.store"
JRunConfig Bootstrap 127.0.0.1:51800
AddHandler jrun-handler .jsp .jws .cfm .cfc
</IfModule>
Не забыть про DirectoryIndex:
<IfModule dir_module>
DirectoryIndex index.cfm index.html index.htm
</IfModule>
Виртуал хосты соответственно:
NameVirtualHost *:80
<VirtualHost *:80>
DocumentRoot "C:/inetpub/wwwroot/domain1"
ServerName domain1
</VirtualHost>
<VirtualHost *:80>
DocumentRoot "C:/inetpub/wwwroot/domain2"
ServerName domain2
</VirtualHost>
FW/1 теперь на GitHub
Новому фреймворку - современное хранилище ! Будет также уместна эта ссылочка - как начать работать с Git и GitHub под Windows.
Мир! Труд! Май!
Диалекты CFML в Coldfusion Builder
Несмотря на название, Coldfusion Builder позволяет расширить Code Assisst диалектами Railo и BlueDragon. Мэтт Гиффорд (Matt Gifford) описал методику создания новых словарей. Методика применима и к CFEclipse.
Обновлены Adobe Groups
Запущена новая версия Adobe Groups. Сила особенно качественно пребыла с Coldfusion-Джедаем, код Adobe Groups был полностью переписан на Coldfusion 9 с использованием Model-Glue и ORM.
Кончился срок старых CF Builder Beta
Сегодня истек срок действия старых бета-версий CF Builder - хороший повод пойти скачать релиз ! Триал действует 60 дней.
Fail при скачивании файла с помощью CFContent
С помощью Coldfusion очень легко организовать файловое хранилище с функцией поиска. Coldfusion без труда может проиндексировать PDF и другие документы с помощью Verity или Solr, может поработать с картинками с помощью CFImage и покопаться в метаданных, может даже вытащить теги из MP3 записей. Однако, проблема может ждать там где не ожидаешь - Coldfusion пасует при скачивании больших файлов (больше 1ГБ).
Организовать процесс скачивания файла, да еще спрятать настоящее размещение (название) файла можно двумя строчками:
<cfheader name="Content-Disposition" value="attachment; filename="someothername.avi" />
<cfcontent file="c:/somefile.avi" />
Однако, этот простейший код оказывается весьма прожорливым, когда речь идет о скачивании больших файлов. При скачивании 100МБ файлов никаких трудностей не возникло. При этом, вместо ожиданного видео-файла размером 1ГБ, я смотрел на "Ошибку 500, сервис недоступен". Coldfusion занимал в памяти около 450МБ в состоянии покоя. График потребление памяти таков:
Попробовал перегрузить сервис, в надежде что он освободит немного памяти, но безрезультатно:
Потом немного прибавил памяти виртуальной Java-машине, с 512МБ по-умолчанию до 768МБ. Не помогло.
Тестировалось на первом официальном релизе Coldfusion 9.0.0.251028, под Windows Vista, на компьютере с 2-ядерным процессором и 2ГБ оперативки. Тестировалось на J2EE инсталляции Coldfusion + Glassfish, а также на чистом обычном Coldfusion (JRun). В качестве веб-сервера выступали и IIS и Apache.
Решения проблемы скачивания 1ГБ файлов у меня пока нет. Могу сказать одно - Railo 3.1 установленный на Tomcat 6 справился с задачей на отлично - при этом потребление памяти выросло с 37 до 42 МБ...
Вышли в свет CFBuilder, Flex Builder 4 и Flex 4 SDK
В этот теплый мартовский день Adobe преподносит тройную порцию удовольствия - первая версия Coldfusion Builder и четвертая версия Flash Builder официально доступны для широкой публики. Плюс к этому Adobe Flex SDK 4.0.0.14159 становится официальным релизом.
Офіційно розпочато продажі ColdFusion Builder
Відсьогодні офіційно можна придбати CFBuilder. Незважаючи на ряд побоювань щодо ціни, вона складає цілком прийнятні $299, а для ще більшого заохочення дистрибутив включає ще й Flash Builder 4 Standard.
Варто зауважити, що також доступна trial-версія, котру можна завантажити звідси та спробувати протягом 60-ти днів.
Як і для бета-версій, наявні версії тільки для Mac та Windows, що для мене означає те, що я ще на невизначений строк залишатимусь з CFEclipse :)
RSS