Блог Димка » Программирование

Моя система бекапов

dimok — Mon, 18 Jul 2011 11:54:07 +0000

Шакин написал о том, как он делает бекапы. Это крайне важная тема для любого человека, который работает в сети, да и просто создает что-либо с использованием компьютера.

Я расскажу о том, как бекапятся мои проекты. Последний раз про бекапы я писал более 3-х лет назад: бекап личных данных. Сегодня речь немного глобальнее.

Итак, схема бекапов выглядит примерно так:

Думаю, тут и писать много не нужно. На каждом сервере винты в RAID, причем крайне желательно хардварный, а не софтовый.

Замечу: что серверов типа "Сервер 1" много, причем какие-то виндовые, какие-то никсовые.

Для проектов типа Ротапост есть еще девелоперский сервер, на который также делаются бекапы. Про софт не спрашивайте - программисты писали конкретно под наши задачи.

Если есть вопросы - задавайте.

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Как получить количество Twitter фолловеров

dimok — Sat, 06 Nov 2010 07:16:05 +0000

Ссылки навсегда - работают, да!

Помимо привычных виджетов и кнопок можно количество фолловеров вашего твиттер аккаунта получить в виде числа и использоваться так, как понадобится. Например, я делаю так:

Это можно видеть внизу каждой страницы моего блога (под облаком тегов). В посте я покажу, как это сделать для движка WordPress.

Итак, делается все в два этапа:

Добавляем функцию в functions.php вашей темы

Это можно сделать и через редактирование шаблона wordpress либо по FTP.

function get_follower_count() {

$count = get_transient('follower_count');

if ($count !== false) return $count;

$count = 0;

$data = wp_remote_get('http://api.twitter.com/1/users/show.json?screen_name=dimokru');

if (!is_wp_error($data)) {

$value = json_decode($data['body'],true);

$count = $value['followers_count'];

}

set_transient('follower_count', $count, 60*60); // кеш на 1 час

return $count;

}

Я выделил цветом имя аккаунта - замените на свое. Обновляться значение будет не чаще, чем раз в час - можно поставить собственное значение, конечно.

Выводим на блоге значение

Теперь в нужном месте шаблона надо поставить следующий код:

Уверен, это можно как-то более креативно обыграть, чем кнопку с количеством фолловеров.

PS. Если у вас есть пример удачного использования подобного приема, то укажите в комментариях?

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Анализируем источники подписчиков на блоге

dimok — Wed, 05 May 2010 05:10:49 +0000

Ссылки навсегда - работают, да!

В недавнем скринкасте "Создание целей конвертации в Google Analytics" я упомянул о том, что в Google Analytics можно отслеживать и клики по ссылкам. А это в свою очередь позволяет определить пользователей, которые, например, уходят на feedburner фид. Сегодня я расскажу, как это сделать.

Если на вашем аккаунте еще не были определены цели, то необходимо их сделать (смотрите скринкаст тут). Когда цели уже есть, то делаем следующее:

1. Размещаем до тега вот такой код:

2. Для нужных ссылок прописываем события onclick() (можно и другие события, которые вы считаете нужными - например, сабмит формы):

onClick="javascript: pageTracker._trackPageview('/out/rssfeed');"

Код этот прописываем ко всем ссылкам, которые ведут на RSS фид.

3. Добавляем цель:

То есть теперь в целевой странице указан несуществующий адрес, который передается в GA при клике по ссылке.

Результат:

Я специально подождал некоторое время, прежде, чем писать этот пост, чтобы статистика получилась нагляднее. Отчетливо видна эффективность различных источников трафика.

Если у вас есть отдельные страницы, которые рекламируют подписку на фид, то можно таким нехитрым приемом оценивать их конвертацию и выбирать лучшие.

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Оптимизация robots.txt для WordPress

dimok — Mon, 21 Dec 2009 15:23:37 +0000

Ссылки навсегда - работают, да!

Всем привет, вас снова приветствует SEOinSoul – автор SEO блога seoinsoul.ru, можете подписаться на RSS и зафоловить меня в Twitter. Это уже второй мой гостевой на блоге Димка, итак начнем…

Все наверняка знают, что такое robots.txt, для чего он нужен и с чем его едят. Если кто же все-таки не в курсе, robots.txt – это текстовый файл, в котором содержатся инструкции для роботов поисковых систем.

В нем можно запрещать индексацию страниц или разделов на сайте, указывать правильное зеркало домена, указывать наличие sitemap.xml. Есть еще много различных функций команд, но мы поговорим о самых основных, озвученных мною. И рассмотрим это на примере самого популярного на сегодняшний момент движка WordPress.

Составление этого файла должно быть одним из первых действий при создании сайта или его продвижении (если этого файла еще нет). Естественно, главное именно правильное его составление, т.к. при каких-либо недочетах могут возникнуть определенные проблемы с индексацией. Бытует мнение, которое несколько раз доказано на практике, что ПС иногда плюют на robots.txt и индексируют все подряд, но это очень большая редкость и уже совсем другая история Итак, какие команды потребуются нам для создания правильного роботса:

User-Agent

Указывается имя робота, к которому применяются правила, описанные в robots.txt (не должно быть пустым)

Allow и Disallow

Разрешается, и, соответственно, запрещается доступ к некоторым разделам сайта, либо к всему ресурсу целиком. Allow поддерживается только Яндексом и Гуглом.

Сначала нужно использовать директиву Allow, а только после нее Disallow, и между ними не должно быть пустой строки, как собственно и с директивой User-Agent.

Host

Указание главного зеркала сайта. Используется только для Яндекса, который пишет по этому поводу: «Данная директива не гарантирует выбор указанного главного зеркала, тем не менее, алгоритм при принятии решения учитывает ее с высоким приоритетом»

Sitemap

Указание роботу наличия и пути карты сайта в формате xml

Существуют также спецсимвол *, который означает любую последовательность символов. Теперь перейдем к самому созданию robots.txt - создаем обычный текстовый файл и начинаем с первой директивы User-Agent. Вот список самых актуальных ботов для РУнета – Yandex, YandexBlog, Googlebot, StackRambler, msnbot (бот Bing).

Если же обычный сайт, тогда лично для себя, я не выделяю конкретных ботов, а пишу единое правило для всех, если блог – тогда вначале нужно выделить бота Яндекс.Блогов и разрешить ему все, т.к. он ходит только по фидам и в админку и прочие не нужные разделы сам не полезет:

User-agent: YandexBlog
Disallow:

User-Agent: *
…

Если будете использовать несколько юзерагентов, тогда перед каждым последующим обязательно должна быть пустая строка! И начинать лучше с конкретных роботов, а только потом использовать *. Так, теперь директивы Allow и Disallow.

Allow: /wp-content/uploads/
#здесь мы открываем доступ только к папке uploads для трафика по картинкам (в ней хранятся изображения загруженные через админку wp), т.к. затем будем закрывать от индексации папку более верхнего уровня wp-content.

Переходим к Disallow - очень важная директива. С ее помощью можно закрывать разделы, в которых дублируются контент – это теги, категории, архивы, календарь и т.д. Что и как закрывать, я приведу пример, а дальше дело за вами, т.к. могу сказать по своему и чужому опыту, что без каких-либо других грубых нарушений (проблемы с хостингом, откровенный ГС, некачественный рерайт или вообще украденный контент) за дублирование текста в рамках одного домена - не будет наложено никаких санкций и фильтров!

Поэтому не бойтесь этого, делая нормальные, качественные сайты с уникальным контентом (пусть даже сателлиты). Сначала закрываем служебные директории (страницы регистрации и авторизации, админку, страницы темы, плагины):

Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content

Теперь уже выбор за вами, какие разделы вашего сайта или блога на WP, я лишь приведу пример закрытия популярных разделов:

Disallow: /tag
#вполне можно продвигать страницы тегов в поисковых системах, поэтому дважды подумайте перед закрытием их от индексации
Disallow: /category
Disallow: /archive
#будьте осторожны, обратите внимание на то, каким образом у вас в блоге выводятся статьи, т.к. в блоге статьи могут иметь урл – http://ваш сайт/archive/123, и вы можете закрыть их от индексации
Disallow: /author
#если таковой присутствует в вашем шаблоне

Теперь закрываем от индексации фиды, различные трекбеки, комментарии в вашем фиде и страницы поиска по сайту:

Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=

И наконец, две последние директивы:

Host: ваш сайт.ru
Sitemap: http:// ваш сайт.ru/sitemap.xml

С путем к карте сайта в формате xml думаю все понятно, а при указании главного зеркала, лично я почти всегда использую вариант без www, т.к. почти в каждом случае доменное имя так смотрится и запоминается лучше. Если же домен лучше упоминать с www, тогда укажите это в директиве Host.

Также существует еще несколько директив, которые помогут владельцам сайтов, например: Crawl-delay, Clean-param (о применении которого я писал, после выхода этой директивы - ”Яндекс вводит новую директиву для robots.txt”). Описание и применение всех этих директив, применительно к самой популярной поисковой системе - Яндексу, можно найти в его хелпе. В итоге у нас получается следующий robots.txt, который полностью готов для применения его на своем блоге:

User-agent: YandexBlog
Disallow:

User-Agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=

Host: ваш сайт.ru
Sitemap: http://ваш сайт.ru/sitemap.xml

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Карта сайта: HTML или XML

dimok — Mon, 12 Oct 2009 10:09:00 +0000

Ссылки навсегда - работают, да!

Мнение Мэта Катса из Гугл по поводу того, в каком формате должна быть карта сайта (sitemap):

Суть в том, что если бы у Мэта была проблема выбора одной из карт сайта, то он бы выбрал HTML. Но в общем случае, лучше использовать обе карты.

Еще интересная фраза прозвучала у него: “Если вы используете XML sitemap, то Гугл не гарантирует, что страницы с этой карты будут проиндексированы”.

Таким образом, классическую карту сайта делать надо! Я заметил, что далеко не на всех своих сайтах я ее сделал – буду исправлять ситуацию.

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Google разрабатывает новый тип капчи

dimok — Mon, 20 Apr 2009 09:50:42 +0000

Ссылки навсегда - работают, да!

Очень интересными разработками занимаются исследователи из Гугл: создают новую надежную капчу. Это будет вращающаяся капча - задача юзера в том, что повернуть картинку так, как она должна бы выглядеть. Примеры:

Для капчей будут отбираться картинки в основном из поиска по картинкам Гугл, исключая слишком простые варианты и слишком неоднозначные. Кроме того, пользователям должно быть забавно разгадывать такие капчи вместо трудно читаемых последовательностей букв.

Пример интерфейса для вращающейся капчи:

По-моему, великолепно!

Источник тут.

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Шпаргалки для оптимизаторов

dimok — Fri, 06 Mar 2009 15:00:04 +0000

Ссылки навсегда - работают, да!

Шпаргалки (ака Cheat Sheets) - это удобно и полезно, потому что содержат максимум полезной информации в сжатой форме и в удобном формате.

Наиболее интересными для оптимизаторов будут шпаргалки: The Web Developer's SEO Cheat Sheet.

>> Скачать в формате PDF.

Другие полезные шпаргалки для оптимизаторов:

Разработчикам:

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Подборка AJAX Tutorials

dimok — Fri, 17 Oct 2008 09:53:09 +0000

Ссылки навсегда - работают, да!

Ajax есть уже практически на всех сайтах. И это действительно удобно. Smashing Magazine собрал очень неплохую коллекцию уроков по Ajax, а я сделал выборку из их архива:

AJAX Username Availability Checker Using MooTools 1.2 - проверяет выбранный при регистрации юзера ник на занятость
Creating a Dynamic Poll with jQuery and PHP - динамический опрос с использованием jQuery
RSS AJAX JavaScript Ticker - тикер с загловками с других блогов
PHP Components: Autosuggest и AutoCompleter Tutorial - автокомплит для полей ввода
Load Content While Scrolling with jQuery - подгружает контент при прокрутке (как например в гугл.ридере)
Build an AJAX Dropdown Menu - несложный способ сделать выпадающую менюшку

Эти и другие уроки тут: 50 Excellent AJAX Tutorials

См. также:

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Цепи Маркова или ищите русского

dimok — Fri, 04 Jul 2008 10:26:13 +0000

Ссылки навсегда - работают, да!

Читал я значит сегодня обзор конференции Search Marketing Expo Advanced 2008. В целом обзор интересный и есть хорошие мысли. Раньше вроде как мы отставали от забургорных оптимизаторов на 2-3 года, но сейчас я вижу, что все сильно меняется и теперь они нас пытаются догнать.

Кое-что меня убило просто наповал. Я прокомментирую кусок из текста (курсивом я выделяю перевод, нормальным шрифтом мои комментарии).

Automated content - generate unique content using software.

Генеренный контент с использованием специального софта. Это подтема у них такая.

Mikkel deMib Svennson introduced us to Markov Chains last year at Give It Up!
- it uses a mathematical equation to create unlimited content from a single source.
- downside is it's hard to perfect and the content produced doesn't pass human review

Некий товарищ открывает всем глаза, спалив тему с цепями Маркова:

алгоритм использует математические уравнения для создания неограниченного контента из одного источника
контент к сожалению не проходит ревью человеком

Вообще еще года ТРИ назад мы пробовали цепи Маркова. Гугл очень скоро их научился вычислять и не до какого человеческого ревью такой контент не доживает - банится автоматом. Ну про формулы не в тему - там вообще то мат статистика.

If you're not a coder, get someone off elance or a Russian. They're usually very Good. You can get someone to explode sentences to big arrays as variables. Randomly pick one sentence, then the second one, then the third, etc. The result is 6 articles with 25 sentneces that turns into 28 quintillion articles according to Yahoo answers (6^25). You still can get quite a bit of content.

Ну собственно, если вы не русский, то ищите русских - они все умеют. Берете большой массив предложений, а потом рандомом собираете из этих предложений уникальные тексты. И о чудо, с помощью яху.ответы они познали основы комбинаторики и посчитали количество комбинаций

Ну вообще говоря, тупая перетасовка предложений - это не сильно лучше Маркова. Но собственно, пусть идут по этому пути

Benefits: It passes human review because it makes sense. It's always sentence 1, sentence 2, sentence 3, and it looks unique. It's the fraction of the cost of copywriters. You can distribute articles across your microsite network. Submit content to every article directory with embedded links and offers the unique content to other sites in exchange for links (they'll think it's unique content).

Эти предложения осмысленные и типа должны проходить проверку человеком. Это всегда ерунда типа "предложение 1, предложение 2, предложение 3" и это выглядит уникальным. Вот именно что вылядит, а не является. Короче, экономьте на копирайтерах, генерите говно контент, пихайте в него ссылок и сливаться в каталоги (вокруг одни дибилы и они будут воспринимать это как уникальный контент). Я вот только не понимаю, кого они таким образом пытаются убедить в повсеместном идиотизме?

This is white hat, isn't it? It is, because content is king!

Это ж ведь белая оптимизация, правда? Да точно вам говорю, ведь контент - всему голова! Ога, именно так: вы теперь в полный рост белые и пушистые и только русские мастера - это спамеры и черношапочники. Или это просто модный аутотренинг для оптимизаторов-неудачников: "я белый оптимизатор, я генерю контент по алгоритмам, от которых русские отказались много лет назад, это все для людей, я хороший, я белый, это ни разу не спам и даже не намек на попытку обмануть кого-либо" (повторять по пять раз утром, вечером и после обеда).

Это просто финиш. Я всегда полагал, что там разумные люди и они вообще хоть что-то читают и пробуют. Оказывается, все не так просто.

Либо они действительно не в теме, либо конференция по сути просто развод наивных слушателей на бабки. А может у них это своеобразный пятничный юмор? Или я неправильно их понял? Поправьте меня, пожалуйста, если я в чем-то неправ.

Спонсор выпуска: Программное обеспечение для создания собственных безопасных e-mail рассылок

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

No related posts.

reddit стал open source

dimok — Fri, 20 Jun 2008 10:34:28 +0000

Ссылки навсегда - работают, да!

Одна из самых популярных социалок открывает для всех свои исходники.

Читать здесь: reddit goes open source. Теперь каждый может поиграться их софтом, помочь им в усовершенствовании и вообще оценить работу, проделанную реддитом.

Сайт для разработчиков: http://code.reddit.com

А вот видео, где рассказывается о причинах ухода в опен сорс:

PS. Для всех фанатов Мэта Катса: Who does Matt Cutts follow on Twitter? (список френдов Катса в твитере).

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Гугл разместил популярные JavaScript библиотеки

dimok — Thu, 29 May 2008 07:45:47 +0000

Ссылки навсегда - работают, да!

Гугл разместил популярные JavaScript библиотеки на своих серверах, которые как известно работают без сбоев и быстро откликаются в любой точке мира. Среди библиотек скриптов:

Теперь не обязательно хранить все библиотеки на своем сервере и думать об их обновлениях - все это берет на себя Гугл. А так как Гугл планирует существовать долго и счастливо, то такое решение удобно для многих разработчиков.

Вызываются библиотеки методом google.load(). Пример тут. Полная документация тут.

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Гуглбот теперь сабмитит формы на сайте

dimok — Mon, 14 Apr 2008 07:49:30 +0000

Ссылки навсегда - работают, да!

Официальное сообщение: Crawling through HTML forms

Гугл уже давно парсит flash и javascript, вытаскивая оттуда новые адреса страниц для индексации. Теперь для "очень качественных сайтов" Гугл сабмитит и формы на страницы, вводя туда слова с сайты и "играясь" всеми опциями.

Гугл сабмитит только GET формы, причем не содержащие поля типа "логин", "пароль" и т.п.

Кроме того, Гугл рекомендует все формы, которые меняют что-то на сервере, отправлять методом POST - такие Гугл не будет сабмитить. Получается, что Гугл теперь не только самопроизвольно индексирует сайты (а если вы хотите от него укрыться, то должны запрещать это специально - это тема давно уже вызывает споры), но теперь еще и формы надо переделывать, чтобы вдруг не случилось сюрприза, когда Гугл начнет их сабмитить и наполнять базу хламом.

Например, Гугл ведь может засабмитить формочку опроса или поиска - это все обычно складывается в архив на сервера. Если Гугл будет вбивать все слова в поиск, да еще и опции различные пробовать, то статистика на сервере может быть сильно испорчена.

Еще по теме: Googlebot Submitting Forms to Find More Pages

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Google App Engine станет конкурентом Amazon S3

dimok — Tue, 08 Apr 2008 06:47:18 +0000

Ссылки навсегда - работают, да!

Google App Engine дает возможность разработчикам создавать веб приложения, используя ту же же мощную инфраструктуру, что и наши собственные приложения.

Google App Engine упрощает создание расширяемых приложений, которые вырастут от одного до милиона пользователей без головной боли над инфраструктурой!

Подробнее: Google App Engine. Уже доступно SDK для разработчиков.

Взято тут.

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Проблема с FeedBurner API

dimok — Mon, 22 Oct 2007 09:37:27 +0000

Ссылки навсегда - работают, да!

В комментариях мне настойчиво намекали на то, что надо использовать FeedBurner API для сбора данных для рейтинга блога.

Не вопрос - это красивое и легкое решение! Мы сделали. Однако выяснилось, что через API данные обновляются совсем не так, как мы видим на картинках. В 12-10 по московскому времени все картинки уже показывают обновленные данные, а в XML даже в 13-10 у многих блогов данные не обновлены. Поэтому на выходных рейтинг часто показывал старые данные.

Так что принято решение вновь распозновать цифры на картинке. Это немногим сложнее, но как показала практика намного надежнее.

Собственно, вывод: модным фичам доверяй, но обязательно проверяй!

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога:

Как структурировать каталог/рейтинг блогов

dimok — Fri, 19 Oct 2007 13:52:32 +0000

Ссылки навсегда - работают, да!

В связи с тем, что на рейтинге блогов вот-вот появятся категории, я задался вопросом, а как же лучше их организовать?

Вариантов как минимум два:

Дерево директорий. Каждый блог принадлежит одно категории.
Теги для блогов. Каждому блогу определяется несколько (не больше 5) тегов.

Теги сейчас очень популярны, но есть как минимум один серьезный минус: тегов может со временем стать огромное количество, причем некоторые будут означать одно и тоже, ведь каждый человек пишет схожие понятия по-своему. Например, веб2.0, веб 2.0, web 2.0, web2.0 - это все одно и тоже, но для скриптов это разные теги.

У кого какие мысли?

(с) Блог Димка (@dimokru): seo/smo, бизнес, блогосфера.

Монетизация блогов: ссылками, тизерами, баннерами

Похожие посты блога: