投稿

4月, 2017の投稿を表示しています

systemd-resolveの設定(Ubuntuなどの動的DNS設定)

systemd-resolveの設定(動的DNS設定) Ubuntuなど、systemd-resolveがデフォルトのDNSリゾルバーとなっているディストリビューションについて。 NetworkManagerやavahi-daemonの無効化、/etc/network/interfacesの設定はしなくて大丈夫です。 なお、下記のDNS設定を行わないと、Firefox Syncに失敗してしまいます。Google Chromeでのウェブ検索には影響はありませんが、Firefoxでは「support.mozilla.org」、「accounts.firefox.com」、「bugzilla.mozilla.org」などのサポートサイトの名前検索に失敗しますので、Mozilla のサービスを使うために、なんだか妙なのですが、Google の DNS を設定しましょう。 /etc/systemd/resolved.conf の編集 設定は下記のファイル順に構築されます。 /etc/systemd/resolved.conf /etc/systemd/resolved.conf.d/*.conf /run/systemd/resolved.conf.d/*.conf /usr/lib/systemd/resolved.conf.d/*.conf $ sudo vi /etc/systemd/resolved.conf おすすめはGoogleのPublic DNSを設定です。Googleを使うユーザーにとってはヒット率が高いようです。 [Resolve] DNS=8.8.8.8 8.8.4.4 2001:4860:4860::8888 2001:4860: 他のDNSとしては、ISPが提供しているDNSサーバーを指定する。プロバイダが提供しているDNSは接続ルータの管理者画面等で確認します。 [Resolve] DNS=xxx.xx.xxx.250 xxx.xx.xxx.254 systemd-resolve サービス再起動 $ sudo systemctl restart systemd-resolved.service 設定確認 GoogleのPublic DNSサーバー( 8.8...

ビックデータ関連技術発表年(Google)

論文発表 2003、Google GFS 2004、Google MapReduce 2006、Google Bigtable 2010、Google Percolator, Dremel(BigQuery) ソフトウェア発表 2007、Google Hadoop First Release 2008、Google HBase First Release 2010、Google Caffeine 2011、Twitter Storm 2012、Dremel Spanner Colossus 2013、Amazon Kinesis 2013、Drill Google検索システム Crawling MapRedece GFS(Google File System) MapRedeceではデータ処理がバッチ処理で行われるため、検索結果への反映までに時間がかかるという問題があった。 MapReduceの実装がHadoop、バッチ処理、Javaライブラリ(HiveQL in Hadoopなど) Dremel(BigQuery)、会話型クエリー、SQLライクの言語、入れ子構造(nested)の扱いが可能、カラム指向 Caffeine Colossus アプリケーションプラットフォーム App Engine Bigtable(NOSQL) BigQuery オープンソース化 Apache Hadoop ← MapRedece Apache HDFS ← GFS Apache HBase ← Bigtable Apache Drill ← Dremel 参考文献 「Google BigQueryではじめる 自前 ビックデータ処理入門」、清野克行、秀和システム、2014

コマンド備忘

パッケージ更新、修復 debian、ubuntuなどaptコマンド $ sudo apt update $ sudo apt upgrade $ sudo apt upgrade -y $ sudo apt update && sudo apt upgrade -y $ sudo apt-get update $ sudo apt-get upgrade $ sudo apt-get upgrade -y $ sudo apt-get update && sudo apt-get upgrade -y fedoraなどdnfコマンド $ sudo dnf update $ sudo dnf update -y $ sudo dnf update --refresh $ sudo install dnf-plugin-system-upgrade 古いカーネルの削除 古いパッケージの検索 $ dpkg --get-selections |grep linux- 削除実行 $ sudo apt-get remove linux-image-4.4.0-20-generic $ sudo apt-get purge linux-image-4.4.0-20-generic 複数削除 $ sudo apt-get --dry-run autoremove --purge linux-image-extra-4.4.0-{21,22,24,28,31,34,36,38,42,45}-generic $ sudo apt-get autoremove Grubメニューを更新 $ sudo update-grub サービス設定 ubuntu $ systemctl start ssh.service $ sysctl enable ssh.service Proxy設定 /etc/apt/apt.conf Acquire::http::Proxy "http://ip address:port/"; AutoProxy "http://proxy.example.com/wpad.dat...