我有一个apkmirror-scraper-compose目录,结构如下:

.
├── docker-compose.yml
├── privoxy
│   ├── config
│   └── Dockerfile
├── scraper
│   ├── Dockerfile
│   ├── newnym.py
│   └── requirements.txt
└── tor
    └── Dockerfile

我正在尝试运行以下docker-compose.yml:

version: '3'

services:
  privoxy:
    build: ./privoxy
    ports:
      - "8118:8118"
    links:
      - tor

  tor:
    build:
      context: ./tor
      args:
        password: ""
    ports:
      - "9050:9050"
      - "9051:9051"

  scraper:
    build: ./scraper
    links:
      - tor
      - privoxy

Dockerfile for tor在哪里

FROM alpine:latest
EXPOSE 9050 9051
ARG password
RUN apk --update add tor
RUN echo "ControlPort 9051" >> /etc/tor/torrc
RUN echo "HashedControlPassword $(tor --quiet --hash-password $password)" >> /etc/tor/torrc
CMD ["tor"]

这对于privoxy是

FROM alpine:latest
EXPOSE 8118
RUN apk --update add privoxy
COPY config /etc/privoxy/config
CMD ["privoxy", "--no-daemon"]

其中配置由两行组成

listen-address 0.0.0.0:8118
forward-socks5 / tor:9050 .

scraper的Dockerfile为

FROM python:2.7-alpine
ADD . /scraper
WORKDIR /scraper
RUN pip install -r requirements.txt
CMD ["python", "newnym.py"]

其中requirements.txt包含单行请求。最后,程序newnym.py被设计成简单地测试使用Tor更改IP地址是否有效:

from time import sleep, time

import requests as req
import telnetlib


def get_ip():
    IPECHO_ENDPOINT = 'http://ipecho.net/plain'
    HTTP_PROXY = 'http://privoxy:8118'
    return req.get(IPECHO_ENDPOINT, proxies={'http': HTTP_PROXY}).text


def request_ip_change():
    tn = telnetlib.Telnet('tor', 9051)
    tn.read_until("Escape character is '^]'.", 2)
    tn.write('AUTHENTICATE ""\r\n')
    tn.read_until("250 OK", 2)
    tn.write("signal NEWNYM\r\n")
    tn.read_until("250 OK", 2)
    tn.write("quit\r\n")
    tn.close()


if __name__ == '__main__':
    dts = []
    try:
        while True:
            ip = get_ip()
            t0 = time()
            request_ip_change()
            while True:
                new_ip = get_ip()
                if new_ip == ip:
                    sleep(1)
                else:
                    break
            dt = time() - t0
            dts.append(dt)
            print("{} -> {} in ~{}s".format(ip, new_ip, int(dt)))
    except KeyboardInterrupt:
        print("Stopping...")
        print("Average: {}".format(sum(dts) / len(dts)))

docker-compose构建成功,但如果我尝试docker-compose up,我得到以下错误消息:

Creating network "apkmirrorscrapercompose_default" with the default driver
ERROR: could not find an available, non-overlapping IPv4 address pool among the defaults to assign to the network

我尝试搜索关于此错误消息的帮助,但无法找到任何帮助。是什么导致了这个错误?


当前回答

我在一个没有运行OpenVPN的公司开发虚拟机上遇到了这个问题。签出etc/docker/daemon。json,我找到了

...
"default-address-pools": [
  {
    "base": "192.168.11.0/24",
    "size": 24
  }
],
...

奇怪的是,删除default-address-pools字段,然后用sudo systemctl restart docker重新启动docker,为我解决了这个问题。我假设这让docker选择一个更合适的默认值,但我不知道选择的默认值有什么问题。

其他回答

如果你想要大量的网络,那么你可以通过默认的地址池守护设置来控制docker给每个网络分配多少IP空间,所以你可以把这个添加到你的/etc/docker/daemon.json:

{
  "bip": "10.254.1.1/24",
  "default-address-pools":[{"base":"10.254.0.0/16","size":28}],
}

这里我为网桥网络保留了10.254.1.1/24(254个IP地址)。

对于我创建的任何其他网络,docker将划分10.254.0.0空间(65k主机),一次给出16个主机(“size”:28指CIDR掩码,用于16个主机)。

如果我创建了几个网络,然后在它们上运行docker network inspect <name>,它可能会显示如下内容:

        ...
        "Subnet": "10.254.0.32/28",
        "Gateway": "10.254.0.33"
        ...

10.254.0.32/28意味着该网络可以使用从10.254.0.32到10.254.0.47的16个ip地址。

我有一个相同的问题与相同的错误消息,但解决方案与删除未使用的docker网络没有帮助我。我已经删除了所有非默认的docker网络(以及所有映像和容器),但这并没有帮助- docker仍然不能创建一个新的网络。

问题的原因是OpenVpn安装后留下的网络接口。(之前安装在主机上)我通过运行ifconfig命令找到了它们:

...
tun0  Link encap:UNSPEC  HWaddr 00-00-00-00-00-00-00-00-00-00-00-00-00-00-00-00  
      inet addr:10.8.0.2  P-t-P:10.8.0.2  Mask:255.255.255.0
      UP POINTOPOINT RUNNING NOARP MULTICAST  MTU:1500  Metric:1
      RX packets:75 errors:0 dropped:0 overruns:0 frame:0
      TX packets:0 errors:0 dropped:0 overruns:0 carrier:0
      collisions:0 txqueuelen:100 
      RX bytes:84304 (84.3 KB)  TX bytes:0 (0.0 B)

tun1  Link encap:UNSPEC  HWaddr 00-00-00-00-00-00-00-00-00-00-00-00-00-00-00-00  
      inet addr:10.8.0.2  P-t-P:10.8.0.2  Mask:255.255.255.0
      UP POINTOPOINT RUNNING NOARP MULTICAST  MTU:1500  Metric:1
      RX packets:200496 errors:0 dropped:0 overruns:0 frame:0
      TX packets:148828 errors:0 dropped:0 overruns:0 carrier:0
      collisions:0 txqueuelen:100 
      RX bytes:211583838 (211.5 MB)  TX bytes:9568906 (9.5 MB)
...

我发现我可以用几个命令删除它们:

ip link delete tun0
ip link delete tun1

在此之后,问题消失了。

我也犯了同样的错误,但在我的例子中,这是因为我运行了太多的容器(大约220个)。

根据Peter Hauge的评论,在运行docker network ls时,我看到了以下(在其他行中):

NETWORK ID          NAME                                    DRIVER              SCOPE
dc6a83d13f44        bridge                                  bridge              local
ea98225c7754        docker_gwbridge                         bridge              local
107dcd8aa889        host                                    host                local

NAME和DRIVER都作为主机的那一行似乎就是他所说的“在你的主机上已经创建了网络”。因此,在https://gist.github.com/bastman/5b57ddb3c11942094f8d0a97d461b430后面,我运行命令

docker network rm $(docker network ls | grep "bridge" | awk '/ / { print $1 }')

现在,docker-compose up工作了(尽管newnym.py会产生错误)。

docker network prune

在2022年9月,在ubuntu 20服务器上运行良好。